Uber 开源用于调试 AI 模型的可视化工具 Manifold

作者: xplanet 2020-01-13 07:40:59

 调试机器学习模型并非易事,Uber 官方博客称“人们通常将 20% 的精力用于建立初始工作模型,而 80% 的精力用于改善模型性能”。为此,他们开发并开源了 Manifold,这是一款用于机器学习的视觉调试工具,可用于诊断并调试机器学习模型中的问题。

Manifold 能够通过显示性能较好和较差的数据子集之间的特征分布差异来解释模型性能不佳的潜在原因。并且,它可以显示几个候选模型对于每个数据子集具有何种不同的预测精度,从而为诸如模型集成之类的高级处理提供了依据。

第一个开源版本的 Manifold 中添加了各种功能,包括:

  • 与模型无关的通用二进制分类和回归模型调试支持。用户将能够分析和比较各种算法类型的模型,从而使他们能够区分各种数据片的性能差异。
  • 对表格化要素输入的可视化支持,包括数字,分类和地理空间要素类型。使用每个数据切片的特征值分布信息,用户可以更好地了解某些性能问题的潜在原因,例如,模型的预测损失与其数据点的地理位置和分布之间是否存在任何关联。

  • 与 Jupyter Notebook 集成。通过这种集成,Manifold 接受数据输入作为 Pandas DataFrame 对象,并在 Jupyter 中呈现此数据的可视化。由于 Jupyter Notebook 是数据科学家和ML工程师使用最广泛的数据科学平台之一,因此该集成使用户能够在不中断正常工作流程的情况下分析其模型。

  • 基于每个实例的预测损失和其他特征值的交互式数据切片和性能比较。用户将能够基于预测损失、地面真实性或其他感兴趣的特征对数据进行切片和查询。该功能将使用户能够通过通用的数据切片逻辑快速验证或拒绝其假设。

更多介绍可查看 Uber 官方博客:https://eng.uber.com/manifold-open-source/

AI 行业 人工智能
上一篇:机器人的崛起:新技术改变传统行业 下一篇:CES 2020 上的 AI 读心术
评论
取消
暂无评论,快去成为第一个评论的人吧

更多资讯推荐

独家下载!阿里如何用 AI 写代码?

作为今年阿里经济体前端委员会的四大技术方向之一,前端智能化方向一被提及,就不免有人好奇:前端结合 AI 能做些什么,怎么做,未来会不会对前端产生很大的冲击等等。本篇文章将围绕这些问题,以「设计稿自动生成代码」场景为例,从背景分析、竞品分析、问题拆解、技术方案等几个角度切入,细述相关思考及过程实践。

妙净、波本 ·  3天前
CES 2020 上的 AI 读心术

在今年的消费电子展(Consumer Electronics Show)上,脱颖而出、成为最具变革性创新的产品,不是自动驾驶汽车、飞行汽车,甚至也不是洗碗机器人,而是能读懂你心思的可穿戴设备。

利荣 ·  2020-01-13 09:10:53
工信部科技司司长:芯片OS不突破 AI就是空中楼阁

近年来我国人工智能产业呈现出了蓬勃发展的良好态势。但与此同时,我国人工智能的基础技术还有较大的欠缺,能够真正创造商业价值的落地场景还比较少,传统行业与人工智能的融合还存在较高的门槛。

朝晖 ·  2019-12-17 10:50:27
阿里重磅开源全球首个批流一体机器学习平台Alink,Blink功能已全部贡献至Flink

11月28日,Flink Forward Asia 2019 在北京国家会议中心召开,阿里在会上发布Flink 1.10版本功能前瞻,同时宣布基于Flink的机器学习算法平台Alink正式开源,这也是全球首个批流一体的算法平台,旨在降低算法开发门槛,帮助开发者掌握机器学习的生命全周期。

蔡芳芳 ·  2019-11-29 10:02:53
给 AI 讲故事,如何教它脑补画面?

视觉想象力是人与生俱来的, AI 能否拥有类似的能力呢?比如:给出一段故事情节,如何让机器展开它的想象力,“脑补”出画面呢?看看阿里AI Labs 感知实验室的同学们如何解决这个问题。

源方 ·  2019-11-19 10:56:16
阿里的双 11,除了破纪录,还是一场 AI 秀 精选

在今年的天猫双 11 中,无论是在安全、服务,还是在购物方式上,都不乏 AI 技术的加持,俨然一场 AI 秀。

肖漫 ·  2019-11-11 09:39:54
快来了解这五种热门的开发技能

开发人员是热门的工作岗位之一,在Indeed网站的2019年最热门工作排行榜上名次靠前。随着企业对数字化转型项目的需求不断增加,对能够开发这些数字化应用软件的个人的需求随之而来。

布加迪 ·  2019-09-20 08:00:00
AI和IoT助力现代商业和零售

零售行业正在进行一场翻天覆地的转型。消费者不断改变购买和互动方式,零售企业构思和创建新商业的方方面面。

佚名 ·  2019-09-18 13:47:57
Copyright©2005-2020 51CTO.COM 版权所有 未经许可 请勿转载