Uber 开源用于调试 AI 模型的可视化工具 Manifold

作者: xplanet 2020-01-13 07:40:59

 调试机器学习模型并非易事,Uber 官方博客称“人们通常将 20% 的精力用于建立初始工作模型,而 80% 的精力用于改善模型性能”。为此,他们开发并开源了 Manifold,这是一款用于机器学习的视觉调试工具,可用于诊断并调试机器学习模型中的问题。

Manifold 能够通过显示性能较好和较差的数据子集之间的特征分布差异来解释模型性能不佳的潜在原因。并且,它可以显示几个候选模型对于每个数据子集具有何种不同的预测精度,从而为诸如模型集成之类的高级处理提供了依据。

第一个开源版本的 Manifold 中添加了各种功能,包括:

  • 与模型无关的通用二进制分类和回归模型调试支持。用户将能够分析和比较各种算法类型的模型,从而使他们能够区分各种数据片的性能差异。
  • 对表格化要素输入的可视化支持,包括数字,分类和地理空间要素类型。使用每个数据切片的特征值分布信息,用户可以更好地了解某些性能问题的潜在原因,例如,模型的预测损失与其数据点的地理位置和分布之间是否存在任何关联。

  • 与 Jupyter Notebook 集成。通过这种集成,Manifold 接受数据输入作为 Pandas DataFrame 对象,并在 Jupyter 中呈现此数据的可视化。由于 Jupyter Notebook 是数据科学家和ML工程师使用最广泛的数据科学平台之一,因此该集成使用户能够在不中断正常工作流程的情况下分析其模型。

  • 基于每个实例的预测损失和其他特征值的交互式数据切片和性能比较。用户将能够基于预测损失、地面真实性或其他感兴趣的特征对数据进行切片和查询。该功能将使用户能够通过通用的数据切片逻辑快速验证或拒绝其假设。

更多介绍可查看 Uber 官方博客:https://eng.uber.com/manifold-open-source/

AI 行业 人工智能
上一篇:机器人的崛起:新技术改变传统行业 下一篇:CES 2020 上的 AI 读心术
评论
取消
暂无评论,快去成为第一个评论的人吧

更多资讯推荐

人工智能已经发展到诺贝尔奖级别

人工智能(AI)已经踏入了诺贝尔奖领域。最近诞生了一项让人产生这种感觉的研究成果。据称,美国Alphabet(谷歌母公司)旗下的英国DeepMind公司开发出了可解决困扰人类长达半世纪的生物学难题的AI技术。

佚名 ·  2021-02-07 09:35:33
认知图谱是人工智能的下一个瑰宝

随着技术的进步,AI应用在我们的生活中越来越多,但是大多数 AI 在语言理解、视觉场景理解、决策分析等方面的举步维艰,其原因是当前的 AI 缺少信息进入“大脑”后的加工、理解和思考等,做的只是相对简单的比对和识别,仅仅停留在“感知”阶段,而非“认知”。而基于知识图谱、认知推理、逻辑表达的认知图谱成为了解决此问题的方案之一。

佚名 ·  2021-01-06 14:14:05
加速企业级AI基础设施建设 「第四范式」完成C+轮融资 估值约20亿美元

「第四范式」近期宣布完成C+轮融资,C轮两次融资总额达2.3亿美元。新战略股东包括思科、中信银行、联想,财务资方为松禾资本、基石资本,投后估值约20亿美元。

佚名 ·  2020-12-30 17:17:32
15个可交互的真实房屋场景,李飞飞组开源大型室内场景模拟环境

在这项研究中,斯坦福视觉与学习实验室(SVL)Silvio / 李飞飞组的研究者推出了一个全新的模拟环境 iGibson,从而可以为大型真实场景中的交互任务开发机器人解决方案。

沈博魁、夏斐、李承澍、Roberto Martín-Martín ·  2020-12-11 08:54:40
人类未来将拥有 “第三脑”,5G 让一切加速

5G 时代的到来使经济数字化和科学数字化得以启动,大数据的收集将是 5G 时代的重要内容。但是,5G 本身并不能真正形成应用场景。如何将这些数据转变成真正对民生和企业有用的,真正能够赚钱和服务人群的产业链将是接下来要面临的问题。

许晓娜 ·  2020-12-04 08:18:21
微软研究院新成果:用手机相机远程测量心肺生命体征

微软研究院近日开发了一项新的技术 ,能够利用消费者手中的智能手机相机进行远程医疗等领域的非接触式生理测量。

cnBeta.COM ·  2020-12-04 06:06:33
搜索引擎新技能,阿里新研究用2D图片搜出3D模型

阿里技术团队研发了全新3D AI算法,可基于2D图片精准搜索出相应的3D模型,准确率大幅提升10%,可降低3D打印、VR看房、场景导购等领域的门槛。该研究成果已被AI顶会NeurIPS 2020收录。

佚名 ·  2020-12-03 14:49:13
AI无界,因你声动:微软携手公益和行业伙伴,以科技助力爱心绽放

12月2日,微软与周迅AI语音红丹丹公益项目发起人——鹿音苑文化传播公司、以及来自微软及各界的150名余志愿者,将创作的首批人工智能有声内容,包括鲁迅、老舍、萧红、朱自清等作家的一系列经典作品、红丹丹文化期刊,正式捐赠给北京市红丹丹视障文化服务中心(下文简称“红丹丹”)“心目图书馆”。红丹丹为微软、鹿音苑文化传播公司及志愿者代表授予志愿者证书。

佚名 ·  2020-12-02 17:45:39
Copyright©2005-2021 51CTO.COM 版权所有 未经许可 请勿转载