AI公司的练级之道:如何更具扩展性?

作者: 读芯术 2020-04-14 12:03:49

本文转载自公众号“读芯术”(ID:AI_Discovery)

机器学习似乎已成为每个人都追求的一个宏大目标,超过80%的公司都正在研究至少一个AI项目。

图源:unsplash

在开始之前,最好先询问自己以下三个问题:

  •  “此机器学习模型的准确性如何?”
  • “培训时间多长?”
  • “需要多少培训数据?”

用户通常想知道新模型的装载需要多长时间,以及它的性能或推广效果如何,他们想要一种根据性能衡量总体成本的方法。但遗憾的是,以上问题的答案并不能解决这个问题。

它们甚至具有误导性。

模型训练只是冰山一角。获取合适的数据集以及清理、存储、聚合、标记、建立可靠的数据流和基础架构管道需要巨大成本,但大多数用户和AI / ML公司都忽略了这一点。

根据最近的研究,公司在AI / ML项目中将80%以上的时间用于数据准备和工程业务。换句话说,如果将大部分精力放在构建和训练模型上,则总的工程工作量和成本可能是预计的五倍。

此外,机器学习模糊了用户和软件开发商之间的界线。

AIaaS或MLaaS已经开始出现。随着数据的增长,云端模型不断改进。也正因如此,MLaaS的业务比SaaS更具挑战性。

资料来源:黄Bastiane

机器模型从训练数据中学习,因此缺乏高质量的数据,模型将无法良好运行。在大多数情况下,用户并不了解生成或注释适当数据集的最佳做法。

当系统性能不佳时,用户往往会归咎于模型。因此,AI / ML公司通常花费大量时间和资源进行培训并与用户合作,以确保数据质量,这成为AI公司与其客户之间的共同责任。

例如,要训练生产线上的缺陷检查模型,计算机视觉公司需要与客户合作,以正确的角度和位置安装摄像头,检查分辨率和帧频,确保每个场景都有足够的正负面训练样本。

某些时候机器人或车辆需要人为操作,因此使用机器人技术或自动驾驶汽车应用程序进行数据收集更加耗时且成本更高。

即使进行了培训课程,且看完了所有用户手册和指南,你仍然不能完全控制用户生成的数据。一家机器视觉相机公司告诉我,他们的工程师会手动验证所有数据以确保其完整输入。

图源:unsplash

所有这些经常被忽视的额外培训、手动检查、数据清理和标记任务会给AI公司带来巨大的间接费用。这就是为什么要建立更具可扩展性的AI/ML项目的原因。那么该如何解决这个问题呢?

1. 可扩展性是关键。

确定大量客户愿意购买的正确用例,并使用相同的模型体系结构解决。最后,你需要在没有标准产品的情况下为不同的公司构建和训练不同的模型。

2. 尽量提供自助服务。

尽可能使培训和数据管道自动化,以提高运营效率并减少对体力劳动的依赖。相比较内部工具或自动化,公司更看重开放客户可见的功能,但是前者很快就会收到回报,你需要确保为内部流程自动化分配足够的资源。

3. 最后,确定并跟踪成本,尤其是隐性成本。

工程师花费了多少时间清理、过滤或聚合数据?他们花费多少时间来确保第三方正确完成注释?他们需要多久帮助客户设置环境并正确收集数据?其中有多少可以自动化或外包?

练级之路可能艰难而漫长,但有些问题是迟早都需要面对的。

AI 扩展性 机器学习
上一篇:使用专用服务器进行机器学习的重要性与日俱增 下一篇:智能技术可以帮助解决人口老龄化问题吗?
评论
取消
暂无评论,快去成为第一个评论的人吧

更多资讯推荐

2021年人工智能与自动化的发展趋势

自动化正在成为许多市场的首要任务,特别是随着远程工作的增长和劳动力短缺改变了传统的工作模式,很多企业转而采用更可持续的自动化解决方案。

Shelby Hiter ·  2天前
AI视频分析技术是如何工作的?原理是什么?

实时 AI 视频分析是一种基于人工智能的技术,可分析视频流以检测特定行为和事件的展开。这种类型的系统通过人工智能机器学习引擎检查来自监控摄像头的视频流来进行相关工作。该引擎使用一系列算法和程序来理解数据,并将数据转换为可理解的、有意义的信息。

EasyNVR ·  2天前
如何使用Auto-Sklearn和Auto-PyTorch实现自动化机器学习

如今,机器学习(ML)正在广泛地影响着商业、工程、以及研究等领域。通常,机器学习水平的进步,与软件和自动化的深入迭代有着密切的关系。

陈峻 ·  2天前
麻省理工学院使用AI加速3D打印新材料的发现

为了缩短发现这些新材料所需的时间,麻省理工学院的研究人员开发了一种数据驱动的过程,该过程使用机器学习来优化具有多种特性,如韧性和抗压强度的新型3D打印材料。

Yu ·  2天前
Alphabet的Wing公司将其无人机送货服务带到达拉斯·沃斯堡地区

Google母公司Alphabet的子公司Wing正在将其无人机送货服务带到德克萨斯州的城市,这是其第一个人口稠密的市场。

cnBeta ·  2天前
人工智能初创公司该如何取得成功?Gartner:“以下几点缺一不可”

近期,权威机构Gartner发布了关于大中华区人工智能初创公司的相关报告,旨在提供给技术购买者,即一般的企业要购买人工智能技术产品时,应如何评估这些人工智能初创公司。

陈赫 ·  2天前
人工智能与呼叫中心的“碰撞”,撞出一个新时代

自上世纪60年代以来,呼叫中心就一直存在,在美国国家航空航天局的任务控制中心里,经常可以看到人们戴着电话耳机进行电视转播节目的画面,从而获得了主流的关注。自此以后,呼叫中心通常被认为是必要的。

点控互联 ·  3天前
人工智能能否阻止未来战争?

形势的复杂性、敌对双方的棘手立场以及不断上升的成本,正在推动寻找基于人工智能的方法,以替代人类解决法律案件、国际争端和军事冲突。

中国指挥与控制学会 ·  3天前
Copyright©2005-2021 51CTO.COM 版权所有 未经许可 请勿转载