AIIA 公布首轮AI芯片基准评测结果

作者: 佚名 2019-03-07 14:11:39

3月6日,由国际电信联盟、中国信息通信研究院联合主办,人工智能产业发展联盟(AIIA)和中兴通讯承办的国际论坛“AI in 5G——引领新时代论坛”在深圳召开。来自全球电信运营商、标准组织、互联网企业、设备厂商、高校等业界各方的专家和嘉宾共聚一堂,探讨AI赋能5G网络智能化以及行业应用创新。会上,AIIA正式发布“AIIA DNN benchmark V0.5”首轮评估结果,评估基于AIIA权威测试平台,在四大典型应用场景下,客观反映具有深度学习处理能力的处理器或加速器的性能水平。参与首轮评估的产品分别是:海思麒麟980和瑞芯微RK3399开发板。

国内权威AI芯片基准测试

AIIA副秘书长王爱华在论坛上介绍了评估的背景情况。为了切实反映当前AI芯片的能力,聚合更多AI芯片企业参与,推动市场的健康发展,在科技部、工信部、网信办的指导下,2018年10月AIIA联合国内众多具有代表性的应用企业、主流芯片企业及芯片工具企业,正式发布《人工智能端侧芯片基准测试评估方案Version 0.5》,并于2018年12月启动首轮评估工作。

图1:AIIA副秘书长王爱华介绍评估背景

首轮评估结果发布

AIIA DNN benchmark V0.5测试评估主要面向端侧,旨在客观反映具有深度神经网络加速能力的处理器在完成推断任务时的性能。AIIA总体组组长孙明俊向业界正式发布首轮评估结果。

图2:AIIA总体组组长孙明俊发布首轮评估结果

孙明俊表示,首轮评估包含四大典型场景(见图3)和两大类评测指标,指标包含速度(fps)和算法性能,如top1 、top5、mAP、mIoU、PSNR等。值得一提的是,这是深度学习处理器领域首次区分整型和浮点对比的Benchmark。

图3:评测指标及应用场景

AIIA DNN benchmark V0.5首轮测试对麒麟980和瑞芯微RK3399开发板两款产品进行了评估。

海思麒麟980——适用于手机终端Mate20系列,采用7nm工艺。具体评测结果如图4和图5所示。

图4:场景1下海思麒麟980评测结果

图5:场景2/3/4下海思麒麟980评测结果

瑞芯微 RK3399开发板——该芯片在安防等领域有广泛应用,采用28nm工艺。结果显示,在浮点模型不需要定点化重新训练的情况下,int8计算以精度损失最大为1%的代价,达到了相对于浮点计算两倍的性能(见图6)。

图6:瑞芯微RK3399开发板评测结果

评估工具开源

AIIA DNN benchmark V0.5测试评估工具采用开源方式,支持安卓系统,易于推广到所有 POSIX 兼容系统中,且用户可以根据项目文档,自行添加一个框架或者一个新模型。面向未来的市场需求,AIIA DNN benchmark项目将持续更新。

孙明俊介绍,v0.5版本的Benchmark工具可以对基于CPU/GPU/DSP/NPU的终端推断任务进行评测,支持评测的机器学习框架包括TensorFlow/Caffe。目前已经完成的移动端适配环境包括HiAI /SNPE/Tengine /TensorFlow Lite/ MACE/ NCNN 等。

项目代码已经开源到Github,链接为: https://github.com/AIIABenchmark/AIIABenchmark

v1.0 版评估方案即将发布

会上,西安交通大学任鹏举教授对AIIA DNN benchmark V0.5首轮评测的结果进行了解读,并向业界公布了评估方案的后续推进计划,AIIA DNN benchmark项目v1.0 正式版预计将于今年上半年正式发布。

图7:西安交通大学任鹏举教授解读v0.5版本评估结果

图8:v0.5版本评测结果分析

图9:v0.5版本评测结果分析

最后,ARM中国AI技术市场经理分享了题为《ARM中国周易开放AIoT应用平台》的演讲。他表示,ARM人工智能周易平台已顺利对接AIIA DNN Benchmark项目,旨在助力芯片公司为ARM芯片取得客观公正的AI性能评估报告,同时也方便应用算法公司的芯片选型。

图10:ARM中国AI技术市场经理发表演讲

未来,AIIA将顺应行业发展需要,持续迭代评估规范。AIIA DNN benchmark项目v1.0 正式版的评测对象将进一步丰富,覆盖语音、自动驾驶、安防等应用场景下的AI芯片。可以预见,基于开放、共赢的产业生态,AIIA DNN benchmark项目将吸引更多企业与开发者加入。

AIIA AI 芯片
上一篇:全国人大代表刘庆峰:2019年将是人工智能规模化应用落地年 下一篇:过去一年,全球关于人工智能伦理有了这些思考
评论
取消
暂无评论,快去成为第一个评论的人吧

更多资讯推荐

人工智能如何帮助痴呆症患者更独立地生活

在越来越多的人患有老年痴呆症,以技术为支撑人类照顾者和改善患者生活质量是当今的一种方式。特别是,我们希望使用技术来帮助痴呆症患者尽可能独立地生活。

美刻吃瓜 ·  9h前
人工智能、5G应用不再停留在“纸上蓝图” 数字经济发展提速

10月20-22日,《财经》新媒体记者在第六届世界互联网大会上了解到,与往年不同的是,经过几年的沉淀,互联网企业不再停留于“纸上蓝图”阶段,人工智能、5G、物联网等新业态的多场景应用正在加速落地。

军事哥谈 ·  9h前
超过美日,中国人工智能为什么领先全球?

中国已成为世界第二大经济体,并正在经历改革的二次出发,从传统资源驱动型为主导的发展模式向自主创新、科技驱动为主导的新兴模式转型升级。人工智能则被视为推进转型升级的新动能。

中国企业报 ·  20h前
AI如何改善采矿行业现状? 精选

人工智能的引入,有望将采矿业转化成一个更安全、利润空间更大且更为环保的行业。

佚名 ·  4天前
大小仅1MB!超轻量级的人脸识别模型火爆Github

近日,用户Linzaer在Github上开源了一款适用于边缘计算设备、移动端设备以及 PC 的超轻量级通用人脸检测模型,该模型文件大小仅1MB,一经开源就霸榜Github Trending榜单。

佚名 ·  4天前
AI艺术日渐繁荣,未来何去何从? 精选

利用人工智能创作而成的画作近年来越来越受瞩目,有的作品甚至能在知名拍卖行拍得高价。但这类作品仍有不少问题需要解答,比如它的作者是开发出算法的程序员还是计算机呢?AI艺术的市场未来将走向何方呢?

网易智能 ·  2019-10-17 08:50:25
人工智能进入大学校园带来了哪些变化

在一个人的教育生涯中,大学如何成为最好的学习体验?高等教育的目的就是发展技能,探索新理论,并将其应用于现实生活中。在整个学习期间,鼓励学生完成学习任务,熟练掌握技能,同时培养一个健康的、积极的、和谐的生活态度。

风车云马 ·  2019-10-16 09:00:00
图灵奖得主Yoshua Bengio:深度学习当务之急,是理解因果关系

深度学习擅长在大量数据中发现模式,但无法解释它们之间的联系,而图灵奖获得者Yoshua Bengio想要改变这一点。

佚名 ·  2019-10-15 05:15:00
Copyright©2005-2019 51CTO.COM 版权所有 未经许可 请勿转载