AI数据标注行业面临的5大发展困局丨曼孚科技
根据艾瑞咨询发布的行业白皮书显示,2018年中国人工智能基础数据服务市场规模为25.86亿元,预计2025年市场规模将突破113亿元,行业年复合增长率达到了23.5%。
作为人工智能产业的基石,数据标注行业正在从幕后走向前台,未来前景无限广阔。
然而,正如黎明前是一片无尽的黑暗一样,数据标注行业在蓬勃发展的背后也面临着诸多困局,这些困局已成为阻碍行业发展最大的绊脚石。
1. 人力成本突出
数据标注虽然披着人工智能的“外衣”,但是本质上仍然属于劳动密集型产业。
目前,国内从事数据标注行业的人群已达上千万,这其中90%的从业人员为数据标注员,这些数据标注员分散在大大小小的标注团队内。
以一个20人全职的小标注团队为例,平均每天每个人的人力成本大约在100-200元,每个月仅仅在人力成本上的消耗就达到了6万-12万,而一个周期在半个月以上的标注项目可能总合同金额不过几万元而已,这样的结果就是很多标注团队营利甚微或是压根就无法营利。

数据标注团队
事实上,很多标注团队的管理人员已经意识到人力成本对于团队发展的威胁,但是却很少有人选择以裁员的方式来减少此类成本,甚至很多团队顶着亏损的风险不断加人,原因无他,作为劳动密集型产业的数据标注行业,有足够的人力才能保证吃得下大项目,越是裁员越是无法接到高利润的大项目,拾人牙慧捡一些小资源,团队最终面临的可能就是解散的局面。
2. 标注效率低下
在人力成本无法大规模减轻的局面下,摆在数据标注团队面前最可行的方式就是提高标注效率。
通过招聘熟练度较高的数据标注员,或是使用高效率的标注工具可以做到在短时间内有效提升标注效率,但是到了真正实施的阶段,很多人却发现并不是如此简单。
一方面,熟练度较高的高素质数据标注员在行业内仍是稀缺状态,尤其是随着AI公司对于标注数据的场景化需求越来越高,这种缺口将越来越大。举个简单的例子,在语音标注领域,目前有很多英文标注项目,但是熟练掌握英语的数据标注员却稀少。
另一方面,行业内缺乏一款高效率的数据标注工具。目前很多标注团队使用的是开源标注工具,此类工具虽然能够满足基本的标注需求,但是在效率、准确度上已经远远满足不了当下AI公司的需求。
3. 准确率难以满足AI公司需求
人工智能行业内有一个简单但很重要的共识:数据集质量的高低直接决定最终模型质量的好坏。
机器学习依赖海量标注数据的投喂,这些数据质量的高低将对AI最终能否顺利落地产生关键性影响。
目前很多AI企业都意识到了这点,并在标注数据质量上提出了新的要求。举个例子,以往标注数据的准确率达到了95%即可满足AI企业的需求,但是目前就需求达到99%,甚至是99.99%。
然而,目前相当多的标注企业无法满足这样的需求,原因正如上面所说,一方面数据标注员能力参差不齐,另一方面标注工具质量低下。
4. 数据安全性存疑
数据标注行业既然与“数据”有关,那么安全性一定是很多企业关注的重点。
在安防领域,因为涉及到需要采集标注很多人脸等私密数据,因此确保数据的安全性成为了很多项目方的硬性需求。
数据安全性是很多项目方的硬性需求
从数据的采集、数据的标注,再到数据的保存,每一个环节都必须保证数据不被泄露、不被窃取,这对于很多团队来说都是无法做到的事情。
一方面,很多团队没有自己独立研发的标注平台,仍使用开源工具或者是在开源工具的基础上略作修改,使用这种开放的平台如何保证数据的安全性?
另外,很多企业在标注与储存数据的过程中,出于成本的因素使用的仍然是公有服务器,这对于许多安防领域的企业来说,很明显是无法达标的。
5. 欠缺场景化标注能力
随着人工智能技术开始大范围落地应用,AI公司对于标注数据的场景化要求正变得越来越高。
以汽车自动驾驶为例,相关汽车厂商对于标注场景要求越来越精细化,一些复杂的长尾场景诸如闯红灯车辆、横穿马路的行人、路边违章停靠的车辆等等出现的频率开始增多,相当多数据标注团队无法满足AI发展的要求。

汽车自动驾驶标注场景(来源:曼孚科技数据标注平台)
这一方面与数据标注团队欠缺定制化服务能力有关,另一方面也与标注团队使用的标注工具功能简单化有关。在AI大规模落地的时代背景下,无法满足项目方的需求即意味着面临被淘汰的风险,提升场景化、定制化标注能力是摆在很多标注团队面前相当现实的需求。
针对以上困局,曼孚科技从现实出发,做出了如下的努力:
1. 专业团队打造优质数据服务平台,服务成本降低30%以上;
2. 独立自研SaaS数据标注平台,预标注技术加持下标注效率可提升4倍以上;
3. 实时精确估算与AI辅助筛查,数据精确至99%以上;
4. 支持私有云部署,实时监测加强安全保护;
5. 定制化场景搭建,7X24小时快速技术响应。
通过以上努力,曼孚科技致力于为客户提供高水准、高效率、定制化、场景化的数据标注服务体验。曼孚科技旗下的数据采集标注一站式解决方案平台正在自动驾驶、安防、VR/AR、无人机、新零售、AI教育、工业机器人等相关领域悄然改变着这个世界。
尽管当下数据标注行业面临的困局已经影响了整体产业的蓬勃发展,但正如曼孚科技的愿景一样,我们将凭借自身努力,用数据解放AI的一切可能。
AI数据标注行业面临的5大发展困局丨曼孚科技的更多相关文章
- 破局AI落地难,数据标注行业需率先变革丨曼孚科技
2019年,国内人工智能领域的投融资热情大幅降低,相当数量的AI企业彻底消失在了历史的长河中,“人工智能寒潮已至”甚至成为行业年度热词. 与前几年创业与投资热情齐头并进的盛况相比,近段时间的AI行业 ...
- 战“疫”背后的AI身影丨曼孚科技
近期新型冠状病毒肺炎的疫情,牵动着全国上下人民的心. 截止2月11日上午10点,全国确诊人数已达42708人,疑似病例21675人. 突发的疫情让部分地区的快速诊疗能力出现了结构性的缺失,为了打赢这场 ...
- 一文看懂AI深度学习丨曼孚科技
深度学习(Deep Learning)是机器学习的一种,而机器学习是实现人工智能的必经途径. 目前大部分表现优异的AI应用都使用了深度学习技术,引领了第三次人工智能的浪潮. 一. 深度学习的概念 深度 ...
- 曼孚科技:数据标注,AI背后的百亿市场
1. 两年前,来自山东农村的王磊成为了一位数据标注员.彼时的他,工作内容非常简单且枯燥:识别图片中人的性别. 然而,一段时间之后,他注意到分配给他的任务开始变得越来越复杂:从识别性别到年龄,从框选 ...
- 曼孚科技:“四管齐下”筑牢AI数据隐私安全防线
谈及数据,绕不开的一个话题就是数据隐私与数据安全.随着数字化进程加快,数据安全事件频发,据Risk Based Security统计,去年国际数据泄露事件近5000起,被泄露数据近41亿条,数据造成的 ...
- 曼孚科技:AI算法领域常用的39个术语(上)
算法是人工智能(AI)核心领域之一. 本文整理了算法领域常用的39个术语,希望可以帮助大家更好地理解这门学科. 1. Attention 机制 Attention的本质是从关注全部到关注重点.将有限 ...
- 曼孚科技:AI自然语言处理(NLP)领域常用的16个术语
自然语言处理(NLP)是人工智能领域一个十分重要的研究方向.NLP研究的是实现人与计算机之间用自然语言进行有效沟通的各种理论与方法. 本文整理了NLP领域常用的16个术语,希望可以帮助大家更好地理解 ...
- 曼孚科技:AI机器学习领域常用的15个术语
机器学习是人工智能(AI)的核心,是使计算机具有智能的根本途径. 本文整理了一下机器学习领域常用的15个术语,希望可以帮助大家更好的理解这门涉及概率论.统计学.逼近论.凸分析.算法复杂度理论等多个领 ...
- 曼孚科技:AI算法领域常用的39个术语(下)
算法是人工智能(AI)核心领域之一. 本文整理了算法领域常用的39个术语,希望可以帮助大家更好地理解这门学科. 本文为下半部分,上半部分见本账号上一篇文章. 19.迁移学习(Transfer Lear ...
随机推荐
- ROS中3D机器人建模(一)
一,机器人建模的ROS软件包 *urdf : 机器人建模最重要的ros软件包是urdf软件包.这个软件包包含一个用于统一机器人描述格式(URDF)的C++解析器,它是一个表示机器人模型的XML文件,还 ...
- 基于TensorFlow的MNIST手写数字识别-深入
构建多层卷积神经网络时需要多组W和偏移项b,我们封装2个方法来产生W和b 初级MNIST中用0初始化W和b,这里用噪声初始化进行对称打破,防止产生梯度0,同时用一个小的正值来初始化b避免dead ne ...
- vmware14 unlock开启macos选项
之前搜索了很多资料,用了很多Unlock都失败了,最后重新卸载vmware重新安装后,关闭应用竟然可以了 工具在微信公众号菜菜电脑已保存到百度网盘
- Multi-hierarchical Independent Correlation Filters for Visual Tracking(MFT)略读
作者写道: 有幸在本届的VOT 2018 主赛中,我们的参赛方案Multi-solution Fusion for Visual Tracking(MFT)获得第一名的成绩,通过结果来看,MFT无论在 ...
- 转载 angularJS filter 过滤器
angularjs中的filter(过滤器) 标签: angularjsfilter 源文地址:http://www.ncloud.hk/技术分享/angularjs中的filter-过滤器/ f ...
- python练习——第1题
原GitHub地址:https://github.com/Yixiaohan/show-me-the-code 题目:做为 Apple Store App 独立开发者,你要搞限时促销,为你的应用生成激 ...
- C++中STL库函数的基本运用
学了这么长时间的STL库,现在我觉得是有必要对过去的题目和所遇到的问题做一下整理了,以便于之后更好的展开练习: 一. 为什么要用STL库? 1.简单粗暴(省事). 2.便于解决复杂的问题(在贪心题目中 ...
- MySQL :LAST_INSERT_ID()函数总结
作用:当对table进行insert操作时,返回具有Auto_increment(自动增长)特性的属性列的最新值. 该函数的特点 1.每当断开本次连接之后又重新连接时,该函数的返回值会被重置为0. 2 ...
- HBASE手动触发major_compact
1.定时执行脚本#!/bin/bash source /etc/profile sh ./hbase shell <<EOF major_compact 'table_name' EOF ...
- Shell脚本 小程序演示
一般的shell编程 场景贯穿了几个熟知的步骤: ●显示消息●获取用户输入●存储值到文件●处理存储的数据 这里写一个小程序 包含以上几部 #!/bin/bash while true do #echo ...