AI数据标注行业面临的5大发展困局丨曼孚科技
根据艾瑞咨询发布的行业白皮书显示,2018年中国人工智能基础数据服务市场规模为25.86亿元,预计2025年市场规模将突破113亿元,行业年复合增长率达到了23.5%。
作为人工智能产业的基石,数据标注行业正在从幕后走向前台,未来前景无限广阔。
然而,正如黎明前是一片无尽的黑暗一样,数据标注行业在蓬勃发展的背后也面临着诸多困局,这些困局已成为阻碍行业发展最大的绊脚石。
1. 人力成本突出
数据标注虽然披着人工智能的“外衣”,但是本质上仍然属于劳动密集型产业。
目前,国内从事数据标注行业的人群已达上千万,这其中90%的从业人员为数据标注员,这些数据标注员分散在大大小小的标注团队内。
以一个20人全职的小标注团队为例,平均每天每个人的人力成本大约在100-200元,每个月仅仅在人力成本上的消耗就达到了6万-12万,而一个周期在半个月以上的标注项目可能总合同金额不过几万元而已,这样的结果就是很多标注团队营利甚微或是压根就无法营利。

数据标注团队
事实上,很多标注团队的管理人员已经意识到人力成本对于团队发展的威胁,但是却很少有人选择以裁员的方式来减少此类成本,甚至很多团队顶着亏损的风险不断加人,原因无他,作为劳动密集型产业的数据标注行业,有足够的人力才能保证吃得下大项目,越是裁员越是无法接到高利润的大项目,拾人牙慧捡一些小资源,团队最终面临的可能就是解散的局面。
2. 标注效率低下
在人力成本无法大规模减轻的局面下,摆在数据标注团队面前最可行的方式就是提高标注效率。
通过招聘熟练度较高的数据标注员,或是使用高效率的标注工具可以做到在短时间内有效提升标注效率,但是到了真正实施的阶段,很多人却发现并不是如此简单。
一方面,熟练度较高的高素质数据标注员在行业内仍是稀缺状态,尤其是随着AI公司对于标注数据的场景化需求越来越高,这种缺口将越来越大。举个简单的例子,在语音标注领域,目前有很多英文标注项目,但是熟练掌握英语的数据标注员却稀少。
另一方面,行业内缺乏一款高效率的数据标注工具。目前很多标注团队使用的是开源标注工具,此类工具虽然能够满足基本的标注需求,但是在效率、准确度上已经远远满足不了当下AI公司的需求。
3. 准确率难以满足AI公司需求
人工智能行业内有一个简单但很重要的共识:数据集质量的高低直接决定最终模型质量的好坏。
机器学习依赖海量标注数据的投喂,这些数据质量的高低将对AI最终能否顺利落地产生关键性影响。
目前很多AI企业都意识到了这点,并在标注数据质量上提出了新的要求。举个例子,以往标注数据的准确率达到了95%即可满足AI企业的需求,但是目前就需求达到99%,甚至是99.99%。
然而,目前相当多的标注企业无法满足这样的需求,原因正如上面所说,一方面数据标注员能力参差不齐,另一方面标注工具质量低下。
4. 数据安全性存疑
数据标注行业既然与“数据”有关,那么安全性一定是很多企业关注的重点。
在安防领域,因为涉及到需要采集标注很多人脸等私密数据,因此确保数据的安全性成为了很多项目方的硬性需求。
数据安全性是很多项目方的硬性需求
从数据的采集、数据的标注,再到数据的保存,每一个环节都必须保证数据不被泄露、不被窃取,这对于很多团队来说都是无法做到的事情。
一方面,很多团队没有自己独立研发的标注平台,仍使用开源工具或者是在开源工具的基础上略作修改,使用这种开放的平台如何保证数据的安全性?
另外,很多企业在标注与储存数据的过程中,出于成本的因素使用的仍然是公有服务器,这对于许多安防领域的企业来说,很明显是无法达标的。
5. 欠缺场景化标注能力
随着人工智能技术开始大范围落地应用,AI公司对于标注数据的场景化要求正变得越来越高。
以汽车自动驾驶为例,相关汽车厂商对于标注场景要求越来越精细化,一些复杂的长尾场景诸如闯红灯车辆、横穿马路的行人、路边违章停靠的车辆等等出现的频率开始增多,相当多数据标注团队无法满足AI发展的要求。

汽车自动驾驶标注场景(来源:曼孚科技数据标注平台)
这一方面与数据标注团队欠缺定制化服务能力有关,另一方面也与标注团队使用的标注工具功能简单化有关。在AI大规模落地的时代背景下,无法满足项目方的需求即意味着面临被淘汰的风险,提升场景化、定制化标注能力是摆在很多标注团队面前相当现实的需求。
针对以上困局,曼孚科技从现实出发,做出了如下的努力:
1. 专业团队打造优质数据服务平台,服务成本降低30%以上;
2. 独立自研SaaS数据标注平台,预标注技术加持下标注效率可提升4倍以上;
3. 实时精确估算与AI辅助筛查,数据精确至99%以上;
4. 支持私有云部署,实时监测加强安全保护;
5. 定制化场景搭建,7X24小时快速技术响应。
通过以上努力,曼孚科技致力于为客户提供高水准、高效率、定制化、场景化的数据标注服务体验。曼孚科技旗下的数据采集标注一站式解决方案平台正在自动驾驶、安防、VR/AR、无人机、新零售、AI教育、工业机器人等相关领域悄然改变着这个世界。
尽管当下数据标注行业面临的困局已经影响了整体产业的蓬勃发展,但正如曼孚科技的愿景一样,我们将凭借自身努力,用数据解放AI的一切可能。
AI数据标注行业面临的5大发展困局丨曼孚科技的更多相关文章
- 破局AI落地难,数据标注行业需率先变革丨曼孚科技
2019年,国内人工智能领域的投融资热情大幅降低,相当数量的AI企业彻底消失在了历史的长河中,“人工智能寒潮已至”甚至成为行业年度热词. 与前几年创业与投资热情齐头并进的盛况相比,近段时间的AI行业 ...
- 战“疫”背后的AI身影丨曼孚科技
近期新型冠状病毒肺炎的疫情,牵动着全国上下人民的心. 截止2月11日上午10点,全国确诊人数已达42708人,疑似病例21675人. 突发的疫情让部分地区的快速诊疗能力出现了结构性的缺失,为了打赢这场 ...
- 一文看懂AI深度学习丨曼孚科技
深度学习(Deep Learning)是机器学习的一种,而机器学习是实现人工智能的必经途径. 目前大部分表现优异的AI应用都使用了深度学习技术,引领了第三次人工智能的浪潮. 一. 深度学习的概念 深度 ...
- 曼孚科技:数据标注,AI背后的百亿市场
1. 两年前,来自山东农村的王磊成为了一位数据标注员.彼时的他,工作内容非常简单且枯燥:识别图片中人的性别. 然而,一段时间之后,他注意到分配给他的任务开始变得越来越复杂:从识别性别到年龄,从框选 ...
- 曼孚科技:“四管齐下”筑牢AI数据隐私安全防线
谈及数据,绕不开的一个话题就是数据隐私与数据安全.随着数字化进程加快,数据安全事件频发,据Risk Based Security统计,去年国际数据泄露事件近5000起,被泄露数据近41亿条,数据造成的 ...
- 曼孚科技:AI算法领域常用的39个术语(上)
算法是人工智能(AI)核心领域之一. 本文整理了算法领域常用的39个术语,希望可以帮助大家更好地理解这门学科. 1. Attention 机制 Attention的本质是从关注全部到关注重点.将有限 ...
- 曼孚科技:AI自然语言处理(NLP)领域常用的16个术语
自然语言处理(NLP)是人工智能领域一个十分重要的研究方向.NLP研究的是实现人与计算机之间用自然语言进行有效沟通的各种理论与方法. 本文整理了NLP领域常用的16个术语,希望可以帮助大家更好地理解 ...
- 曼孚科技:AI机器学习领域常用的15个术语
机器学习是人工智能(AI)的核心,是使计算机具有智能的根本途径. 本文整理了一下机器学习领域常用的15个术语,希望可以帮助大家更好的理解这门涉及概率论.统计学.逼近论.凸分析.算法复杂度理论等多个领 ...
- 曼孚科技:AI算法领域常用的39个术语(下)
算法是人工智能(AI)核心领域之一. 本文整理了算法领域常用的39个术语,希望可以帮助大家更好地理解这门学科. 本文为下半部分,上半部分见本账号上一篇文章. 19.迁移学习(Transfer Lear ...
随机推荐
- ROS机器人之话题(一)
将消息发布到话题上 首先建立一个basic包(名称自己定)其命令为: 1.创建功能包,应用catkin_create_pkg命令 cd ~/catkin_ws/src #切换到代码空间,也 ...
- TensorFlow中使用GPU
TensorFlow默认会占用设备上所有的GPU以及每个GPU的所有显存:如果指定了某块GPU,也会默认一次性占用该GPU的所有显存.可以通过以下方式解决: 1 Python代码中设置环境变量,指定G ...
- MingGW Posix VS Win32 - 明瓜娃的毒因
MinGW-posix和win32纠缠的瓜娃子 官方首席佛偈(SourceForge)的官网下载页 法克油啊,让我一个小白情何以堪. 盘TA wiki posix wiki中文-UNIX API标准 ...
- learn about sqlserver partitition and partition table --- add or remove table partitions addition more
Yes . In the previous. chapter , we see how to generate "partition function" "parttit ...
- Zabbix:主动模式
简介 Zabbix 是由 Alexei Vladishev 开发的一种网络监视.管理系统,基于 Server-Client 架构.可用于监视各种网络服务.服务器和网络机器等状态,官方站点:https: ...
- djiango目录文件
一.创建项目 命令:django-admin startproject mysite mysite ├── manage.py └── mysite ├── __init__.py ├ ...
- 第3章 JDK并发包(二)
3.1.2 重入锁的好搭档:Condition条件 它和wait()和notify()方法的作用是大致相同的.但是wait()和notify()方法是和synchronized关键字合作使用的,而Co ...
- java中深拷贝浅拷贝简析
Java中对象的创建 clone顾名思义就是复制, 在Java语言中, clone方法被对象调用,所以会复制对象.所谓的复制对象,首先要分配一个和源对象同样大小的空间,在这个空间中创建一个新的对象.那 ...
- [Effective Java 读书笔记] 第三章类和接口 第十三 -- 十四条
第十三条 使类和成员的可访问性最小化 总得来说,我们应该尽量将成员的访问范围限制到最小!有利于解耦,开发.测试和优化都能够更加独立. 对于成员(域,方法,嵌套类和嵌套接口),有四种可能的访问级别,访问 ...
- Ant Design Vue Pro 项目实战-项目初始化(一)
写在前面 时间真快,转眼又是新的一年.随着前后端技术的不断更新迭代,尤其是前端,在目前前后端分离开发模式这样的一个大环境下,交互性.兼容性等传统的开发模式已经显得有些吃力.之前一直用的是react,随 ...