AI数据标注行业面临的5大发展困局丨曼孚科技
根据艾瑞咨询发布的行业白皮书显示,2018年中国人工智能基础数据服务市场规模为25.86亿元,预计2025年市场规模将突破113亿元,行业年复合增长率达到了23.5%。
作为人工智能产业的基石,数据标注行业正在从幕后走向前台,未来前景无限广阔。
然而,正如黎明前是一片无尽的黑暗一样,数据标注行业在蓬勃发展的背后也面临着诸多困局,这些困局已成为阻碍行业发展最大的绊脚石。
1. 人力成本突出
数据标注虽然披着人工智能的“外衣”,但是本质上仍然属于劳动密集型产业。
目前,国内从事数据标注行业的人群已达上千万,这其中90%的从业人员为数据标注员,这些数据标注员分散在大大小小的标注团队内。
以一个20人全职的小标注团队为例,平均每天每个人的人力成本大约在100-200元,每个月仅仅在人力成本上的消耗就达到了6万-12万,而一个周期在半个月以上的标注项目可能总合同金额不过几万元而已,这样的结果就是很多标注团队营利甚微或是压根就无法营利。

数据标注团队
事实上,很多标注团队的管理人员已经意识到人力成本对于团队发展的威胁,但是却很少有人选择以裁员的方式来减少此类成本,甚至很多团队顶着亏损的风险不断加人,原因无他,作为劳动密集型产业的数据标注行业,有足够的人力才能保证吃得下大项目,越是裁员越是无法接到高利润的大项目,拾人牙慧捡一些小资源,团队最终面临的可能就是解散的局面。
2. 标注效率低下
在人力成本无法大规模减轻的局面下,摆在数据标注团队面前最可行的方式就是提高标注效率。
通过招聘熟练度较高的数据标注员,或是使用高效率的标注工具可以做到在短时间内有效提升标注效率,但是到了真正实施的阶段,很多人却发现并不是如此简单。
一方面,熟练度较高的高素质数据标注员在行业内仍是稀缺状态,尤其是随着AI公司对于标注数据的场景化需求越来越高,这种缺口将越来越大。举个简单的例子,在语音标注领域,目前有很多英文标注项目,但是熟练掌握英语的数据标注员却稀少。
另一方面,行业内缺乏一款高效率的数据标注工具。目前很多标注团队使用的是开源标注工具,此类工具虽然能够满足基本的标注需求,但是在效率、准确度上已经远远满足不了当下AI公司的需求。
3. 准确率难以满足AI公司需求
人工智能行业内有一个简单但很重要的共识:数据集质量的高低直接决定最终模型质量的好坏。
机器学习依赖海量标注数据的投喂,这些数据质量的高低将对AI最终能否顺利落地产生关键性影响。
目前很多AI企业都意识到了这点,并在标注数据质量上提出了新的要求。举个例子,以往标注数据的准确率达到了95%即可满足AI企业的需求,但是目前就需求达到99%,甚至是99.99%。
然而,目前相当多的标注企业无法满足这样的需求,原因正如上面所说,一方面数据标注员能力参差不齐,另一方面标注工具质量低下。
4. 数据安全性存疑
数据标注行业既然与“数据”有关,那么安全性一定是很多企业关注的重点。
在安防领域,因为涉及到需要采集标注很多人脸等私密数据,因此确保数据的安全性成为了很多项目方的硬性需求。
数据安全性是很多项目方的硬性需求
从数据的采集、数据的标注,再到数据的保存,每一个环节都必须保证数据不被泄露、不被窃取,这对于很多团队来说都是无法做到的事情。
一方面,很多团队没有自己独立研发的标注平台,仍使用开源工具或者是在开源工具的基础上略作修改,使用这种开放的平台如何保证数据的安全性?
另外,很多企业在标注与储存数据的过程中,出于成本的因素使用的仍然是公有服务器,这对于许多安防领域的企业来说,很明显是无法达标的。
5. 欠缺场景化标注能力
随着人工智能技术开始大范围落地应用,AI公司对于标注数据的场景化要求正变得越来越高。
以汽车自动驾驶为例,相关汽车厂商对于标注场景要求越来越精细化,一些复杂的长尾场景诸如闯红灯车辆、横穿马路的行人、路边违章停靠的车辆等等出现的频率开始增多,相当多数据标注团队无法满足AI发展的要求。

汽车自动驾驶标注场景(来源:曼孚科技数据标注平台)
这一方面与数据标注团队欠缺定制化服务能力有关,另一方面也与标注团队使用的标注工具功能简单化有关。在AI大规模落地的时代背景下,无法满足项目方的需求即意味着面临被淘汰的风险,提升场景化、定制化标注能力是摆在很多标注团队面前相当现实的需求。
针对以上困局,曼孚科技从现实出发,做出了如下的努力:
1. 专业团队打造优质数据服务平台,服务成本降低30%以上;
2. 独立自研SaaS数据标注平台,预标注技术加持下标注效率可提升4倍以上;
3. 实时精确估算与AI辅助筛查,数据精确至99%以上;
4. 支持私有云部署,实时监测加强安全保护;
5. 定制化场景搭建,7X24小时快速技术响应。
通过以上努力,曼孚科技致力于为客户提供高水准、高效率、定制化、场景化的数据标注服务体验。曼孚科技旗下的数据采集标注一站式解决方案平台正在自动驾驶、安防、VR/AR、无人机、新零售、AI教育、工业机器人等相关领域悄然改变着这个世界。
尽管当下数据标注行业面临的困局已经影响了整体产业的蓬勃发展,但正如曼孚科技的愿景一样,我们将凭借自身努力,用数据解放AI的一切可能。
AI数据标注行业面临的5大发展困局丨曼孚科技的更多相关文章
- 破局AI落地难,数据标注行业需率先变革丨曼孚科技
2019年,国内人工智能领域的投融资热情大幅降低,相当数量的AI企业彻底消失在了历史的长河中,“人工智能寒潮已至”甚至成为行业年度热词. 与前几年创业与投资热情齐头并进的盛况相比,近段时间的AI行业 ...
- 战“疫”背后的AI身影丨曼孚科技
近期新型冠状病毒肺炎的疫情,牵动着全国上下人民的心. 截止2月11日上午10点,全国确诊人数已达42708人,疑似病例21675人. 突发的疫情让部分地区的快速诊疗能力出现了结构性的缺失,为了打赢这场 ...
- 一文看懂AI深度学习丨曼孚科技
深度学习(Deep Learning)是机器学习的一种,而机器学习是实现人工智能的必经途径. 目前大部分表现优异的AI应用都使用了深度学习技术,引领了第三次人工智能的浪潮. 一. 深度学习的概念 深度 ...
- 曼孚科技:数据标注,AI背后的百亿市场
1. 两年前,来自山东农村的王磊成为了一位数据标注员.彼时的他,工作内容非常简单且枯燥:识别图片中人的性别. 然而,一段时间之后,他注意到分配给他的任务开始变得越来越复杂:从识别性别到年龄,从框选 ...
- 曼孚科技:“四管齐下”筑牢AI数据隐私安全防线
谈及数据,绕不开的一个话题就是数据隐私与数据安全.随着数字化进程加快,数据安全事件频发,据Risk Based Security统计,去年国际数据泄露事件近5000起,被泄露数据近41亿条,数据造成的 ...
- 曼孚科技:AI算法领域常用的39个术语(上)
算法是人工智能(AI)核心领域之一. 本文整理了算法领域常用的39个术语,希望可以帮助大家更好地理解这门学科. 1. Attention 机制 Attention的本质是从关注全部到关注重点.将有限 ...
- 曼孚科技:AI自然语言处理(NLP)领域常用的16个术语
自然语言处理(NLP)是人工智能领域一个十分重要的研究方向.NLP研究的是实现人与计算机之间用自然语言进行有效沟通的各种理论与方法. 本文整理了NLP领域常用的16个术语,希望可以帮助大家更好地理解 ...
- 曼孚科技:AI机器学习领域常用的15个术语
机器学习是人工智能(AI)的核心,是使计算机具有智能的根本途径. 本文整理了一下机器学习领域常用的15个术语,希望可以帮助大家更好的理解这门涉及概率论.统计学.逼近论.凸分析.算法复杂度理论等多个领 ...
- 曼孚科技:AI算法领域常用的39个术语(下)
算法是人工智能(AI)核心领域之一. 本文整理了算法领域常用的39个术语,希望可以帮助大家更好地理解这门学科. 本文为下半部分,上半部分见本账号上一篇文章. 19.迁移学习(Transfer Lear ...
随机推荐
- SSH(一)
系统程序架构: 整合思路 1.逆依赖方向而行,由Spring提供对象管理和服务 2.依次实现Spring与Hibernate.Spring与Struts2的集成 配置 ...
- RestTemplate工具类根据服务名发送请求
要使用RestTemplate 根据服务名发送请求的话需要 使用 @LoadBalanced 这个注解,用了这个注解的RestTemplate就不用使用 ip 来请求了,首先要创建一个配置类 i ...
- python函数2(返回值、传递列表...)
python函数2(返回值.传递列表...) 1.返回值 1.1.返回简单的值 #返回简单值 def get_formatted_name(first_name,last_name): "& ...
- python学习记录(八)
0910--https://www.cnblogs.com/fnng/archive/2013/04/28/3048356.html Python异常 Python用异常对象(exception ob ...
- JavaScript 与 Java 有什么不同?
JavaScript 编程语言是由 Netscape,Inc. 开发的,它并不是 Java 平台的一部分. JavaScript 不会创建小应用程序或独立应用程序.在最常见的形式中,JavaScrip ...
- c语言小游戏-扫雷的完成
C语言-扫雷游戏 本文将对此游戏做一个大致的概述,此代码适合初学者,编写软件使用了vs2017. 该代码可以实现如下功能: 1.用户可以选择3个难度,分别布置不同个数的雷. 2.随机数设置雷的位置. ...
- node - MongoDB数据库
mongod 安装配置 在Mongodb官网下载最新版本的Mongodb下载地址 下载msi的window安装包,可以装到C盘或者D盘目录下 配置 由于我是安装在D盘的环境下 D:\Program F ...
- 【Java并发工具类】Java并发容器
前言 Java并发包有很大一部分都是关于并发容器的.Java在5.0版本之前线程安全的容器称之为同步容器.同步容器实现线程安全的方式:是将每个公有方法都使用synchronized修饰,保证每次只有一 ...
- pytorch --Rnn语言模型(LSTM,BiLSTM) -- 《Recurrent neural network based language model》
论文通过实现RNN来完成了文本分类. 论文地址:88888888 模型结构图: 原理自行参考论文,code and comment: # -*- coding: utf-8 -*- # @time : ...
- XLNet:运行机制及和Bert的异同比较
这两天,XLNet貌似也引起了NLP圈的极大关注,从实验数据看,在某些场景下,确实XLNet相对Bert有很大幅度的提升.就像我们之前说的,感觉Bert打开两阶段模式的魔法盒开关后,在这条路上,会有越 ...