人工智能将如何颠覆现有的文字工作?
2019-02-14 10:18 人工智能 文字阅读 文本挖掘

人工智能将如何颠覆现有的文字工作?23

人类发明了数字和文字,来帮助我们能够来记忆这些重要的信息

人工智能逐渐改变了很多职位的工作方式,

文字作为信息传递的主要载体,

那些和文字阅读、处理、分发、生产相关的工作,

将如何被人工智能重塑?

本文为达观数据创始人陈运文

在东方财经浦东频道《创赢未来》中的演讲,

一起来看文本智能处理的现在和未来。

我在复旦大学计算机系读完博士以后,在百度、盛大、腾讯分别从事过文本挖掘的技术管理工作。我们团队也是由心怀着文字自动化处理梦想的小伙伴们构成的。

人类文明从诞生文字的那一刻起开始算,已经有五千年的历史。人类文明史上最早的四种文字分别是两河流域的楔形文字、埃及的圣书文、玛雅文和中国的甲骨文。约在公元前2600年,这四种文字在全球的四个不同的地区,独立产生出来。

640

人类最早诞生的一块文字叫“库辛石板”,它是在公元前2600年时,在幼发拉底河和底格里斯河两河流域发现的最早的楔形文字泥板,它也是人类考古学里发现的最早的文字痕迹。里面记录了一个叫库辛的人在37个月的时间里,总共收到了2万9千多个大麦。也就是说,人类文明史上最早的文字既不是歌颂王侯将相的诗歌,也不是描述劳动人民狩猎的场景,更不是诗歌或者是祭文,而是一个财务报告。这是因为人脑对文字和数字的记忆是非常弱的,时间久了会记不住具体的数字和文字细节。因此,人类发明了数字和文字,来帮助我们能够来记忆这些重要的信息。

640-2

达观的计算机系统也同样是辅助我们来完成很多文字分析、记录、处理的工作,它可以让我们更加轻松地工作和生活。

文字处理的应用面非常广,简单来说可以分成两大部分。第一部分是代替人来完成文字的阅读工作,第二部分是代替人来完成文字的写作工作。

读和写是我们每个人每天都在做的工作,它耗费了我们大量的时间。我们做了一个统计,不管你是公务员、财务人员、法务人员,还是传媒公司的校对人员,其实每天都有大量的工作是审核材料。审核材料就需要阅读这些材料并基于你对这个领域的理解去判断材料有没有问题。一个普通的白领每天有超过三分之一的时间是用在文字的读和写上的。 

我们的计算机软件自动化系统,可以让这些文字工作由繁化简。它能从头到尾完成一个文档的阅读工作,从里面自动化抽取出关键要素,并且根据相应的法规、合规和审查内容,判断出文字是否能够通过相应的合规检查。我们的系统已经在很多政府机构、大型央企、五百强企业、四大会计师事务所里面应用,大幅度地减轻了人工的负担。

640-3

除了文字审核以外,大量文档资料的比对、搜索、知识提取和知识网络的构建也是非常重要的事情。我们做文字阅读时,平均一秒钟一个人的阅读速度大概是20-30字,相当于一条微信的长度,效率是非常低的。但是计算机一秒钟可以阅读一万字,它的速度是人的几百倍,更何况我们提供的是几千台服务器的一整套集群,它的阅读速度是非常惊人的,可以大幅度地缩短文字阅读处理的时间。原来可能一个团队三五个人用一周才能完成的工作,现在用我们的计算机系统只要十几分钟就可以完成,效率大幅提高。

640-4

在互联网的文字信息处理方面,我们也有个性化推荐的系统。很多互联网的客户,他们有大量的文档资料,比如对商品的用户意见分析、商品信息搜索、信息推荐等,这些都可以用我们的计算机系统代替人来完成。同时,很多中国的大型企业、五百强客户、四大会计师事务所等,他们的员工每天都要阅读大量的合同、财务报表,去分析各种各样的上市公司的公告,这些工作非常费时费力。一但用了我们的计算机软件来做这些工作,不但效率提高了,而且出错的概率更小。

640-5

中国有句古话,叫“读书破万卷,下笔如有神”。我们让软件系统阅读人类所积累下来的文档资料,去分析里面字词的语言模型和语法规律,从而让计算机能够具备不亚于人类的文字阅读理解能力。截至目前,我们已经积累了超过两百亿字的文档资料。

也期待在不久的将来,计算机能够成为我们每个企业、每一个人身边非常好的助手。们预测到2035年的时候,有超过一半的文字日常处理工作,都可以让计算机代替人类来完成,期待这天能够早日到来。