论AI的自然语言识别NLP

                                                 李万鸿2016-3-2

 

   人类的知识体系是建立在语言文字基础上的，因此，AI对自然语言的学习、理解、掌握和思考是非常有价值的技术，也是AI未来的发展方向，百度、google都在研究这个技术。下面谈谈AI对自然语言处理NLP的思路和看法。

   目前一般使用基于大数据的机器学习技术来处理自然语言，如神经网络算法、SVM等。NLP的处理包括：机器翻译、语义分析、词性标注、文本识别等。NLP的核心技术在于把文字进行分词，然后转化为向量进行计算，通过各种算法计算后得到结果。对于NLP来说，理解语言文字的意思是关键所在，比如“苹果”这个单词，需要理解是吃的苹果，还是apple公司。能够理解语言文字，尤其是文字之后，AI就可以自动学习人类所有的知识，然后提高AI的能力，能象人一样思考、说话，运用学到的知识，自己发现问题、分析问题、解决问题，从而具有人的智慧，这就是AI的终极目标。NLP功能的发展，计算机可以和人谈话，目前微软的小冰机器人、百度的机器人都可以进行简单的对话。随着AI的NLP功能提高，计算机和机器人可以象人一样思考和工作，极大地提高生产力的水平和效率，把人从繁重的体力劳动中解决出来，有更多的时间学习、思考、修行，发展内在的精神和心灵。

为此，计算机科学家、语言科学家等各种科学家需要联合攻关，

还可以和已经与地球取得联系的外星人合作，开发下一代具有高智能NLP功能的AI，能学习掌握世界上所有已知的知识，打造“最强大脑”，这个大脑为人类的幸福工作，造福每一个人。

最近一直在从事自然语言处理方面的学习，我想先就自己浅薄的了解说说自己的学习和感受。首先我想要吐槽一下baidu，广告打得真的是让人痛心疾首，3年在糯米200亿的投资（来自: 网易科技报道）还不如做成糯米团子。但是瑕不掩瑜，作为国内最有影响力的搜索引擎，无疑给我们的生活带来了很多改变，至少她的出现缩小了我们获取知识的差距，在一定程度上使得信息公平和平等（多么的难能可贵），一言也难以道尽其间好坏。

接着说说一个做自然语言处理的人，以及身边朋友、同学遇到的迫切解决的问题。信息爆炸似的增长，我们获取信息的方式方法却远远赶不上。就在前一刻我还在baidu搜索关键词“本地连接中IP地址修改不了”，搜索出来的结果却不尽人意，并没有解决我的问题，作为一个专业学习者，我可能有意识的调整自己的搜索关键归词“本地连接 IP无法修改”。很多人并不知道调整搜索关键词，这就需要让搜素引擎更懂人的语言，先要让机器明白语意，比如LDA等方法就可以提取语意信息。很多的时候会有朋友问，类似这样的问题，我要搜素“苹果手机”，想了解与苹果5se信息，苹果公司的信息，可能同时也想了解乔布斯帮主的事迹。这就需要我们去做查询扩展和索引文件关键词的扩展，有很多这样的研究。但仍然没有一个好的产品去解决大家的问题，我希望等到以后能够有一个交互性的智能搜索，不需要人眼去在茫茫的信息中查看（看得人眼睛疼）。我们迫切需要一个好的搜索引擎，再次改变我们的生活，让找信息变得跟便捷，如果这200亿投资在智能交互搜索领域岂不更好（一个路人的YY）。

再者我也了解智能搜索是一个在现在看来比较难以实现的工具。倒不如想想从小的需求出发解决身边的问题，随着AI的发展，我们应该可以想到更多的可以代替人类繁杂工作的地方。例如考试有了答题卡，客观题能够机器改，能否在主观题上也用机器修改。

最后我也将继续从事这方面的学习和研究，我觉得很有意义。

支持原创，分享看法。。。

人工智能的出现就是为了方便人类的生活，再发展下去也只能是更加方便人类的生活，取代人类这种情况是不可能出现的，唉，路过的~