自然语言处理如何用深度学习做自然语言处理

自然语言处理有哪些实际开源项目，新手学习

最近我们实验室整理发布了一批开源NLP工具包，这里列一下，欢迎大家使用。

未来不定期更新。

2016年3月31日更新，在THULAC新增Python版本分词器，欢迎使用。

中文词法分析THULAC：一个高效的中文词法分析工具包包括中文分词、词性标注功能。

已经提供C++、Java、Python版本。

中文文本分类THUCTC: 一个高效的中文文本分类工具提供高效的中文文本特征提取、分类训练和测试功能。

THUTag: 关键词抽取与社会标签推荐工具包GitHub - YeDeming/THUTag: A Package of Keyphrase Extraction and Social Tag Suggestion提供关键词抽取、社会标签推荐功能，包括TextRank、ExpandRank、Topical PageRank（TPR）、Tag-LDA、Word Trigger Model、Word Alignment Model等算法。

PLDA / PLDA+: 一个高效的LDA分布式学习工具包知识表示学习知识表示学习工具包GitHub - Mrlyk423/Relation_Extraction: Knowledge Base Embedding包括TransE、TransH、TransR、PTransE等算法。

考虑实体描述的知识表示学习算法GitHub - xrb92/DKRL: Representation Learning of Knowledge Graphs with Entity Descriptions词表示学习跨语言词表示学习算法Learning Cross-lingual Word Embeddings via Matrix Co-factorization主题增强的词表示学习算法GitHub - ical_word_embeddings: A demo code ical word embedding可解释的词表示学习算法GitHub - SkTim/OIWE: Online Interpretable Word Embeddings考虑字的词表示学习算法GitHub - Leonard-Xu/CWE网络表示学习文本增强的网络表示学习算法GitHub - albertyang33/TADW: code for IJCAI2015 paper "Network Representation Learning with Rich Text Information"自然语言处理有哪些实际开源项目，新手学习

自然语言处理方向研究生好找工作吗

发展空间很大啊，我就是学自然语言处理的研究生。

以后不管找工作还是继续读博士，都是很有发展前景的。

自然语言处理这个专业是随着互联网的发展热门起来的，百度，Google这些公司都在招自然语言处理的工程师，只要搜索还在，自然语言处理就会继续热门下去 自然语言处理是计算机科学领域与人工智能领域中的一个重要方向。

它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。

自然语言处理是一门融语言学、计算机科学、数学于一体的科学。

因此，这一领域的研究将涉及自然语言，即人们日常使用的语言，所以它与语言学的研究有着密切的联系，但又有重要的区别。

自然语言处理并不是一般地研究自然语言，而在于研制能有效地实现自然语言通信的计算机系统，特别是其中的软件系统。

因而它是计算机科学的一部分。

自然语言处理（NLP）是计算机科学，人工智能，语言学关注计算机和人类（自然）语言之间的相互作用的领域。

因此，自然语言处理是与人机交互的领域有关的。

在自然语言处理面临很多挑战，包括自然语言理解，因此，自然语言处理涉及人机交互的面积。

在NLP诸多挑战涉及自然语言理解，即计算机源于人为或自然语言输入的意思，和其他涉及到自然语言生成。

自然语言处理与语音识别是什么关系

语音识别是自然语言处理的一项比较基础的分支范畴。

很多情况下，你得先让机器知道你在说什么，才能进一步让机器去理解和做出特定的反应。

其他分支范畴有机器翻译、搜索、摘要、问答等等。

另外不知道你说的语音是不是还包括语音合成，这也属于自然语言处理，但是相对比语言识别简单多了，基本上是两码事吧。

想学习自然语言处理，数学需要哪些科目

哈哈，这方面我比较熟悉，数学分析，高等代数当然是基础了，随机过程最好也了解一下，比较重要的就是数理统计，楼主最好能掌握茆诗松，王静龙所著的高等数理统计，其对数学的要求和其他软件方面的研究生比会高一些，因为其后续课程可能还会涉及神经网络和滤波器等内容，但都是浅尝辄止。

关键还是你能对软件架构有一个总体了解，数学只是工具，具体应用时还是编程能力压倒一切，数学理论学起来深，具体用时其实just so so.因为我是相关专业的，欢迎追问和讨论。

人工智能自然语言处理现在能做些什么？

目前为止所有基于统计，以及深度学习对文本语意的提取，都只能说是自然语言处理，而不是自然语言理解。

举一个简单例子，我们想让AI理解“太阳从东方升起”这句话，但什么是“太阳”，什么是“东方”， ”升起“是什么意思？这些目前的AI都不知道。

目前的 AI 通过 word2vec 可以知道 ”太阳“ 等同于 ”日头“，“东方”有近义词“西方”，“南方”，“北方”..., “升起”应该是个动词。

但他就像一个盲人，无法获取正常人对“太阳”的理解。

为了让AI理解“太阳”，要么我们给他配备摄像头，把太阳指给他看，像教小孩子一样教给他所有我们对某件事物的理解，要么我们使用很多太阳照片来训练他，让他获得与人类相似的对“太阳”的理解。

但这样的理解仍然是片面的，因为他感觉不到太阳的耀眼，太阳的温暖，以及太阳驱走黑暗或被黑暗吞噬的过程。

为了获得与人类相近的理解，AI 还必须拥有光强传感器，温度传感器。

在训练这个模型的时候，我们不仅要用静态的照片，还要用动态的视频让他理解“升起”，“降落”等动作的含义。

在让AI理解“东方”的时候，电子指南针可能没有“太阳升起的方向”来的更接近人类的认知。

有了这些基本的认知，再用知识库来增强其对太阳的理解，比如太阳与地球的距离，太阳的大小，太阳的温度，太阳内部核聚变产生能量的过程，关于太阳的神话传说（夸父追日，后羿射日），文学传说（两小儿辩日）... 到了这里，AI对太阳的理解至少与我们中国人对太阳的理解很相近了。

通过迁移学习的方法，让AI从图片，声音和视频，学习我们这个的真实世界，然后把学到的神经元参数放在机器人的大脑中，让机器人继续在真实世界中学习。

估计真正学到了意义，才能真正做到机器理解。

用这种方法，机器能够理解沐浴阳光下身体的温暖，却无法理解人在此时心灵感觉到的愉悦。

当然，设定最佳温度，当阳光照射传感器接近最佳温度时，编程模拟其愉悦程度也是可以的。

不过数字化高兴，痛苦，忧伤，愤怒等人类特有的情绪不是一件简单的事情。

可以将电量，环境温度，湿度，噪声做为量化高兴与痛苦的指标。

忧伤与愤怒就难了。

更难的是如何让这些情绪与人类的情绪产生共鸣，让机器理解人类的忧伤。

我一直觉得如果一个机器人有了我们人类拥有的所有感官，（饥饿感可以用电量的多少的模拟），并有100亿的神经元与这些感官相连接，再加上未来CNN＋LSTM深度神经网络构架的发展，人类完全可以像抚养一个小孩一样抚养出一个能真正理解这个世界，理解自然语言的机器人。

传感器＋黑盒子深度神经网络的共同结果就是自我意识的产生。

但到了那个时刻，也是我们人类最危险的时刻，因为我们造出了超人，却没有办法用法律去约束他。

他的大脑对于我们来说是黑盒子，用机器人三定律来约束他比用法律来约束人类还要软弱无力。

（有点跑题了） 回到这个话题，根据 huangpeihong 回答中的链接，机器懂得了“意义”之后，还必须要懂得一些基本的“道理”，才能真正做到理解自然语言。

比如说机器必须知道近大远小的道理，才能自洽的解释为什么照片中太阳与房屋的比例那么失真，必须知道大气层中复色光折射与散射的道理，才能回答两小儿辩日的悖论。

但是如何让机器懂得道理，学会推理，并公式化，就需要机器学习的高手接龙了。

之前我有想过如果用正负电子湮灭产生的末态粒子谱来训练机器，机器能不能学会能动量守恒，角动量守恒，电荷守恒，重子数守恒等等物理守恒定律，如果学会的话，该如何从那么多参数中提取这些物理规律。

可能这种想法就是让机器学会道理的一种方法吧，用走远变小的人，汽车，动物来训练得到近大远小这个道理 希望我的回答可以帮到您哦

如何用深度学习做自然语言处理

深度学习，要用Visual Basic。

目前主流的编程软件VisualBasic的版本是VisualBasic 6.0专业版。

我们所使用的操作系统是Windows10。

先把VisualBasic 6.0的安装光盘放入电脑的光盘驱动器中，通常电脑能够自动运行光盘上的安装程序。

在安装VisualBasic之前，最好先详细地阅读一下光盘上的Readme.txt文件，了解安装VisualBasic 6.0需要的一些基本知识，然后单击光盘上的Setup.exe文件，并按照安装程序的提示进行操作。

首先，安装程序会显示一个启动画面。

如果使用的是不同的安装盘，也许Readme文件的格式可能有所不同，但是不影响应用程序的安装。

在上面的对话框中可以直接单击对话框上的【下一步】按钮，进入下面的操作。

这时会进入一个显示微软的最终用户许可协议书的窗口，里面的内容规定了最终用户的一些必要的义务。

在这里只能选择同意，因为如果选择不同意，安装程序就退出了。

在下面的窗口中，将要求用户输入用户名和所属的公司名称，并输入产品的ID号。

这个ID号应该包含在购买的光盘中。

输入相应的信息之后，单击【下一步】按钮。

如果输入的ID号正确，那么将进入VisualBasic 6.0安装程序的下一个窗口，在这里有两个选项，对话框中对这两个选项进行了必要的解释。

在这里选择第一个选项，也是安装程序的默认选项。

单击【下一步】按钮，进入安装程序的下一个对话框。

在这个对话框中，安装程序要求选择VisualBasic 6.0应用程序的公共文件的安装路径。

在这里可以根据自己的需要把应用程序安装到希望的路径中。

在完成了路径的选择之后，单击【下一步】按钮，进入安装程序的下一步操作。

?这时完成了安装程序的初始配置，现在进入了真正和VisualBasic 6.0相关的安装程序，在经过一段初始化操作之后，安装程序将显示选择安装类型的对话框。

在这个对话框中，要进行两个操作，一个是选择VisualBasic 6.0系统的安装路径，第二个是选择程序的安装类型。

这里同样可以任意指定程序的安装位置，比如指定到“E:/VB”。

在选择安装类型的时候，有两个选择：典型安装，是安装程序根据最常用的选项安装，第二项是允许根据需要来配置安装选项。

单击【自定义安装】按钮，会显示设置安装选项的对话框。

在左边的列表框中选中或者清除复选框，就表示要或者不要安装相应的组件。

单击对话框右边的【更改选项】按钮，可以进行更为细致的设置。

选择好了需要的选项之后，单击【继续】按钮，可以开始复制VisualBasic 6.0的文件，当程序复制完所有的文件，并进行相应的系统配置之后，就会要求重新启动Windows，按照要求重新启动系统之后，VisualBasic 6.0的安装工作就基本完成了。

在重新启动电脑之后，系统会询问是否安装MSDN，这是VisualBasic 6.0的帮助系统，可以根据自己的需要安装这个系统。

希望我能帮助你解疑释惑。