自然语言处理NLP从入门到项目实战：Python语言实现

作者简介

艾浒 北京大学计算机专业学士 北京百灵互联科技有限公司创始人兼CTO 芭莎宝贝(北京)文化传媒有限公司联合创始人兼CTO 北京生生万年科技CTO 全球首款AI写作平台L8ai.com创始人 15年人工智能科技/互联网/媒体行业经验 快手/百度/京东/喜马拉雅/蚂蚁集团等知名“大厂”特约撰稿人，在知乎上获得4000万阅读量 发明专利：一种人工智能辅助写作系统 软件著作权：百灵AI智能写作平台

内容简介

2.1.1 自然语言处理技术与人工智能的关系 自然语言处理（Natural Language Processing，NLP）技术是人工智能技术的核心课题之一，在学习NLP技术之前，我们首先要搞清楚人工智能的定义是什么。从人工智能（Artificial Intelligence）的英文词源上就能得到精确理解。 Artificial：人造的东西。 Intelligence：维基百科的解释是 capacity of logic（逻辑思维能力）、understanding（理解力）、self awareness（自我意识）、learning（学习）、emotional knowledge（情感知识）、reasoning（推理）、planning（计划）、creativity（创造力）、problem solving（解决问题的能力）。 对词源的含义进行总结，可以得出，人工智能是具有类人的思考和行为能力的人造物。 那么我们该如何与它沟通呢？ 语言是人与人工智能最自然的交流方式，而NLP就是研究人与计算机之间的自然语言通信，所以说，NLP是人工智能最关键、最热门的研究领域。 目前的人工智能发展还处于弱人工智能阶段，即虽然看起来像是智能的，但并不真正拥有智能，也没有自主意识。不过，弱人工智能也在很多方面超过了人类，甚至可以胜任很多人类传统的劳动岗位。 为什么人工智能没有人类的智力和自主意识，但在很多单项能力上却能超过人类呢？这就和卫 星虽然没有肌肉和羽毛，但在空气动力学和计算机技术的加持下，在很多方面已超过鸟类是一个道理。人工智能虽然没有自我意识，但它在数学、统计学及神经网络的加持下，能在很多单项能力上超过人类。 例如，在自然语言理解方面，谷歌 AI 团队于 2019年发布的神经网络模型，在机器阅读理解顶级水平测试 SQuAD_x001e_1.1 中表现惊人：在两个衡量指标上全面超越了人类。仅仅一年后，谷歌的神经网络模型又被 OpenAI更强大的模型打败。2020年，百度的 ERNIE 2.0后来居上，在某些自然语言处理任务中打败了其他模型。 在语音分析领域，市面上如天猫精灵、小米小爱、科大讯飞家教机、亚马逊语音助手、Apple公司的Siri等，基本上都能掌握十亿甚至百亿级的对话库，无论是知识量还是理解能力，都已接近甚至超越了人类。 在人工智能翻译领域，AI同声传译已经为博鳌亚洲论坛、世界人工智能大会等高级别国际会议 提供服务，在金融、医疗和科技等领域已接近专业翻译人员的水平。 技术型企业家+“大厂”签约作者 通过通俗易懂的语言 解读晦涩难懂的前沿技术 带领机器从牙牙学语到行云流水