自然语言处理概述
快速了解自然语言处理
什么是自然语言处理
自然语言处理(Natural Language Processing,简称NLP);主要包含自然语言的理解和生成;是人工智能和语言学领域的分支学科。
自然语言理解:将自然语言转化为计算机更易于处理的形式,让电脑懂人类语言;
自然语言生成:将计算数据转化为自然语言;
自然语言发展背景和历程
- 1948年,香农把"熵"的概念引用到语言处理中
- 1956年,乔姆斯基提出来上下文无关语法。[基于规则和概率]
- 70年代,NLP研究进入低谷期
- 80年代,有限状态模型和经验主义研究方法复苏
- 90年代以后,计算机速度和存储量大幅增加,NLP商业化出现
自然语言涉及的学科领域
- 语言学
- 计算机科学(提供模型标识、算法设计、计算机实现)
- 数学(数学模型)
- 统计学(提供样本数据的预测统计技术)
- 心理学
- 哲学(提供人类思维和语言的更深层次处理)
- 电子工程(信息论基础和语言信号处理技术)
- 生物学(人类言语行为机制理论)
自然语言处理的技术体系
自然语言处理工作原理
过程:形式化描述——数学模型算法化——程序化——实用化
- 形式化:研究的问题在语言上建立形式化模型,使其可以数学形式展示出来
- 数学化:把数学模型标识为算法的过程,成为算法化
- 程序化:根据算法计算机实现,建立各种自然语言处理系统
- 实用化:对系统进行评测和改进,最终满足现实需求
About ME
👋 读书城南,🤔 在未来面前,我们都是孩子~
- 📙 一个热衷于探索学习新方向、新事物的智能产品经理,闲暇时间喜欢coding💻、画图🎨、音乐🎵、学习ing~
👋 Social Media
🛠️ Blog: http://oceaneyes.top
⚡ PM导航: https://pmhub.oceangzy.top
☘️ CNBLOG: https://www.cnblogs.com/oceaneyes-gzy/
🌱 AI PRJ自己部署的一些算法demo: http://ai.oceangzy.top/
📫 Email: 1450136519@qq.com
💬 WeChat: OCEANGZY
💬 公众号: UncleJoker-GZY
👋 加入小组~
👋 感谢打赏~
本博客所有文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来自 OCAEN.GZY读书城南!