自然语言处理：基于预训练模型的方法-车万翔 郭江 崔一鸣
- 书名： 自然语言处理：基于预训练模型的方法
- 作者： 车万翔 郭江 崔一鸣
- 简介： 自然语言处理被誉为“人工智能皇冠上的明珠”。深度学习等技术的引入为自然语言处理技术带来了一场革命，尤其是近年来出现的基于预训练模型的方法，已成为研究自然语言处理的新范式。本书在介绍自然语言处理、深度学习等基本概念的基础上，重点介绍新的基于预训练模型的自然语言处理技术。本书包括基础知识、预训练词向量和预训练模型三大部分：基础知识部分介绍自然语言处理和深度学习的基础知识和基本工具；预训练词向量部分介绍静态词向量和动态词向量的预训练方法及应用；预训练模型部分介绍几种典型的预训练语言模型及应用，以及预训练模型的最新进展。除了理论知识，本书还有针对性地结合具体案例提供相应的PyTorch代码实现，不仅能让读者对理论有更深刻的理解，还能快速地实现自然语言处理模型，达到理论和实践的统一。本书既适合具有一定机器学习基础的高等院校学生、研究机构的研究者，以及希望深入研究自然语言处理算法的计算机工程师阅读，也适合对人工智能、深度学习和自然语言处理感兴趣的学生和希望进入人工智能应用领域的研究者参考。
- 出版时间 2021-07-01 00:00:00
- ISBN： 9787121415128
- 分类： 计算机-人工智能
- 出版社： 电子工业出版社
高亮划线
1.4 自然语言处理技术发展历史
-
📌 其实，文本自身的顺序性就是一种天然的标注数据， ^13-2625-2648
- ⏱ 2023-07-19 19:27:38
-
📌 超大规模预训练语言模型完全依赖“蛮力”，在大数据、大模型和大算力的加持下，使自然语言处理取得了长足的进步。 ^13-3036-3089
- ⏱ 2023-07-19 19:28:42
2.1 文本的表示
- 📌 并能够通过编辑距离等算法计算两个字符串之间的字面相似度 ^15-573-600
- ⏱ 2023-07-19 19:34:27