文件名称:
nlp-tutorial代码注释1-1，语言模型、n-gram简介
开发工具:
文件大小: 247kb
下载次数: 0
上传时间: 2021-01-21
详细说明：本文知识点介绍来自斯坦福大学CS224N课程lecture6语言模型部分
语言模型
语言模型可以预测一个序列接下来会出现什么词。即给定一个单词序列，语言模型计算出下一个单词是词汇表中各个词的概率分布。
还有一种理解是语言模型可以计算一个句子出现的概率，计算公式如下（条件概率）：
n-gram语言模型：
含义：通过前（n-1）个词去预测某个单词。
n-gram有一个基本的假设：假设某个词的出现仅取决于它前面的n-1个单词。根据条件概率公式，某个词的出现概率计算公式为：
计算上图n-gram和(n-1)-gram的比例是通过计算他们在大型语料库中出现的次数的比例：
举个例子：As the p
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台，提供交流渠道，下载内容来自于网络，除下载问题外，其它问题请自行百度。
- 本站已设置防盗链，请勿用迅雷、QQ旋风等多线程下载软件下载资源，下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载，请稍后再次尝试；或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎，请到消费记录里找到下载记录反馈给我们，经确认后退回积分.
- 如下载前有疑问，可以通过点击"提供者"的名字，查看对方的联系方式，联系对方咨询.
