1. 安装 docker https://docs.docker.com/engine/install/ubuntu/#install-using-the-repository 2. 安装 dify 请先访问 https...
数据集：中文酒店评论分类语料.csv 1. 数据处理 2. 模型训练评估
梯度裁剪是一种有效的防止梯度爆炸的技术，特别是在训练深度神经网络和循环神经网络时。它通过限制梯度的大小，使训练过程更加稳定。虽然有时可能会影响收敛速度，但它对于防止训练失败是非常有用的。 1. 梯度爆炸 梯度爆炸是指在反...
Github：https://github.com/PaddlePaddle/ERNIE 1. ERNIE 1.0 ERNIE 1.0：https://arxiv.org/pdf/1904.09223.pdf Bert ...
序列标注任务指的把原始序列元素逐一标注并生成新标签序列的任务叫做序列标注任务。以中文命名实体识别任务为例，主要的标签体系有： BIO 标签体系 BIEO 标签体系 BIESO 标签体系 1. BIO 标签体系 BIO 标...
KL 散度是一种衡量两个概率分布之间差异的度量。它描述了一个概率分布相对于另一个概率分布的 信息损失。在信息论中，KL散度也被称为相对熵。 假设：、 为随机变量 的两个概率分布，在离散和连续随机变量的情形下，KL 散度计...
高斯分布（Gaussian distribution），也叫正态分布，是数据分析和统计学中最常见的一种概率分布。它得名于德国数学家卡尔·高斯，因其呈现一个对称的“钟形”曲线，因此也被称为“钟形曲线”或“钟形分布”。 1....
在词袋模型中，由于并不考虑词序，会导致 “我爱你” 和 “你爱我” 这两个文本的向量表示相同。比如： 根据语料构建词表为：[“我”, “...
在带有注意力机制的 Encoder-Decoder 模型中存在很多注意力机制，本篇文章根据原始论文对 Bahdanau 注意力计算方法和 Luong 注意力计算方法进行总结。 Bahdanau Attention Luo...
我们在做文本预处理工作时，经常需要使用正则表达式。例如：判断是否是中文、是否是标点符号、是否是空行等等，我们将这些常用的用法记录下来，方便下次使用。 1. 判断是否中文 程序输出结果： 2. 连续空格处理 程序输出结果：...
PGN 网络可用于文本生成，文本生成任务是从序列到序列的模型，马上就想到了 Seq2Seq 架构的模型。当我们要实现一个文本摘要的文本生成任务时，基本思路是什么样的呢？ 输入一串文本到编码器，提取句子的语义表示向量 由解...
句子的相似性可以使用下面的一些方法来计算： 杰卡德相似度 余弦相似度 TextRank 相似度 1. 杰卡德相似度 杰卡德相似度需要计算两个句子的交并集，然而这里没有说明使用什么粒度来计算。所以我们可以基于词粒度来计算，...
冀公网安备13050302001966号
