内包含程度级别词语,负面评价词语,负面情感词语,正面评价词语,正面情感词语,主张词语词语。 以情感词典为基础的情感分析方法: 1.要分析一句话是积极的还是消极的,最简单最基础的方法就是找出句子里面的情感词,积极的情感词比如:赞、好、顺手、华丽等;消极情感词比如:差、烂,坏、坑爹等。出现一个积极词就+1,出现一个消极词就-1。 2.“好”,“流畅”和“烂”前面都有一个程度修饰词。“极好”就比“较好”或者“好”的情感更强,“太烂”也比“有点烂”情感强得多。所以需要在找到情感词后往前找一下有没有程度修饰,并给不同的程度一个权值。 3.可以发现太烂了后面有感叹号,叹号意味着情感强烈 4. 其实我们一眼就看出最后面那个“好”并不是表示“好”,因为前面还有一个“不”字。所以在找到情感词的时候,需要往前找否定词。
2022-08-13 10:02:47 34KB 情感词典
1
3.4 领域情感词典的构建 (1) 确定种子词集合。根据所选领域的特点, 制定 相应的选择标准, 抽取语料库中的词语作为种子词, 加入到种子词集合中; (2) 确定候选情感词集合。首先将种子词转换成 对应的词向量, 根据相似度计算公式(向量的余弦计算 公式)求得与每个种子词最相似的n个词语作为候选情 感词集合; (3) 利用训练好的情感分类器判断每个候选词的 情感极性。最后整合上述分类器输出的带有情感极性 的候选词语, 添加到面向特定领域的情感词典中。 4 实验及结果分析 为了验证该方法的有效性, 本文设计实验进行验 证, 主要验证以下两点假设: 假设 1: 本文提出以词向量训练分类器判断词语 情感极性的方法优于直接利用词向量的语义相似度判 断词语情感极性。 在情感分析领域, 大部分常规机器学习方法, 如 决策树、支持向量机等, 都能够构建分类器来判断词 语的情感极性。由于自然语言的特殊性(直接特征不足, 需要转换成词向量进行分析, 特征数即为词向量的维 度), 使得支持向量机的表现优于其他机器学习算法。 假设 2: 深度学习中, 神经网络训练的分类器在 判断词语情感极性任务中的性能优于支持向量机 (SVM)训练的分类器。 4.1 实验 1: 构建基于词向量的神经网络分类器 实验使用的语义知识库包括 NTUSD; 清华大学 李军情感词典; HowNet情感词典中的正负情感词语以 及 DUTIR。语料库的获取主要借助 Python 所编写的 爬虫程序, 采集 2017 年 4 月 19 日–2017 年 10 月 9 日 的新浪财经新闻, 共计 9 422 篇, 每篇新闻均以 txt 的 形式进行存储。 对语料库进行数据预处理(去停用词、去无关符 号)与分词(构建自定义词典: 将所有股票名称和股票 代码作为一个词典, 防止分词时被切分)。抽取融合词 典与语料库的交集词汇作为训练语料, 结果如表 2 所 示。最后以语料库为对象, 使用 Word2Vec 方法生成词 向量模型, 其中每个词向量的维度为 100。 表 2 词典中的词出现在语料库中的情况表 交集的积极词数量 交集的消极词数量 总计 3 128 2 850 5 978 基于准备好的训练语料, 按照实验设计方案构建 神经网络分类器。经过 6 700 次训练后, 得到训练集准 确度为 95.02%, 预测集准确度为 95.00%。显然, 模型 的效果良好, 并没有出现过拟合和欠拟合的现象。 接着确定种子词集合。由于本文重点不在于研究 种子词抽取规则, 因此不作深入探讨。通过信息检索, 参考相关论文及结合本文语料库, 选择 20个能够代表 金融领域的词汇作为种子词集合, 如表 3 所示。 表 3 金融领域种子词集合 金融领域种子词集合 大涨, 大跌, 股票, 平仓, 牛市, 熊市, 走高, 拉升, 雄起, 利好, 利空, 清仓, 套牢, 抄底, 反弹, 减持, 乏力, 退市, 撤离, 亏 词向量最大的特点是将语义信息用向量的形式进 行分布式表示。词向量之间的余弦值能够表示词语之 间的相关性程度。通常直接利用词向量构建情感词典 的方式为: 判断种子词的情感极性, 利用词向量找出 与种子词最相似的词语集合, 与积极种子词相似的词 语被认为是积极情感词, 与消极种子词相似的词语被 认为是消极情感词, 从而构建情感词典。本文对上述 种子词集合中的种子词的情感极性进行人工判断, 找 出与每个种子词最相似的词语(取相似度最高的前 10 个词语)。对金融语料的研究发现, 绝大部分金融领域 的情感词词性为形容词或者动词, 因此在取相似度最 高的词语的过程中加入词性过滤, 仅选择形容词和动 词, 最后对积极和消极的词语分别去重, 得到情感词 典(消极词语 61 个, 积极词语 41 个)。 笔者认为仅根据词向量的相似度判断词语情感极 性的判断并不准确。因为词向量仅仅保留语义信息, 而语义信息并不能代表情感信息, 存在情感极性相反 的词语在语义关系比较相似, 如“跌”显然表示消极情
2022-07-08 16:57:41 594KB Finance
1
包含三个知名情感词典:知网Hownet、台湾大学NTUSD、清华褒贬义词典。 附其他词典和分类:褒贬词及其近义词、否定词典汉语情感词极值表、情感词典及其分类、情感词汇本体
2022-06-24 16:04:08 1.61MB 情感词典
为构建国际关系领域的情感词典,数据集(data文件)选取国内各大媒体型智库中国际关系领域文章,另选取SO-PMI种子词输入为30个(积极词消极词各15个),通过python实现得到积极词和消极词情感词表各一张,输出内容包括词汇、情感值、词长度、词性。
2022-06-23 18:13:18 1.61MB python 媒体 文档资料 自然语言处理
1
百分之百 倍加 备至 不得了 不堪 不可开交 不亦乐乎 不折不扣 彻头彻尾 充分 到头 地地道道 非常 极 极度 极端 极其 极为 截然 尽 惊人地 绝 绝顶 绝对 绝对化 刻骨 酷 满 满贯 满心 莫大 奇 入骨 甚为 十二分 十分 十足 死 滔天 痛 透 完全 完完全全 万 万般 万分 万万 无比 无度 无可估量 无以复加 无以伦比 要命 要死 已极 已甚 异常 逾常 贼 之极 之至 至极 卓绝 最为 佼佼 郅 綦 齁 最 2. “很|very” 42 不过 不少
2022-05-28 17:15:10 89KB 知网 情感分析
1
清华大学的中文褒贬义词典,txt格式,情感分析的基础资料。
1
共用12个文件,分为英文和中文。其中中文情感词典包括:评价、情感、主张、程度(正面、负面)的情感文本。可用于中文文本分析中情感分析,计算情感词语等。
2022-05-22 15:53:54 88KB 文档资料 自然语言处理 nlp
1
用python实现基于情感词典的情感分析
2022-05-18 10:30:42 141KB python 情感词典 情感分析
1
台湾大学NTUSD - 简体中文情感极性词典以及知网HowNetsentiment
2022-05-11 09:39:16 127KB 情感极性词典
1
大数据-算法-面向不均衡数据和情感词典构建的特征选择方法研究.pdf
2022-05-07 09:08:52 2.3MB 文档资料 big data 算法