无监督的财经新闻情感标注和情绪指数生成_邵元海.pdf

财经新闻报道作为金融市场重要的信息来源，其情感倾向与市场走势有着密切联系。然而财经新闻具有专业性、客观性、无标注的特点，对其情感倾向进行精准量化往往十分困难。因此，本文设计了两阶段的财经新闻情绪指数提取方法，在第一阶段，针对财经新闻无标注的问题，本文通过改进的SO-PMI算法构造财经新闻领域情感词典来对新闻进行无监督标注；在第二阶段，为了提取精确的新闻情感强度值，本文构造了新闻情绪指数，先利用已标注的新闻数据训练情感分类模型从而生成类别概率，然后通过概率值计算得到情绪指数。为了进一步验证该方法的有效性，将生成的情绪指数结合股市历史价格数据来对上证股指波动趋势进行预测。结果表明，基于注意力机制的预测模型在添加情绪指数变量后，准确率提升了3%5%，说明新闻情绪指数对于股指波动有较好的表征作用。关键词 财经新闻；无监督文本标注；情绪指数；注意力机制中图分类号 F832.5 文献标志码 A 文章编号 1004-1710（2023）03-0084-12DOI 10.15886/ki.hnus.202112.1611一、引 言新闻媒体对于金融市场信息的传播起着重要的作用，对于普通投资者来说，获取市场信息的第一渠道往往是新闻媒体报道中的财经资讯。这些资讯在发布后会影响投资者的市场预期和交易行为，从而引起股市的波动。2020年初，武汉市政府发布“新冠”疫情通告后，互联网媒体立刻报道了大量有关疫情感染情况和政府管控的新闻1，投资者第一时间从新闻中感受到生产生活将受到疫情的影响，几乎同时投资者恐慌情绪的蔓延导致了股市开始剧烈波动。2021年7月，国务院发布了针对校外培训机构的“双减”政策，该新闻在互联网媒体的发酵下2，引起“新东方”“好未来”等教培股集体暴跌，给市场造成了冲击。近年来，越来越多研究者3-9将反映基本面的新闻信息应用于金融研究领域，进而发现新闻对金融市场走势有着重要的影响。刘海飞和许金涛（2017）7利用TF-IDF文本表征技术和事件研究法，研究了不同种类的异质性财经新闻对股票短期异常收益率的影响。宋丹丹和张东（2018）8采集了大中城市机关报和都市报关于房地产市场的新闻报道，利用线性支持向量机对新闻标题进行文本分析并提取出房地产市场关注度和房地产市场情绪变量，发现媒体报道的情绪因素对市场有着显著的影响作用。齐甜方等（2021）9通过基于Seq2Seq的神经网络模型来挖掘新闻文本情绪特征，并利用自动文本摘要技术和情感挖掘技术来预测股票波动，取得了较高的预测准确率。从已有研究可以看出，自然语言处理技术在财经新闻分析领域有着广泛的应用，特别是在情感分析领域，如今的深度学习模型在基于大量已标注样本的情况下，已经能达到十分惊人的情感特征表示能力。但是，由于财经新闻具有无标注、专业性、客观性10-11的特点，许多研究者在使用人工智能模型分析新闻情感的时候，往往选择人工标注的方式来获取训练数据，这无疑会给研究工作带来困难。从已有文献来看，通过构造情感词典可以实现文本的无监督情感标注，Turney et al.（2003）12根据收稿日期 2021-12-15基金项目 国家自然科学基金委面上项目（11871183）；国家自然科学基金委地区项目（61866010）；海南省自然科学基金高层次人才项目（120RC449）作者简介 邵元海（1983-），男，新疆伊犁人，海南大学管理学院教授，博士，博士生导师，主要从事支持向量机、机器学习和最优化方法及应用研究。中国改革发展研究84邵元海等：无监督的财经新闻情感标注和情绪指数生成点互信息（Pointwise Mutual Information，PMI）和潜在的语义分析（Latent Semantic Analysis，LSA）两种不同的词关联统计方法测量文本的语义方向，并以此来扩展基础情感词典。Li et al.（2020）13通过比较四种新闻情感值与股票市场技术指标结合后的预测效果，发现Loughran-McDonald金融词典生成的新闻情感特征显著提升了股市预测的准确性。聂卉等（2020）14基于点互信息算法对特征级情感极性进行自动判别，引入了依存句法分析语句间的情感转折来修正经典的点互信息算法，从而对上下文约束下的用户观点进行情感预测。姜富伟等（2021）15在Loughran-McDonald金融词典的基础上通过人工筛选和word2vec算法扩充，构建了一个更新、更全面的中文金融情感词典。从上述研究可以看出，目前有许多的主流情感词典，但仍然缺少财经新闻领域情感词典，此外，研究者主要关注构建情感词典的语料质量、分词算法、词典拓展算法等方面，对于如何结合情感词典对中性和情感模糊财经新闻计算精确情感倾向值的问题，目前研究尚不深入。因此，为了实现财经新闻的无监督情感标注以及提取精确的新闻语义情感倾向值，本文设计了两阶段的财经新闻情绪指数（以下简称情绪指数）构造方法，同时提出了构建全新的财经新闻领域情感词典来解决财经新闻的无标注问题。首先，本文丰富了词汇情感倾向判别算法。该算法针对财经新闻专业性、客观性、无标注的特点，在传统情感倾向的点互信息算法（Semantic Orientation from Pointwise Mutual Information，SO-PMI）12基础上做了进一步研究，解决了传统方法计算新闻分词情感值时出现的正负面情感词不平衡、正负面词共现等问题，并完成了财经新闻领域情感词典的构建。其次，本文创新性地解决了中性以及情感倾向模糊新闻文本的情感倾向值计算问题，通过构建的新词典对大规模财经新闻进行无监督标注，对新闻中正负面词比例较高的新闻分别赋予正负标签，随后将已标注情感标签的新闻语料作为训练数据代入到模型中训练新闻情感分类模型，最终通过模型得出的新闻类别概率值计算新闻情绪指数；对于中性以及情感倾向模糊的新闻文本，根据模型的类别概率预测结果即可生成较为准确的情感指数值。最后，本文拓展了文本情感分析技术在金融市场上的应用研究，将量化得到的情绪指数应用于股指涨跌预测。实验结果表明，在股指预测模型中加入情绪指数变量后，模型的分类准确率显著提高，说明新闻情绪指数变量对于股指波动有较好的表征作用。二、构建财经新闻领域情感词典本文从财经门户网站采集了2019年1月1日到2021年2月28日期间内的235931条财经新闻快讯，并在此基础上利用算法自动构造财经新闻领域情感词典。词典的构建过程主要可以分为两个部分。第一个部分如图1所示，包括先对新闻进行初始分词，接着利用新词发现算法16获取财经新闻领域内新词，最后更新Jieba分词工具词库(https:/ 新闻分词器更新流程图图2 财经新闻分词词云示例图85第3期2023年海南大学学报（人文社会科学版）进一步分析分词结果可以看出，分词工具无法完整切分出例如“由涨转跌”“新理念”“冲高回落”“补短板”等财经新闻领域内新词。为解决分词过程中Jieba分词无法识别部分新词的问题，本文对初始分词结果使用新词发现算法寻找可能的财经新闻新词。该方法通过衡量词语的内部结合度和边界自由度来发现新词。词语内部结合度通过点互信息公式来度量，公式如下所示：PMI(x，y)=log2p(x，y)P(x)p(y)（2.1）其中，x,y表示两个相邻字串，p(x,y)表示x,y在财经新闻句子中相邻两个词语出现的概率，p(x)和p(y)分别表示某两个新闻词语各自出现的概率。如果PMI 0，表明x和y从信息论的角度来看是一个整体，字符串xy可能是一个新词。其次，新闻字符串左右两边的自由度也是判断这个字符串是否可以向左右两边拓展的重要依据，例如“下子”“巧可”“证监”它们的词内部结合度很高，却不是一个完整的词语。因此，我们对字符串片段左右两边的信息熵的计算来判断字符串的边界自由度，左信息熵计算公式如下：Hi(W)=-wl sp(wl|w)log2p(wl|w)（2.2）这里，p(wl|w)表示候选词w出现的条件下左邻字wl出现的概率，同理也可计算字符串的右自由度。对于字符串来说，如果边界的自由度越小，那么这个字符串就可以停止向左右两边拓展，而它自身构成的整体则是一个新词。经过新词发现并通过阈值筛选后，在Jieba分词工具词库中加入发现的新词，从而完成对Jieba分词器的更新。接下来，更新后的分词工具将用来对新闻文本进行再次分词，从而提高分词的准确性。图3展示了新词发现前后分词效果示例，通过新词发现算法，在已有分词的基础上可以进一步识别出例如“由涨转跌”“冲高回落”“大湾区”“健康码”等一系列新词。分词工具在加入新词后，进一步提升了财经新闻文本分词的质量。构建财经新闻领域内情感词典流程的第二部分如图4所示，本文提出新的新闻词汇情感倾向点互信息（News Vocabulary Semantic Orientation Pointwise Mutual Information，N-SO-PMI）算法来对财经新闻重新分词后的词语进行情感倾向判别，判别过程结合了种子情感词和分词的向量化表示来共同计算词语的N-SO-PMI值。接着，根据N-SO-PMI值将判别得到的正负面情感词汇和已有基础情感词典合并，完成对基础金融情感词典的自动扩充，最终构造出财经新闻领域内情感词典。图3 新词发现前后分词效果示例86邵元海等：无监督的财经新闻情感标注和情绪指数生成基础情感词典15中的情感词和新闻分词的交集将构成财经新闻种子情感词，如“创新”“繁荣”“廉政”“暴跌”等词同时出现在财经新闻语料和基础情感词典中，将它们作为种子情感词。而部分基础情感词词语如“疤痕”“绊倒”“联姻”等未出现在财经新闻语料中，将它们删去。经过上述处理后共产生了5682个种子情感词，包括正面词汇3226个，负面词汇2456个。表1给出了正负面种子情感词汇示例，这些情感词在新闻语料和基础情感词典中同时存在并且情感极性比较明确。接下来将新闻分词词汇作为候选情感词，通过计算这些候选情感词与种子情感词的N-SO-PMI值进行情感判别，再根据判别结果对基础情感词典进行扩充，从而得到财经新闻领域情感词典。本文提出的N-SO-PMI算法通过计算候选情感词和种子情感词之间的余弦相似程度和点互信息值，结合两者来判断词语情感类别。点互信息值利用共现概率表示两个单词之间的相关性，二者相关性越大，则越有可能属于同一个情感类别，其计算公式如下：PMI(w1，w2)=log2p(w1，w2)P(w1)p(w2)（2.3）其中，w1表示候选情感词，w2表示情感词典中的已有情感词，p(w1,w2)表示w1和w2在新闻文本中共现的概率，p(w1)、p(w2)分别表示情感词w1和w2在新闻文本中各自出现的概率。本文根据词频估计情感词出现的概率，通过计算固定文本长度中候选词和情感词的共现频数来估计共现概率。此外，词语的文档频率也反映了词汇的重要性，如图5所示，图中统计了不同情感词的文档频率，例如“发展”“增长”等词语在采集的新闻中的文档频率较高，而“诟病”“幌子”等某些突发事件或新闻中的个别专有名词出现的文档频率较低。由于词语之间的文档频率存在较大差异，导致一些有明显情感倾向但文档频率较低的情感词被忽略。因此，本文在用词频估计词语概率时引入了文档频数敏感因子，公式如下所示：i=ni，w/nwnw/n（2.4）其中，i代表候选词i的文档频数敏感因子，ni,w表示候选词和情感词的共现文档频数，nw是情感词的文档频数，n代表文档总数。乘上i值，点互信息算法考虑了词语的词频和文档频率因素，计算结果更加合理。此外，在候选词情感值计算过程中，可能会有正负面词共现的情况。例如词语“旺季不旺”出现在负面新闻语料中，该词语上下文语境中充斥大量的负面倾向词汇，可能造成“旺季”被划分到负面词典中。因此，本文利用预训练模型17中的词向量表征，计算候选词和情感词的语义相似度来避免正负类词汇被划分到一类词典中，语义相识度计算公式如下：图4 财经新闻情感词典构建流程图表1初始种子情感词示例积极种子词消极种子词发展、繁荣、增殖、一流、榜样、促进、大受欢迎、独创性、繁荣、鼓励、活跃、欢呼雀跃、合作、荣获、赢得、遵纪守法巨亏、涉嫌、资不抵债、腐败、暴跌、被告、剥离、不合法的、撤销、低迷、动荡、反叛者、高利贷、减产、破产、伪造、冻结87第3期2023年海南大学学报（人文社会科学版）i，w=VwiVw|Vwi|Vw|（2.5）其中，Vwi和Vw分别代表预训练模型中候选词和情感词的向量表征，i,w可以看作两个词语在高维语义空间中的余弦相似度。由于预训练模型是在大规模文本语料上训练得到，其产生的词向量表征蕴含了词语的语义信息，能够使相似度计算结果更加准确。最后，本文在计算过程中发现当情感词典存在正负面词不平衡的现象时，会影响点互信息的计算结果。如图6所示，该图统计了部分候选情感词对于情感词典中正面情感词的覆盖比例，可以看出不同候选词之间比例差距较大，例如“建设”“创新”等词汇和35%比例的正面词汇共同出现过，“短板”“反常”等词语与超过20%比例的正面词同时出现过。由于正负面情感词的不平衡，候选词和情感词的点互信息值经过累加后无法正确反映候选词情感倾向。例如：“在美元上涨的同时，通常与其走势反向的黄金价格周四也反常地同步走高，一度上破1530美元关口。目前，金价在过去七个交易日已有六天上扬，惯例的跨年攻势无疑已经开启！”，这则新闻中的候选词“反常”与情感词“上涨”“走高”“上扬”等正面词出现在同一文本片段中，这些正面词都会提高“反常”的正向点互信息值。因此，本文在计算候选词最终点互信息值时，通过除以候选词的情感词覆盖个数得到平均值而不是累加值来计算情感倾向。图5 情感词文档频率示例图图6 候选词覆盖情感词比例示例图200001500010000500050250文 档 频 率1752117000926086008423情感词2525242323发展 增长 创造 下跌 风险 诟病 幌子 挪用资金 疑点 申诉建设创新创造反常受益调查短板特殊投资财经新闻候选词覆盖情感词比例01020304015222325272931323588邵元海等：无监督的财经新闻情感标注和情绪指数生成为解决上述问题，本文通过如下新闻词汇情感倾向点互信息（News Vocabulary Semantic Orientation Pointwise Mutual Information，N-SO-PMI）公式对词语进行情感倾向值计算来扩充基础情感词典：（2.6）其中，wi代表候选词，wp和wn分别表示正类和负类情感词，i和i,*分别表示本文提出的文档频数敏感因子和语义相似度因子，Nipos和Nineg分别代表基础词典中与候选词i在同一长度文本中共现过的正面词和负面词数量。与传统的点互信息算法公式12相比，公式（2.6）引入了文档频数因子（2.4）和语义相似度因子（2.5），并且使用平均值来计算最终值。公式（2.6）充分考虑了候选词和情感词在语料中的词频和文档频率因素，并对正负面词在语料中共现的问题做了修正。通过公式（2.6）计算新闻文本中候选情感词的N-SO-PMI值，再根据阈值选取词语与基础情感词典合并得到财经新闻领域的情感词典。为了最大限度避免引入噪声情感词，在实际应用中则会将阈值调高，将整个情感词分类算法迭代多次进行，直到新计算出的候选情感词点互信息值低于设定的阈值或者达到模型最大迭代次数，即完成情感词扩充。本文生成的最终情感词典共包括正类词7678个，负类词9782个。合并后的财经新闻领域情感词典示例如图7所示，左边为根据阈值截取的正面情感词汇示例，右边为截取的反面情感词汇示例，字体的大小反映了该词语在语料中的词频。相比于基础情感词典，积极金融情感词增加了4452个，消极金融词汇增加了7326个，包括“肺炎疫情”“贸易战”“负增长”“ST”“对外开放”“以点带面”“阔步”等新的金融情感词都被纳入其中。三、财经新闻情绪指数生成在生成新闻情绪指数时，由于财经新闻的专业性、客观性，大量中性及情感模糊新闻的情感倾向难以被量化。因此本文通过训练情感分类模型计算新闻的情感类别概率并将其转化为情绪指数值。具体流程如图8所示，首先利用上文中生成的财经新闻领域内情感词典建立自动标注模型，完成对新闻语料的自动标注。随后利用已标注正负情感标签的新闻语料训练神经网络情感分类模型。最终，通过神经网络情感分类模型得到新闻类别预测概率，并根据概率值计算情绪指数。由于中文用语中出现“不算好”，“不太高”等“委婉”的否定结构表达方式，常常会提高正面词出现在负面文本中的比例，使得基于情感词典的情感判别方法会失效。因此，图8在自动标注模型中还引入了否定结构词典和程度副词词典，通过否定词词典识别否定结构表达方式，才能准确判断句子的情感倾向。程度副词词典根据不同的情感强化等级可以分成五组不同权重值，如图9所示，词语的情感权值等于-1表示否定结构词，情感权值大于1时表示情感强化副词。通过计算情感词前面的否定词数量，来处理语法结构中的否定和双重否定问题，新闻情感词语的情感倾向会因为否定结构词发生反转。图7 财经新闻领域内情感词典词云示例图89第3期2023年海南大学学报（人文社会科学版）接下来，在本文构造的情感词典、程度副词以及否定结构词的基础上，我们对23万条新闻数据进行了无监督情感标注，由于基于情感词典的无监督标注仅仅生成了新闻的情感类别标签，还没有生成精确的情感强度值。为了解决上述问题，本文利用神经网络模型对标注数据再次进行分类，通过这种方式，模型就可以学习到新闻中的隐含语义表达，不但能得到精确的情感强度值，还能基于文本的语义特征进行情感分析。为了避免噪声数据，我们在语料中选择了正面和负面得分较高的新闻作为训练数据来训练情感分类模型。对于图8中的监督式情感分类模型，本文使用了自然语言处理领域中带注意力机制的神经网络模型来对文本序列建模。该模型包括词嵌入层18、双向长短期记忆（Bi-directional Long-Short Term Memory，Bi-LSTM）19网络层、注意力机制（Attention Mechanism）20层和全连接层21。在词嵌入层，我们可以通过预训练模型得到包含新闻分词语义信息的嵌入式向量表达，接着将词向量依次输入到Bi-LSTM层中提取出每条新闻的语义表征。双向长短期记忆神经网络是一种改进的循环神经网络（Recurrent Neural Network，RNN）22，它大大缓解了RNN训练过程中出现的梯度爆炸和梯度消失问题，而且可以从前后两个方向对文本进行序列建模。双向长短期记忆神经网络存在不同的门控单元，包括遗忘门ft、输入门it和输出门ot。每个门控单元输入上一时刻的隐藏状态ht-1和当前时刻的新输入数据xt，也就是词嵌入向量。输入门决定了当前时刻输入词汇信息c?t有多少被吸收，遗忘门决定了上一时刻词汇状态ct-1有多少被保留，输出门决定了当前时刻输出信息有多少被传递到下一时刻神经元中。每个门控单元的计算公式如下所示：遗忘门：ft=(Wfxxt+Wfhht-1+bf)（3.1）输入门：it=(Wixxt+Wihht-1+bi)（3.2）输出门：ot=(Woxxt+Wohht-1+bo)（3.3）新输入：c?t=Tanh(Wcxxt+Wchht-1+bc)（3.4）单元状态：ct=ftct-1+itc?t（3.5）单元输出：ht=otTanh(ct)（3.6）每个门控单元权重矩阵（三个门控单元的权重矩阵和一个输入值的权重矩阵）都分别由Wx Rdh dx,Wh Rdh dx两个部分组成，b是偏置向量，()是激活函数，Tanh是双曲正切函数，为元素的点乘操作。这里三个门控单元的计算方式相同，激活函数()采用sigmoid函数，将每个门控单元的向量值映射到0,1之间。接下来，我们将输出的新闻隐藏状态矩阵H=h1,h2,hT Rdh T输入到神经网络注意力机制层中进一步生成新闻的深层语义特征。注意力机制（Attention Mechanism）是由Bahdanau（2014）20首次引入到机器翻译领域。通过注意力机制，神经网络模型可以生成注意力权重矩阵来对新闻中不同词语赋予不同的权重，区分了不同词语对新闻语义的影响程度，使模型能更好地捕捉新闻的核心信息，从而避免了神经网络模型在对一长段新闻文本的图8 财经新闻情绪指数生成流程图图9 否定词和程度副词情感权重图90邵元海等：无监督的财经新闻情感标注和情绪指数生成训练过程中，对距离当前输入词较远的词语产生梯度遗忘的问题。如果将LSTM网络输出的隐藏状态向量所组成的矩阵记为H=h1,h2,hT Rdh T，T代表新闻的平均长度，对于超过或者不足长度T的新闻采取了Padding操作进行处理，T也代表预测周期的长度，而预测标签即为上文通过无监督标注方法标记的新闻情感标签。注意力机制最终会在每一个隐藏状态向量ht之上产生一个注意力权重向量t，而注意力网络层的输出ct是由所有隐藏状态向量经过t加权，再进行非线性变换后得到，即最终新闻的向量化表示：Align(ht，ht)=vTttanh(WKht+WQht)（3.7）ht=exp(Align(ht，ht)Texp(Align(ht，ht)（3.8）t=Ththt（3.9）ct=tanh(Wc t：ht)（3.10）公式（3.7）使用了加性注意力机制公式，WK，WQ分别代表某种线性变换的权重矩阵，vt代表权重向量，每一个分量代表新闻中词语的语义权重。最后经由softmax层得到模型对类别的概率输出，如公式（3.11）所示：pi=softmax(WTCi+b)（3.11）sentimenti=2 (pk-min(p)max()p-min(p)-1（3.12）其中，W和b分别表示全连接层的权重矩阵和偏置项，i为经过注意力机制模型特征提取后的第i条新闻的向量表示，Pi为新闻i属于正面新闻的概率预测结果。最终，通过（3.12）式中的评分转化公式将预测概率转化为-1,1之间的情绪指数值。四、实证结果与分析本文采集了从2019年1月1日到2021年2月28日共23万条财经新闻文本和金融市场中有代表性的股票市场指数，包括上证指数、上证50指数、沪深300指数、深证成份指数四种股指。由于不同股指包含的成份股不同，本文根据新闻中提到的股票代码和名称进行匹配，对新闻进行了分类，从而构建了四种股指对应的新闻数据集。基于以上信息，本文生成了四种股指的月度收益率曲线，并且对四种股指各自的新闻数据集生成了基于N-SO-PMI算法和传统SO-PMI算法的新闻月度情绪指数曲线，如图10所示。图10 四种股指及对应新闻情绪指数走势对比图91第3期2023年海南大学学报（人文社会科学版）图10中四幅子图的横坐标表示时间跨度，即从2019年1月到2022年2月，共26个月，纵坐标表示情绪指数区间和收益率区间，SZ、SZ50、hs300、SC分别表示上证指数、上证50指数、沪深300指数和深证成份指数。另外，图10中圆点线-代表股指收益率，三角线-sen1代表由传统SO-PMI算法构造的新闻情绪指数，五星线-sen2代表基于本文提出的N-SO-PMI算法构造的新闻情绪指数。从图10中可以看出，相比于三角线，五星线与圆点线的趋势更具有一致性，即基于N-SO-PMI算法生成的新闻情绪指数和股指收益率曲线走势更加吻合，且两者之间有较强的正相关关系。此外，通过观察可以发现，新闻情绪指数sen1虽然在走势上和待预测股指走势不尽相同，在某些时间节点还会出现相反的走势，但是和sen2相比，sen1的走势对股指来说更加具有前瞻性。而sen2走势滞后于sen1，更加接近于近期股指波动情况，更适合用于股指的短期预测。原因可能是本文使用的情绪指数生成方式更好地提取出了当期新闻中与股指波动有关的情感语义特征，使得计算得到的新闻情绪指数和股指走势更具有一致性。接下来，本文将通过统计股指收益率曲线和情绪指数曲线的同涨同跌天数占整个时间周期的比例来进一步说明两者的一致性关系。在新闻采集周期内共有522个交易日，本文利用上述四种股指各自对应的新闻数据集，分别生成了基于N-SO-PMI算法和传统SO-PMI算法的新闻文本日度情绪指数，并且计算了情绪指数和对应股指日收益率曲线之间的同涨同跌比例，如图11所示。图11 不同互信息算法下情绪指数和股指同涨同跌比例图图11中横坐标代表不同的间隔天数，用period表示，间隔天数分别选取了1天、5天、10天、20天。当period=10时，表示如果股指日收益率曲线中第k天的数值大于第k-10天的数值，则第k天的标签即为上涨，反之则为下跌。同理我们可以得到情感指数的涨跌标签，然后通过统计股指收益率和情感指数之间的同涨同跌天数总和计算同涨同跌比例值。图11中纵坐标表示比例值，上半部分表示基于N-SO-PMI算法在不同时间间隔下的不同股指收益率与情绪指数的同涨同跌比例值，下半部分表示基于SO-PMI算法在不同时间间隔下的不同股指收益率与情绪指数的同涨同跌比例值。从图中可以看出，基于N-SO-PMI算法生成的新闻情绪指数和股指涨跌的相关性更强，同涨同跌比例大部分在60%以上，普遍高于传统SO-PMI算法。基于N-SO-PMI算法生成的新闻情绪指数与上证指数收益率同涨同跌比例最高，超过70%，说明本文方法构建的情绪指数的走势与上证指数收益率的走势比其他股指更加一致。接下来，本文将重新构造数据集并利用生成的情绪指数来对上证指数收益率的涨跌进行预测。为进一步说明生成的情绪指数在金融市场分析和预测应用上的有效性，接下来将对股指的涨跌进行预测，其中所用到的数据集、代码和预测工具已上传到网站。本文从Wind数据库获取了上证指数、上证 https：/ 傅苏颖.全民关注!武汉新增病例17例,病毒防控防治正在升级,医药股早有异动EB/OL.(2020-01-19)2021-12-14.http:/ 甘皙.“双减”政策之下,千万教培从业者该去向何方?EB/OL.(2021-08-30)2021-12-14.https:/ 赵丽丽,赵茜倩,杨娟,等.财经新闻对中国股市影响的定量分析J.山东大学学报(理学版),2012,47(07):70-75+80.4 沈艳,陈赟,黄卓.文本大数据分析在经济学和金融学中的应用:一个文献综述J.经济学(季刊),2019,18(04):1153-1186.5 唐国豪,姜富伟,张定胜.金融市场文本情绪研究进展J.经济学动态,2016(11):137-147.6 包亚兄,邓平军.新闻报道对战略性新兴产业指数波动的影响J.统计与决策,2021,37(16):171-174.7 刘海飞,许金涛.互联网异质性财经新闻对股市的影响来自中国互联网数据与上市公司的证据J.产业经济研究,2017(01):76-88.8 宋丹丹,张东.城市报媒情绪、公众关注与房地产市场基于35个大中城市报媒房地产新闻的面板分析J.海南大学学报(人文社会科学版),2018,36(04):118-127.9 齐甜方,蒋洪迅.基于Seq2Seq文本摘要和情感挖掘的股票波动趋势预测J.管理评论.2021,(5):257-269.10 TETLOCK P C.Giving content to investor sentiment:the role of media in the stock marketJ.The journal of finance,2007,62(3):1139-1168.11 李佐文,李楠.新闻话语的可计算特征J.现代传播(中国传媒大学学报),2018,40(12):41-44.12 TURNEY P D,LITTMAN M L.Measuring praise criticism inference of semantic orientation from associationJ.Acm transactions on information systems,2003,21(4):336-355.13 LI X,WU P,WANG W.Incorporating stock prices and news sentiments for stockmarket prediction:a case of Hong KongJ.Information processing&management,2020,57(5):102-212.14 聂卉,首欢容.基于修正点互信息的特征级情感词极性自动研判J.图书情报工作,2020,64(05):114-123.15 姜富伟,孟令超,唐国豪.媒体文本情绪与股票回报预测J.经济学(季刊),2021,21(04):1323-1344.16 李文坤,张仰森,陈若愚.基于词内部结合度和边界自由度的新词发现J.计算机应用研究,2015,32(08):2302-2304+2342.17 LI S,ZHAO Z,HU R,et al.Analogical reasoning on chinese morphological and semantic relationsC/Meeting of the association for computational linguistics.2018,56(2):138143.18 MIKOLOV T,SUTSKEVER I,CHEN K,et al.Distributed representations of words and phrases and their compositionalityJ.Advances in neural information processing systems,2013,26(2):3111-3119.19 SCHUSTER M,PALIWAL K K.Bidirectional recurrent neural networksJ.IEEE transactions on signal processing,1997,4594邵元海等：无监督的财经新闻情感标注和情绪指数生成(11):2673-2681.20 BAHDANAU D,CHO K,BENGIO Y.Neural machine translation by jointly learning to align and translateJ.Computer science,2014:1409.0473.21 MCCULLOCH W S,PITTS W.A logical calculus of the ideas immanent in nervous activityJ.The bulletin of mathematical biophysics,1943,5(4):115-133.22 GILES C L,KUHN G M,WILLIAMS R J.Dynamic recurrent neural networks:theory and applicationsJ.IEEE trans on neural networks,1994,5(2):153-156.23 ZHANG J,SHAO Y H,HUANG L W,et al.Can the exchange rate be used to predict the shanghai composite index?J.IEEE access,2019,8:2188-2199.24 林杰,康慧琳.基于注意力机制的LSTM股价趋势预测研究J.上海管理科学.2020,42(1):109-115.特约编辑：金 禾Sentiment Labeling and Sentiment Index Generation in Unsupervised Financial News SHAO Yuan-haia,HE Yangb,L Xiao-jinga(a.College of Management;b.College of Economics,Hainan University,Haikou 570228,China)Abstract:Financial news reports are an important source of information in the financial market,and their sentiment tendencies are closely related to market tends.However,financial news has the characteristics of professionalism,objectivity,and non-labeling,and it is often very difficult to accurately quantify its sentiment tendencies.Therefore,this paper designs a two-stage extraction method of financial news sentiment index.In the first stage,for the unlabeled issues of financial news,a sentiment dictionary in the field of financial news is constructed through the improved SO-PMI algorithm to label news in an unsupervised way.In the second stage,the news sentiment index is built to extract the accurate news sentiment intensity value.Initially,the labeled news data is used to train the sentiment classification model so as to generate the category probability,and then the sentiment index can be obtained through the calculation of probability value.In order to further verify the effectiveness of this method,the generated sentiment index is combined with the historical price data of stock market to predict the fluctuation of the Shanghai Stock Index.The experimental results show that the accuracy of prediction model based on the attention mechanism can be improved by 3%-5%after the addition of the sentiment index variable,indicating that the news sentiment index has a better representation on the stock index fluctuation.Key words:financial news;unsupervised text annotation;sentiment index;attention mechanism95