情感分析(Sentiment Analysis)的难题--转
2009-11-17 11:28
176 查看
我们对在线文本进行文本挖掘的任务之一,就是进 行情感分析(SentimentAnalysis),即分析发贴人对某个对象的态度是正面还是负面。这个过程当然不是仅仅查找"好","坏"这些关键字那 么简单,有时候相似度很高的句子,却反映了截然不同的态度,譬如下面这两句话
"这瓶洗发水,适合头发很干的人用"
"用了这瓶洗发水,头发变得很干"
两个句子中的主要成分都差不多,"洗发水","头发","很干",但是第一句是褒义,第二句则很可能是贬义。对于后一句的处理还算简单,告诉计算机 程序头发"很干"不好,因此让头发"变得""很干"的洗发水,也就不是好的洗发水。而前一句呢,我们能够理解"适合头发很干的人用"是指使用该洗发水后, 能让头发变得不那么干燥点。但是假设我们告诉计算机,"某某产品适合XXX的人用"就是指用了某某产品后,XXX的人就会变得不那么XXX,那么当计算机 处理"这件衣服,适合漂亮女生穿",你猜它会怎么理解?(漂亮的女生穿了就会变得不那么漂亮)
还有一类问题是讽刺(反话)和幽默,国外的一个自然语言处理专家也在他的blog上感叹道,"Humor is hard"。在国内,很多褒义词受到论坛文化的影响,往贬义词发展的趋势,例如"我太崇拜你了","你太有才了"。
说到底,这些都是自然语言处理面对的一个挑战,即如何将生活经验、文化传统等表达为一种可以被计算机理解和利用的形式。
写到这儿,我同事的电脑刚刚蓝了一次屏,他跟我说,"这电脑也太稳定了吧"。
转:http://blog.csdn.net/CICTech/archive/2008/04/15/2294240.aspx
"这瓶洗发水,适合头发很干的人用"
"用了这瓶洗发水,头发变得很干"
两个句子中的主要成分都差不多,"洗发水","头发","很干",但是第一句是褒义,第二句则很可能是贬义。对于后一句的处理还算简单,告诉计算机 程序头发"很干"不好,因此让头发"变得""很干"的洗发水,也就不是好的洗发水。而前一句呢,我们能够理解"适合头发很干的人用"是指使用该洗发水后, 能让头发变得不那么干燥点。但是假设我们告诉计算机,"某某产品适合XXX的人用"就是指用了某某产品后,XXX的人就会变得不那么XXX,那么当计算机 处理"这件衣服,适合漂亮女生穿",你猜它会怎么理解?(漂亮的女生穿了就会变得不那么漂亮)
还有一类问题是讽刺(反话)和幽默,国外的一个自然语言处理专家也在他的blog上感叹道,"Humor is hard"。在国内,很多褒义词受到论坛文化的影响,往贬义词发展的趋势,例如"我太崇拜你了","你太有才了"。
说到底,这些都是自然语言处理面对的一个挑战,即如何将生活经验、文化传统等表达为一种可以被计算机理解和利用的形式。
写到这儿,我同事的电脑刚刚蓝了一次屏,他跟我说,"这电脑也太稳定了吧"。
转:http://blog.csdn.net/CICTech/archive/2008/04/15/2294240.aspx
相关文章推荐
- 情感分析(Sentiment Analysis)的难题
- 情感分析(Sentiment Analysis)的难题
- 情感分析(Sentiment Analysis)的难题
- 基于改进依赖分析的微博情感倾向性分析
- 【R语言】文本挖掘-情感分析
- 斯坦福CoreNLP —— 用Java给Twitter进行情感分析
- keras实现双向循环RNN,豆瓣电视剧评论情感分析
- 使用非监督学习技术分析情感(IEEE2013)
- 【python 自然语言处理】对胡歌【猎场】电视剧评论进行情感值分析
- 情感分析简述
- 商品评论中的实体情感分析
- 用python实现简单的文本情感分析
- Word2Vec教程 - Skip-Gram模型(原理)(CNN情感分析yoom例子三)
- snownlp情感分析源码解析
- 使用循环神经网络训练情感分析
- [置顶] 【python 自然语言处理】对胡歌【猎场】电视剧评论进行情感值分析
- NLP情感分析监督学习样本打标
- 情感分析综述
- 短文本(微博)情感分析
- 斯坦福大学自然语言处理第七课“情感分析(Sentiment Analysis)”