运用R分析全唐诗与全宋词

分析步骤主要由三部分构成:资料收集、词频统计、对比分析

从网上共搜集唐诗4.8万首,宋词1400首;

进过预处理过程之后,对其进行分词与词频统计,各取其词频数前50的词,罗列如下:

再直观点,来个当今流行的词云图展示一下唐宋年代各自的流行词汇:

唐诗词云

宋词词云

好了,数据准备工作算是完成了,接下来开始分析工作:

诗词分析--诗人个人情感的显著特征1:

古代文人多”相思”

“相思”、“思家”等词在情感类词语中位居首位:在 4.8万首唐诗中共出现2100余次;在1600首宋词中,更是出现了1200余次。

看来唐诗宋词是英雄难过“情关”的真实写照。

诗词分析--诗人个人情感的显著特征2:

唐诗:醉卧沙场君莫笑 宋词:做鬼也“风流”

唐诗中,“将军”、“征战”、“战马”等词出现1200余次,爱国报国的典型代表。宋词中,战争相关词鲜有出现“风流”、“多情”、“鸳鸯”取而代之。

在这方面,唐朝诗人和宋朝诗人存在着巨大的差异,差异的来源可能是:宋朝历代皇帝崇尚文人治国、武将的地位相对来说消弱很多,这个时期文人的地位升高、生活相对来说会过的更安逸;而在唐朝,习武参军、沙场成将对普通人来说仍然是通往仕途的一个不错选择。

诗词分析 -----地理位置差异:

地理喜好各不同,唐代诗人偏爱长安:“长安”是地理位置中出现频率最高的地理词,共824次。宋代词人则独爱江南:“江南”在1600首宋词中累积出现760次。

从长安到江南,是文人的迁徙,也是中国政治中心的南移。

那么问题来了,诗词歌赋哪家强?

我收集整理了从先秦时期(公元前250左右)到晚清时期(公元1900年左右)的各朝代的诗词歌赋(注:这里不包含史料、小说等素材),具体数量可能和真实情况有所出入,比如朝代越久远,遗留下来的诗词可能越少,同时收集不一定全面准确,但大致应该可以反应一个朝代的数量。归一化后拟合成曲线图:

可以看到,诗词创作数量在各个时期差异巨大,并受到国家经济、内外部的政治影响。具体来说,个人认为存在以下几方面因素:

(1)在汉朝、宋朝由于北方游牧民族的南下入侵,对文人创作有一定的制约左右。但宋朝大兴科举制度,同时不轻杀读书人的政策鼓励了文人的发展。

(2)从先秦至隋朝,匈奴与汉民族持续进行战争。在公元4世纪左右匈奴人迁入中原,改汉族姓氏,并逐渐汉化。

(3)而唐朝稳定的社会环境、较少的战争,提供了文人创作的土壤。

(4)唐宋时期推崇文人治国,大兴科举制度。

(5)文字记录、传播方式的影响,在中国历史早期,文字主要记录靠竹片、布帛完成,记录昂贵且传播不易,因此,因此文人创作主要借助短小的诗词完成,在后期,印刷造纸发明后,记录和传播变得廉价方便,一部分文人创作开始由诗词转向小说,这一点在明清时期更为显著。以至于到了现在移动互联网发展成熟后,大部分人“创作”开始转变为发微博、写段子了。

综合以上,诗词歌赋哪家强,历朝历代看宋唐。

(http://blog.csdn.net/zbc1090549839/article/details/37937123)

原文发布于微信公众号 - 大数据挖掘DT数据分析(datadw)

原文发表时间:2016-07-17

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏人称T客

细数IT巨头们的商标起源 预测他们的未来命运

尽管麦当劳叔叔和美国NBC电视网的孔雀(Peacock)商标或许电视曝光率很高,但今天操作系统的代表符号比它们还酷上许多。光是Google、苹果、微软和Linu...

2887
来自专栏云市场 精选汇

医院智能电话客服系统应用场景解决方案

那天的场景现在想想还心有余悸,午觉醒来,发现三岁的宝宝小脸通红,手背滚烫灼热,立刻取来体温计测量,高烧40度!心里瞬间悬挂千金巨石,虽然离医院很远,慌乱中还是迅...

1233
来自专栏机器人网

水下机器人首次传回福岛核电站水下废墟画面

据外媒报道,本周三(19日),东京电力公司正式向福岛核电站投放水下机器人“小太阳鱼”,用于调查废墟内结构的损坏情况。在水下,机器人顺利拍摄到了废墟内建筑崩坏的图...

3406
来自专栏FreeBuf

集齐7把钥匙,掌控全球互联网DNS

很少有人知道,庞大的互联网系统背后隐藏着一个神秘的组织,这个神秘组织的成员是来自世界各地的网络安全专家,他们手中的钥匙可以组合成控制DNS系统的主钥匙,可以影响...

1945
来自专栏编程坑太多

且看看唐诗宋词都在写什么

1775
来自专栏VRPinea

五一出门到处都是人从众,还不如在家来场环球旅行

2548
来自专栏玄魂工作室

黑色产业一 上了个“假”黄网,误入了7亿黑产的大门

一切从一个"小黄片"的谎言开始,由各种入侵为过程,最后,谁能想到,机缘巧合中,竟扣开了一扇数亿元的黑产大门… 那个再平凡不过的夜里,我一如既往的用手机刷着新闻...

642
来自专栏大数据文摘

斯诺登再爆料:美国重点监控中国

19610
来自专栏编程坑太多

讲几个关于程序员笑话!

852
来自专栏华章科技

他是码农鼻祖:颜值碾压吴彦祖,智商完爆爱因斯坦,爱好却叫人吐血...

这位犀牛兄,哦不,这位超级大神,完美的贴合了俺所有的择偶标准,不过只能叹一句,君生我未生,我生君已老。。。可尽管如此,也不能磨灭俺对于他的仰慕之情。

853

扫码关注云+社区