运用R分析全唐诗与全宋词

分析步骤主要由三部分构成:资料收集、词频统计、对比分析

从网上共搜集唐诗4.8万首,宋词1400首;

进过预处理过程之后,对其进行分词与词频统计,各取其词频数前50的词,罗列如下:

再直观点,来个当今流行的词云图展示一下唐宋年代各自的流行词汇:

唐诗词云

宋词词云

好了,数据准备工作算是完成了,接下来开始分析工作:

诗词分析--诗人个人情感的显著特征1:

古代文人多”相思”

“相思”、“思家”等词在情感类词语中位居首位:在 4.8万首唐诗中共出现2100余次;在1600首宋词中,更是出现了1200余次。

看来唐诗宋词是英雄难过“情关”的真实写照。

诗词分析--诗人个人情感的显著特征2:

唐诗:醉卧沙场君莫笑 宋词:做鬼也“风流”

唐诗中,“将军”、“征战”、“战马”等词出现1200余次,爱国报国的典型代表。宋词中,战争相关词鲜有出现“风流”、“多情”、“鸳鸯”取而代之。

在这方面,唐朝诗人和宋朝诗人存在着巨大的差异,差异的来源可能是:宋朝历代皇帝崇尚文人治国、武将的地位相对来说消弱很多,这个时期文人的地位升高、生活相对来说会过的更安逸;而在唐朝,习武参军、沙场成将对普通人来说仍然是通往仕途的一个不错选择。

诗词分析 -----地理位置差异:

地理喜好各不同,唐代诗人偏爱长安:“长安”是地理位置中出现频率最高的地理词,共824次。宋代词人则独爱江南:“江南”在1600首宋词中累积出现760次。

从长安到江南,是文人的迁徙,也是中国政治中心的南移。

那么问题来了,诗词歌赋哪家强?

我收集整理了从先秦时期(公元前250左右)到晚清时期(公元1900年左右)的各朝代的诗词歌赋(注:这里不包含史料、小说等素材),具体数量可能和真实情况有所出入,比如朝代越久远,遗留下来的诗词可能越少,同时收集不一定全面准确,但大致应该可以反应一个朝代的数量。归一化后拟合成曲线图:

可以看到,诗词创作数量在各个时期差异巨大,并受到国家经济、内外部的政治影响。具体来说,个人认为存在以下几方面因素:

(1)在汉朝、宋朝由于北方游牧民族的南下入侵,对文人创作有一定的制约左右。但宋朝大兴科举制度,同时不轻杀读书人的政策鼓励了文人的发展。

(2)从先秦至隋朝,匈奴与汉民族持续进行战争。在公元4世纪左右匈奴人迁入中原,改汉族姓氏,并逐渐汉化。

(3)而唐朝稳定的社会环境、较少的战争,提供了文人创作的土壤。

(4)唐宋时期推崇文人治国,大兴科举制度。

(5)文字记录、传播方式的影响,在中国历史早期,文字主要记录靠竹片、布帛完成,记录昂贵且传播不易,因此,因此文人创作主要借助短小的诗词完成,在后期,印刷造纸发明后,记录和传播变得廉价方便,一部分文人创作开始由诗词转向小说,这一点在明清时期更为显著。以至于到了现在移动互联网发展成熟后,大部分人“创作”开始转变为发微博、写段子了。

综合以上,诗词歌赋哪家强,历朝历代看宋唐。

(http://blog.csdn.net/zbc1090549839/article/details/37937123)

原文发布于微信公众号 - 大数据挖掘DT数据分析(datadw)

原文发表时间:2016-07-17

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏机器人网

科学家研发微型蠕动机器人,吸收水分可改变形状和大小

据外媒The Verge报道,韩国首尔大学的研究人员已经创造出能够依靠吸收周围环境中水分而前行的机器人。本周在《科学机器人》杂志上描述的所谓的“湿度机器人”可以...

2864
来自专栏华章科技

日本老爷爷坚持17年用Excel作画,我可能用了假的Excel···

742
来自专栏新智元

是否拘留,算法说了算!加州全美首个废除保释金制度,用算法评估取代

从2019年10月开始,加州将取消保释金制度,在加州被控犯罪的人将使用一种算法进行打分评估,而不再使用巨额保释金作为自由的抵押品。然后,县官员将根据算法的打分决...

912
来自专栏量子位

硅谷开办全球首家幼儿AI学校,但……事情并没有这么简单

AI浪潮滚滚而来,小朋友不会搞深度学习可还行?你怎么甘心让宝贝落后同龄人一大截?深度学习,现在可是要从娃娃抓起啊!

1012
来自专栏华章科技

干数据不容错过的16部电影

发行时间:1998年07月10日 科幻惊栗手法描写一名天才数学家触目惊心的经历。才华盖世的数学家马斯在过去十年来,发现股票市场在混乱波动背后原来由一套数学模式操...

522
来自专栏编程坑太多

且看看唐诗宋词都在写什么

2255
来自专栏我是攻城师

生儿子幸福还是生女儿幸福?让大数据告诉你!

2968
来自专栏大数据文摘

Nature:2014年度十大科学人物

1395
来自专栏大数据文摘

解密蒙娜丽莎的微笑

2515
来自专栏程序员的知识天地

都说程序员穿衣就是这么丑,你该看看人家硅谷精英!

昨天,看到一篇题为「程序员为什么都穿得那么丑」的文章,当时简直气炸,心想你凭什么吐槽我们程序员,天天加班写代码已经很辛苦了根本没时间注意着装好嘛!

2073

扫码关注云+社区