运用R分析全唐诗与全宋词

分析步骤主要由三部分构成:资料收集、词频统计、对比分析

从网上共搜集唐诗4.8万首,宋词1400首;

进过预处理过程之后,对其进行分词与词频统计,各取其词频数前50的词,罗列如下:

再直观点,来个当今流行的词云图展示一下唐宋年代各自的流行词汇:

唐诗词云

宋词词云

好了,数据准备工作算是完成了,接下来开始分析工作:

诗词分析--诗人个人情感的显著特征1:

古代文人多”相思”

“相思”、“思家”等词在情感类词语中位居首位:在 4.8万首唐诗中共出现2100余次;在1600首宋词中,更是出现了1200余次。

看来唐诗宋词是英雄难过“情关”的真实写照。

诗词分析--诗人个人情感的显著特征2:

唐诗:醉卧沙场君莫笑 宋词:做鬼也“风流”

唐诗中,“将军”、“征战”、“战马”等词出现1200余次,爱国报国的典型代表。宋词中,战争相关词鲜有出现“风流”、“多情”、“鸳鸯”取而代之。

在这方面,唐朝诗人和宋朝诗人存在着巨大的差异,差异的来源可能是:宋朝历代皇帝崇尚文人治国、武将的地位相对来说消弱很多,这个时期文人的地位升高、生活相对来说会过的更安逸;而在唐朝,习武参军、沙场成将对普通人来说仍然是通往仕途的一个不错选择。

诗词分析 -----地理位置差异:

地理喜好各不同,唐代诗人偏爱长安:“长安”是地理位置中出现频率最高的地理词,共824次。宋代词人则独爱江南:“江南”在1600首宋词中累积出现760次。

从长安到江南,是文人的迁徙,也是中国政治中心的南移。

那么问题来了,诗词歌赋哪家强?

我收集整理了从先秦时期(公元前250左右)到晚清时期(公元1900年左右)的各朝代的诗词歌赋(注:这里不包含史料、小说等素材),具体数量可能和真实情况有所出入,比如朝代越久远,遗留下来的诗词可能越少,同时收集不一定全面准确,但大致应该可以反应一个朝代的数量。归一化后拟合成曲线图:

可以看到,诗词创作数量在各个时期差异巨大,并受到国家经济、内外部的政治影响。具体来说,个人认为存在以下几方面因素:

(1)在汉朝、宋朝由于北方游牧民族的南下入侵,对文人创作有一定的制约左右。但宋朝大兴科举制度,同时不轻杀读书人的政策鼓励了文人的发展。

(2)从先秦至隋朝,匈奴与汉民族持续进行战争。在公元4世纪左右匈奴人迁入中原,改汉族姓氏,并逐渐汉化。

(3)而唐朝稳定的社会环境、较少的战争,提供了文人创作的土壤。

(4)唐宋时期推崇文人治国,大兴科举制度。

(5)文字记录、传播方式的影响,在中国历史早期,文字主要记录靠竹片、布帛完成,记录昂贵且传播不易,因此,因此文人创作主要借助短小的诗词完成,在后期,印刷造纸发明后,记录和传播变得廉价方便,一部分文人创作开始由诗词转向小说,这一点在明清时期更为显著。以至于到了现在移动互联网发展成熟后,大部分人“创作”开始转变为发微博、写段子了。

综合以上,诗词歌赋哪家强,历朝历代看宋唐。

(http://blog.csdn.net/zbc1090549839/article/details/37937123)

原文发布于微信公众号 - 大数据挖掘DT数据分析(datadw)

原文发表时间:2016-07-17

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏腾讯研究院的专栏

段永朝:天性,互联网的灵性回归

image.png 演讲摘要 段永朝:天性,互联网的灵性回归 我今天要讲一个故事,故事的主角大家都很熟悉。他就是牛顿。力学三定律、微积分、七色光,都是...

1865
来自专栏量子位

超级碗另一面:大逆转背后,你没看到的人工智能大PK

量子位 | 舒石 若朴 假装发自 休斯顿 ? NRG球场的气温有点低,但身在现场只能感受到火热。 常规时间结束,亚特兰大猎鹰打了三节好球,新英格兰爱国者打了一节...

1767
来自专栏镁客网

画面太美!“海上漂浮城市”来临

1103
来自专栏顶级程序员

传奇数学家斯梅尔

源 / 《数学文化》 当代富有色彩的著名数学家,首推长期工作在美国加州伯克利大学的史蒂芬 • 斯梅尔(Stephen Smale)教授。国内一般学术刊物介绍科学...

33413
来自专栏新智元

【厉害!机械臂写狗年春联】人类要向机器学写字了

新智元推荐 来源:小C收藏、宝鸡市政府、CUHK 编辑:艾霄葆、闻菲 【新智元导读】大年三十有贴春联的习惯,如今,机械臂也能写春联了,还能比普通人写得更...

35216
来自专栏BestSDK

科技的魅力,微软帮助盲人用声音欣赏世界

苏格兰有一位颇有名气的风景画家 Keith Salmon。 他从古老崎岖的苏格兰高地获得灵感,将山和天际线用缥缈且富有感情的抽象手法表现出来。不幸的是,Salm...

2768
来自专栏大数据文摘

超级碗另一面:大逆转背后,你没看到的人工智能大PK

1405
来自专栏大数据文摘

新年电影清单二 | 看完这几部电影,分分钟让你爱上数学

1472
来自专栏龙行天下CSIEM

科学瞎想系列之三十九 船舶动力系统(5)

快期末考试了,给宝宝们归纳总结一下,划划重点。 1 船舶动力系统经历了三个阶段,你也可以理解成三代。一是传统的动力推进系统加辅机电站系统,这个阶段动力是...

2655
来自专栏数据的力量

斯坦福教授张首晟:大数据时代感受物理、科技、人文的跨界之美

472

扫描关注云+社区