当前位置:首页 > 知识百科 > 正文内容

5 万首唐诗、2 万首宋词Python助力中华古典文集数据库

booxun2个月前 (08-01)知识百科5

熟悉小段的朋友都知道,小段最爱写的文章是关于 Python 的,但是呢,小段确实是一个工程师,哈哈,所以每次给大家分享 Python 相关知识的时候,总想着自己是一个前端工程师(好迷糊),有时候当我发现一款非常棒的 Python 的时候,忍不住要推荐给大家。

Python 大神库夸夸

作为一个产品经理,哦不,程序员每天最快乐的事情就是去 github 翻阅,在闲逛的途中经常会发现一些非常棒的大佬开发的开源库,有时候忍不住点赞分享,这不,在 1024 这么一个特殊的日期里就碰到了这个神奇的库,而且作者还是用 Python 编写的,双重符合要求,必须唠叨唠叨了。

该项目是基于 Python 爬虫采集数据,积累大量的 唐诗,宋词数据,作者在 github 说明中已经进行了说明:

The most comprehensive database of Chinese poetry 最全中华古诗词数据库, 唐宋两朝近一万四千古诗人, 接近 5.5 万首唐诗加 26 万宋诗. 两宋时期 1564 位词人,21050 首词。

厉害厉害!

是不是非常期待看到了,下面的链接就是大佬的项目地址了 https://github.com/chinese-poetry/chinese-poetry。

所有的数据都被作者上传分享了出来,大家可以利用数据做一些诗词类的网站或者 APP 都是非常不错的。

数据格式已经转成了 JSON,方便导入到各种数据库中。

分享这些还不够,作者也同时分享了爬取代码,方便你阅读,贴上链接地址:https://ijg.io/r/words/crawl-ci.html。

代码阅读过程中,发现 parsel 库在爬虫百例中竟然还给遗漏了,抽时间加餐篇给大家增加上去。

写在后面

本文单纯的为爱好爬取数据的人点赞,希望更多的朋友加入到数据采集的大军中。当然更想让大家看到,用 Python 爬虫可以去做很多自己喜欢的事情,当数据慢慢积累到一定量的时候,你就已经开辟出来一条独特的路线了。

爬虫百例教程导航链接 : https://blog.csdn.net/hihell/article/details/86106916


最后多说一句,小编是一名python开发工程师,这里有我自己整理了一套最新的python系统学习教程,包括从基础的python脚本到web开发、爬虫、数据分析、数据可视化、机器学习等。想要这些资料的可以关注小编,并私信“学习”即可领取。

相关文章

描写【山水】,60句最经典的诗句,背下来,你也才华横溢!

以下是描写山水的60句经典古诗词,涵盖不同朝代、不同诗人的名句,与君分享!王维"空山新雨后"的笔墨在《辋川集》里洇染千年,李白"两岸青山相对出"的豪放劈开楚江云烟。陶渊...

史上最精彩的6首《浪淘沙》词,辛弃疾佳作第三,前两名水平更高

《浪淘沙》这个词牌比较常见,史上曾出现过不少精品词作,那最经典的6首《浪淘沙》都是哪些?如何排名?本文即将揭晓谜底,让我们一起来欣赏精彩好词。第6名 北宋晏几道的《浪淘沙 小绿间长红》小绿间长红,露蕊...

每日经典诵读 | 国学小名士过故人庄

过故人庄孟浩然故人具鸡黍,邀我至田家。绿树村边合,青山郭外斜。开轩面场圃,把酒话桑麻。待到重阳日,还来就菊花。...

许日辉|七绝《举杯遥祝中秋节》十二首

七绝《举杯遥祝中秋节》十二首文/辉叔(广东/许日辉)(一)月映人间大地明,夜阑珊火满江城。举杯遥祝中秋节,独望冰轮寄故情。(二)月色偷窥桂子香,金风漫过旧荷塘。中秋又到人间驻,一片乡思两地藏。(三)一...

古诗词里的七夕节,有相思,离愁,爱情,读来总有不一样的心境

星桥鹊驾,缱绻千年,又至一年中最浪漫的节日——七夕节。七夕佳节,银河如练,星光璀璨,遥看牛女,望月乞巧,这一天更多了一种传统的、古典的韵味与诗意。无论是牛郎织女的传说,还是对月穿针的乞巧风俗,都注定了...

传统节日丨七夕·诗词

传统节日丨七夕·诗词七夕节七夕节七月初七古诗十九首·迢迢牵牛星——乐府迢迢牵牛星 皎皎河汉女 纤纤摸素手 札札弄机杼 终日不成章 泣涕零如雨 河汉清且浅 相去复几许 盈盈一水间 脉脉不得语 七夕——唐...