分析自己在大学期间读过的书(一)

今天整理了大学期间的读书记录,看着长长的书单,觉得应该将这些书分个类,看看自己在大学期间的阅读习惯是什么样的。结果分了十几分钟连十分之一都没有分完,感觉很累。在数据分析中有个概念叫聚类,而我的目的是把书分类,这两件事是差不多的吧,那应该就有工具可以帮我做这个事情。

程序员要善于利用工具

于是我开始在网络上搜索,看有没有现成的程序可以用。

不一会儿,就在知乎上找到一个 你用 Python 做过什么有趣的数据挖掘/分析项目?

剪切式编程

可喜可贺,里面还有代码示例,看着很简短。虽然不会 python,但是照猫画虎还是可以的。将代码拷贝下来,改了改。中间遇到一些中文编码的问题,磕磕碰碰的,但最后也搞定了。

生成的图片如下:


book history

图片中显示的文字越大,说明词频越高,从图片看来,我读过最多的是 XXX 程序设计 这类的书,嗯,很有道理。

有待完善

不过从这个图本身看来,还有不少小问题,比如

  1. 分词不够理想,皮格马利翁是一个词,不应该被分开
  2. 出现了重复的词,Java 在图片上出现好几次,按理说,同一个词根据词频的高低不同显示为不同的大小之后,只会出现一次。仔细看可以发现,图片上出现的三个 Java 其实是不同的,第一个只有 Java 这个单词,第二个是 Java 中文,第三个是 Agile Java。这么看来,还是 分词 的问题

虽然从这个图片中看不到太多有用的信息,但是整个过程还是挺有意思的。而且,我还可以继续从读书记录里面挖掘出来更多的信息。很容易想到的就是,我可以给书加标签,用标签来给书做聚类分析,这样应该可以得到更有价值的信息。

新的思路

不过给两百多本书加标签,比分类的工作量要大得多,毕竟每本书可以加若干个标签。

于是,我又想到,可以借鉴使用豆瓣上现成的标签

豆瓣图书标签

这样就不用自己加标签了。我只需要请求豆瓣的 API,拿到读书记录中所有书的标签就行了,工作量一下子小了很多。

找了一圈,发现原来豆瓣没有根据书名直接招书的 API,想要精确的定位一本书,需要用 ISBN。想想也有道理,同名的书可能有很多,根据书名确实无法唯一地定位一本书。那该怎么办呢?

未完待续……

今天时间不多,就先到这里吧,挖个坑以后慢慢埋……

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 173,705评论 25 709
  • 前情提要 昨天,我使用 结巴分词 跟 词云 两个 python 库,达到了 提取读书记录频率 及 按照词频高低显示...
    afaren阅读 227评论 0 0
  • 前情提要 前一篇文章中,因为豆瓣的 API 请求限制,我无法一次性请求整个读书记录的信息列表,于是想到在每个请求前...
    afaren阅读 782评论 0 1
  • 岁月是一束开不败的花, 岁月是一首唱不完的歌; 岁月是一条走不尽的路, 岁月是一首写不完的诗。 花开花落,时光轮回...
    水墨莲心阅读 346评论 1 6
  • 在开战之前,没有任何一个人感觉过我们LPL能赢? 能夺冠。 甚至在比赛中,也因为选手的种种表现,一场比赛的得失,我...
    黄铜刀阅读 213评论 1 3