学习数据分析却没有合适的数据集?

在数据分析学习中,尤其是对于还没有真正进入数据分析行业的新人来说,一个需要面对的挑战就是要找到合适的数据,并提出一个感兴趣的问题。在 Cousera 上中有 Wesleyan大学提供的数据分析专项课程中,提供了一些可以公开使用的的数据集,整理一下,希望能够对大家有所帮助。

由于课程的语言为英文,所以所有的Codebook 也都是英文的,但是并不难,相信有了基本的英文阅读能力都可以读懂。

什么是 Codebook? 在一些数据采集的过程中,会遇到各种不一样的情况,有一些数据是连续性的,或者叫计量资料(quantitative data),有一些数据则是不连续的,或者叫计数资料(categorical data),比如我们想要调查家庭结构对于孩子成绩的影响,那么我们的调查资料中,有关父母情况的数据,可以设定这样一个问题:

你的父亲和你的亲密程度如何?1. 很差 2. 差 3. 还可以 4.好 5.很好。

然而这并不能反应所有情况,如果孩子没有父亲,或者不愿意回答这个问题怎么办?我们还需要加入其它选项,比如:

你的父亲和你的亲密程度如何?1. 很差 2. 差 3. 还可以 4.好 5.很好 6.不想回答 7.不需要回答(没有父亲)8.不知道

这些结果在我们的数据集中,问题会有一个自己的编号,比如 H1WP9,它的答案,就包含了1-8这些数字。我们拿到的数据集,有的时候就是这样的表格。

为了能够看懂这些数字都意味着什么,需要些一个“说明书”,这个说明书,就是 Codebook 。

下面就是一些可以公开使用的数据集和相关的 Codebook:

  1. 美国国家流行病学会关于酒精和相关症状的研究U.S. National Epidemiological Survey on Alcohol and Related Conditions (NESARC),调查了18岁以上的美国人的酒精使用程度和精神健康情况。

    NESARC codebook (,pdf)

    nesarc_pds.csv

  2. 关于火星坑的研究,包含了在4.2亿年前到3.8亿年前一段特殊时期,由于小行行、彗星等撞击产生的30万个直径大于1公里的火星坑的数据。

    Mars Crater codebook (.pdf)

    marscrater_pds.csv

  3. 国家青少年跟踪研究,收集了美国7-12年级的青少年,有关他们健康和行为的数据,包括个人喜好、家庭情况、朋友、亲密关系、社交情况、学校、邻居和社区等。这个跟踪研究还在进行,有兴趣可以从网站上获取更多数据。课程中提供的是 Wave 1的数据。

    Addhealth Wave 1 codebook (zip file)

    addhealth_pds.csv

  4. Gapminder收集了全球各国的经济、健康和发展数据,创始人的 TED 演讲是数据可视化的典范,网站也有很多可以玩的信息。

    Gapminder codebook (.pdf)

    gapminder.csv

以上就是我在 Coursera 上发现的公开数据集,想学习如何使用它们练习自己的商业数据分析技能的话,欢迎和我一起上课。课程使用了 SAS 和 python 两种语言,分别做了两个版本,由于我目前正在学习 SAS,所以会优先分享 SAS 的部分,如果你愿意和我一起学习,并更新 python 的部分,欢迎勾搭和交流。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 198,932评论 5 466
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,554评论 2 375
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 145,894评论 0 328
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,442评论 1 268
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,347评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 47,899评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,325评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,980评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,196评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,163评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,085评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,826评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,389评论 3 302
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,501评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,753评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,171评论 2 344
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,616评论 2 339

推荐阅读更多精彩内容