R_dplyr用法

对于习惯使用sql的同学,etl切换成用R,如何能够很快的对应上手呢?

直接上代码教程:

1. 获取数据源

R设置目录:

setwd("D:\\working\\jane_personal_coding")

getwd()

读取csv文档:

data=read.csv("user_ana2R.csv",header=T)

2. 传统的数据etl方法:

数据筛选:subset

order_amt<-subset(data,type=='order_amt')

排序:

attach(order_amt)

a<-order_amt[order(dim),]

detach(order_amt)

3. 用dplyr方法:

  3.1 首先加载包,然后将数据源转换成tbl的格式,至于为什么,我也不是很清楚。。。

library(dplyr)

order_tbl=tbl_df(data)

  3.2 下面要筛选数据了:##filter

filter(order_tbl,type=="membel_level")

filter(summ,count>5)

  3.3 选择字段:##select

select(order_tbl,type,dim,user_num)

  3.4 若要看type里面有多少不同的品类,以下两种方法:

distinct(select (order_tbl,type))

unique(order_tbl$type)

  3.5 排序 ##arrange

arrange(order_tbl,user_num)

  3.6 改变or新增列 ##mutate

mutate(order_tbl,user_num-shouxin_user_num)

  3.7 统计 ##summarise

     3.7.1 计算平均数

summarise(order_tbl,user_num=mean(user_num,na.rm=TRUE))

     3.7.2 计数

summarise(order_tbl,count=n(),count_dis=n_distinct(x))

    3.7.3  不知道这个是什么##sample_n()  sample_frac()

sample_n(order_tbl,16)

sample_frac(order_tbl,0.5)

  3.8 分组 ##group_by

grouped<-group_by(order_tbl,type)

summ<-summarise(grouped,count= n())

4. 编辑数据源

     用edit  ##import edit data

mydata<-data.frame(age=numeric(0),gender=character(0),weight=numeric(0))

mydata<-edit(mydata)

5. 设置数据为因子格式  ##set into factor

  将已有的字段设置成因子:

gender<-factor(gender,levels = c("A","B","C","D","E"))

 新建字段并且直接设置因子:

sex=factor(c(1,0,1,1,1,0),levels=c(0,1),labels=c("male","female"))

查看因子的层次:

level(sex)

6. 很牛逼的揉数据 ##reshape

这个是我觉得的一个很管用的利器:就两步,1先揉,主键设置为id后面的(可以是组合键),2 再成型,要看哪个度量对于哪个纬度的分布

library(reshape)

md<-melt(data,id=(c("type","dim")))

cast(md,type~variable)

7. 常用的函数

   7.1 粘合函数 ##paste

paste("chapter",1:20,"now")

   7.2 聚合函数 ##aggregate

vars<-c("mpg","hp","wt")

aggregate(mtcars[vars],by=list(am=mtcars$am),mean)

   7.3 自定义函数

func<-funcation(x)(c(mean(x),sd=sd(x)))

by(mtcars[vars],mtcars$am,func)

  7.4 一秒出分布图

library(ggplot2)

qplot(user_num,data=a,binwidth=1000,xlim=c(0,10000000),geom="histogram",main="distribution of pay_dis",col="pink")

  7.5 查看表格的基本情况

table(mydata$age)

mytable<-xtabs(~age,gender,data=mydata)

margin.table(mytable,1)

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 210,978评论 6 490
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 89,954评论 2 384
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,623评论 0 345
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,324评论 1 282
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,390评论 5 384
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,741评论 1 289
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,892评论 3 405
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,655评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,104评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,451评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,569评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,254评论 4 328
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,834评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,725评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,950评论 1 264
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,260评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,446评论 2 348

推荐阅读更多精彩内容

  • 1. Java基础部分 基础部分的顺序:基本语法,类相关的语法,内部类的语法,继承相关的语法,异常的语法,线程的语...
    子非鱼_t_阅读 31,597评论 18 399
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,628评论 18 139
  • 线程与CPU核绑定 不管是线程还是进程,都是通过设置亲和性(affinity)来达到目的。对于进程的情况,一般是使...
    FcxD阅读 3,079评论 0 0
  • 上一篇《iOS扩展开发攻略:Share Extension》介绍了分享扩展的开发与使用,本篇主要还是讲述在系统分享...
    杰嗒嗒的阿杰阅读 10,609评论 22 38
  • 孕妇课堂上,老师说了一句话:二胎妈妈们一般没有头胎妈妈听话。 那么问题来了,为什么二胎妈妈没有头胎妈妈听话?二胎妈...
    陈陈读书阅读 752评论 3 3