[Python/R语言] 用R和python解决数据分析120题 1-20

转载请注明:陈熹 chenx6542@foxmail.com (简书号:半为花间酒)
若公众号内转载请联系公众号:早起Python
题源:
公众号 早起python 《Pandas进阶修炼120题》

数据分析120题系列:

为什么出这个专题:

R语言和pandas都是数据处理的重要工具
而二者的高下争论时有存在
我相信对于数据而言没有绝对的孰优孰劣
需要做的应该是在必要时权衡最合适的办法

感谢 公众号早起python 提供数据分析120题
这些题目是一个契机
帮助我比较了两种语言处理不同问题的共性
当然也发现了各自的灵活和缺陷

它们覆盖多数数据分析初期可能遇到的问题
无论是对R语言还是对python技能的提升
相信都有很大帮助

(陈熹 2020年4月)

  • python解法
import numpy as np
import pandas as pd

df = pd.DataFrame(data)

# 假如是直接创建
df = pd.DataFrame({
    "grammer": ["Python","C","Java","GO",np.nan,"SQL","PHP","Python"],
    "score": [1,2,np.nan,4,5,6,7,10]})
  • R解法
# R中没有字典概念,故直接创建dataframe/tibble
#> 第一种
df <- data.frame(
  "grammer" = c("Python","C","Java","GO",NA,"SQL","PHP","Python"),
  "score" = c(1,2,NA,4,5,6,7,10)
)

#> 第二种
library(tibble)
df <- tibble(
  "grammer" = c("Python","C","Java","GO",NA,"SQL","PHP","Python"), 
  "score" = c(1,2,NA,4,5,6,7,10)
)

# 也可以用tribble横向建tibble
pandas / R

  • python解法
#> 1
df[df['grammer'] == 'Python']

#> 2
results = df['grammer'].str.contains("Python")
results.fillna(value=False,inplace = True)
df[results]
  • R解法
df[which(df$grammer == 'Python'),]
pandas / R

  • python解法
df.columns
# Index(['grammer', 'score'], dtype='object')
  • R解法
names(df)
# [1] "grammer" "score"  

  • python解法
df.rename(columns={'score':'popularity'}, inplace = True)
  • R解法
df <- df %>% 
  rename(popularity = score)

  • python解法
df['grammer'].value_counts()
  • R解法
# 神方法table
table(df$grammer)
pandas / R

  • python解法
# pandas里有一个插值方法,就是计算缺失值上下两数的均值
df['popularity'] = df['popularity'].fillna(df['popularity'].interpolate())
  • R解法
    暂时没想到其他方法,用的是Hmisc包
library(Hmisc)
index <- which(is.na(df$popularity))
df$popularity <- impute(df$popularity,
                       (unlist(df[index-1, 2] + 
                               df[index+1, 2]))/2)
pandas / R

  • python解法
df[df['popularity'] > 3]
  • R解法
df %>% 
  filter(popularity > 3)
# 等价于
df[df$popularity > 3,] # 这种方法跟pandas很相似
pandas / R

  • python解法
df.drop_duplicates(['grammer'])
  • R解法
df[!duplicated(df$grammer),]
pandas / R

  • python解法
df['popularity'].mean()
# 4.75
  • R解法
#> 第一种
mean(df$popularity)
# [1] 4.75

#> 第二种
df %>% 
  summarise(mean = mean(popularity))
## A tibble: 1 x 1
#     mean
#    <dbl>
#  1  4.75

  • python解法
df['grammer'].to_list()
# ['Python', 'C', 'Java', 'GO', nan, 'SQL', 'PHP', 'Python']
  • R解法
    R中的list和python的list意义完全不同
    接近python的list概念的应该是R中的vector
    实际上这题目的就是降维,用的反而是unlist
unlist(df$grammer)
# [1] "Python" "C"      "Java"   "GO"     NA       "SQL"    "PHP"    "Python"

  • python解法

python还有其他处理EXCEL的包比如 openpyxl、xlrd、xlwt、xluntils等
本例用pandas的写入方法解决

df.to_excel('filename.xlsx')
  • R解法

R对EXCEL文件不太友好
第一种方法:利用readr包转为csv再用EXCEL打开
文件本质依然是csv

library(readr)
write_excel_csv(df,'filename.csv')

第二种方法:利用openxlsx包

openxlsx::write.xlsx(df,'filename.xlsx')

也可以用xlsx包,但需要先配置JAVA环境
确保JAVA配置到环境变量中并命名为JAVA_HOME

Sys.getenv("JAVA_HOME")
install.packages('rJava')
install.packages("xlsxjars")
library(rJava)
library(xlsxjars)
xlsx::write.xlsx(df,'filename.xlsx')

  • python解法
df.shape
# (8, 2)
  • R解法
dim(df)
# [1] 8 2

  • python解法
df[(df['popularity'] > 3) & (df['popularity'] < 7)]
  • R解法
library(dplyr)
df %>% 
  filter(popularity > 3 & popularity <7)
# 等价于
df[(df$popularity > 3) & (df$popularity <7),]
pandas / R

  • python解法
temp = df['popularity']
df.drop(labels=['popularity'], axis=1,inplace = True)
df.insert(0, 'popularity', temp)
  • R解法
df <- df %>% 
    select(popularity,everything())
pandas / R

  • python解法
df[df['popularity'] == df['popularity'].max()]
  • R解法
df %>% 
  filter(popularity == max(popularity)) 
# 同理也有类似pandas的方法
df[df$popularity == max(df$popularity),]
pandas / R

  • python解法
df.tail()
  • R解法
# R中head和tail默认是6行,可以指定数字
tail(df,5)
pandas / R

  • python解法
df = df.drop(labels=df.shape[0]-1)
  • R解法
df[-dim(df)[1],]
# 等价于
df %>% 
  filter(rownames(df) != max(rownames(df))) 
pandas / R

  • python解法
row = {'grammer':'Perl','popularity':6.6}
df = df.append(row,ignore_index=True)
  • R解法
row <- c(6.6,'Perl') # 需要和列的位置对应
# 或者建数据框
row <- data.frame(
  "grammer" = c("Perl"),
  "popularity" = c(6.6)
)

df <- rbind(df,row)
pandas / R

  • python解法
df.sort_values("popularity",inplace=True)
  • R解法
df <- df %>% 
  arrange(popularity)
pandas / R

从本题开始将grammer列中的缺失值替换为R

  • python解法
df['grammer'] = df['grammer'].fillna('R')

df['len_str'] = df['grammer'].map(lambda x: len(x))
  • R解法
library(Hmisc)
library(stringr)
df$grammer <- impute(df$grammer,'R')
str_length(df$grammer)

df$len_str <- str_length(df$grammer)
pandas / R
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,651评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,468评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,931评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,218评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,234评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,198评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,084评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,926评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,341评论 1 311
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,563评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,731评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,430评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,036评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,676评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,829评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,743评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,629评论 2 354

推荐阅读更多精彩内容