使用VBA,快速导入CSV文件内容到EXCEL表格

前几日遇到一个将几十个商品二维码数据文件导入到EXCEL中,做格式转换再导入数据库的问题。拿到的原始表格是将近100个CSV格式的文本文件,每个文件中大概有几万到十几万行数据不等。这么大量的数据,手工处理太浪费时间,于是就想用VBA写个脚本导进来。VBA读取CSV文件到表格中也是一种比较常见的需求,可以用Scripting.FileSystemObject对象来进行操作,只要掌握FileSystemObject对象的用法即可。

其实Excel本身就具有数据查询和导入的功能,可以获取多种格式的数据(结构化数据),是否可以利用这个功能,结合VBA脚本,快速实现文件导入呢?经过验证是可行的。

获取数据

首先新建一个空Excel文件,希望能通过尽可能少手动操作,把数据读进来。那么首先得知道有多少个文件,每个文件的名字是什么,这就用到VBA脚本了。使用用ALT+F11打开VBA编辑器,新建一个模块,先建一个读取文件名的过程。

Sub sfiles()

Dim s As FileSearch '定义一个文件搜索对象

Dim fpath As String '定义一个文件路径

Dim fl As Worksheet

Set fl = ThisWorkbook.Worksheets("filelist")

fpath = ThisWorkbook.Path

fpath = fpath & "\要读取文件的文件夹\"

n = 1

myFile = Dir(fpath & "*.*")

Do While myFile <> ""

fl.Cells(n, 1) = myFile

myFile = Dir '找寻下一个文件

n = n + 1

Loop

End Sub

运行这段脚本,就可以把要读取的文件名写入第一个Sheet中了。接下来要做的,就是按照文件名,依次把文件内容读到当前的Excel文件中,每个文件的数据存入一个新的Sheet中。

如果对于Excel导入数据的VBA写法很熟悉的话,可以直接写脚本,如果不熟也没关系,先录制一个宏,然后修改即可。最终完成的过程如下:

Sub importDatafromCsv()

'从CSV文件中批量读入数据到表格

'

Dim filelists As Worksheet

Dim fileNum As Integer

Dim aimFileName As String

Dim aimFile As String

Dim aimFileFullPath As String

Dim sheetNum As Integer

Dim i As Integer

Set filelists = ThisWorkbook.Worksheets("filelist")

fileNum = filelists.[A1].CurrentRegion.Rows.Count '取行数

For i = 1 To fileNum

'aimFile = Selection.Value  ‘可以选中一个文件名,然后导入,或者按下面的循环,一次导入所有

aimFile = filelists.Cells(i, 1).Value

aimFileName = Split(aimFile, ".", , vbTextCompare)(0) 

aimFileFullPath = ThisWorkbook.Path & "\导入文件所在文件夹\" & aimFile

sheetNum = ThisWorkbook.Sheets.Count

ThisWorkbook.Sheets.Add(After:=Sheets(sheetNum)).Name = "new" & sheetNum + 1

    Range("A1").Select

    ActiveWorkbook.Queries.Add Name:=aimFileName, Formula:= _

        "let" & Chr(13) & "" & Chr(10) & "    源 = Csv.Document(File.Contents(""" & aimFileFullPath & """),[Delimiter="","", Columns=5, Encoding=936, QuoteStyle=QuoteStyle.None])," & Chr(13) & "" & Chr(10) & "    更改的类型 = Table.TransformColumnTypes(源,{{""Column1"", Int64.Type}, {""Column2"", type text}, {""Column3"", type text}, {""Column4"", Int64.Type}, {" & _

        """Column5"", type text}})" & Chr(13) & "" & Chr(10) & "in" & Chr(13) & "" & Chr(10) & "    更改的类型" & _

        ""

    With ActiveSheet.ListObjects.Add(SourceType:=0, Source:= _

        "OLEDB;Provider=Microsoft.Mashup.OleDb.1;Data Source=$Workbook$;Location=" & aimFileName & ";Extended Properties=""""", Destination:=Range("$A$1")).QueryTable

        .CommandType = xlCmdSql

        .CommandText = Array("SELECT * FROM [" & aimFileName & "]")

        .rownumbers = False

        .FillAdjacentFormulas = False

        .PreserveFormatting = True

        .RefreshOnFileOpen = False

        .BackgroundQuery = True

        .RefreshStyle = xlInsertDeleteCells

        .SavePassword = False

        .SaveData = True

        .AdjustColumnWidth = True

        .RefreshPeriod = 0

        .PreserveColumnInfo = True

        .ListObject.DisplayName = aimFileName

        .Refresh BackgroundQuery:=False

    End With

    ActiveSheet.ListObjects(aimFileName).Unlink

    Range("A1").Select

    Next

End Sub

运行以上脚本,大概几分钟,所有近100个文件,将近100万行数据全部导入Excel表格,接下来再做其他处理就方便多了。

如有人也遇到类似的问题,可以尝试用上面的方法解决,大大节省时间,提高效率。如果有更好、更高效的方法也欢迎一起交流。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 226,913评论 6 527
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 97,710评论 3 412
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 174,561评论 0 373
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 62,278评论 1 306
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 71,080评论 6 405
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 54,604评论 1 320
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 42,698评论 3 434
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 41,847评论 0 285
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 48,361评论 1 329
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 40,330评论 3 353
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 42,487评论 1 365
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 38,044评论 5 355
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 43,738评论 3 342
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 34,134评论 0 25
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 35,378评论 1 281
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 51,053评论 3 385
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 47,471评论 2 370

推荐阅读更多精彩内容

  • 本例为设置密码窗口 (1) If Application.InputBox(“请输入密码:”) = 1234 Th...
    浮浮尘尘阅读 13,696评论 1 20
  • 1.1 VBA是什么 直到90年代早期,使应用程序自动化还是充满挑战性的领域.对每个需要自动化的应用程序,人们不得...
    浮浮尘尘阅读 21,801评论 6 49
  • 【引用地址】http://club.excelhome.net/blog-238368-1693.html 一个高...
    whw83阅读 997评论 0 3
  • 自从2014年开通[完美Excel]微信公众号以来,坚持分享已经学习到的Excel和VBA知识和心得,目前已分享文...
    完美Excel阅读 8,316评论 6 69
  • 熟练使用Excel的朋友们可能会知道Excel主要包含六大主题,其内容包括:Excel基础操作、图形与图表、函数与...
    1248阅读 2,020评论 0 5