python怎麼批量讀取txt檔案為DataFrame格式

來源:互聯網
上載者:User
這次給大家帶來python怎麼批量讀取txt檔案為DataFrame格式,python批量讀取txt檔案為DataFrame格式的注意事項有哪些,下面就是實戰案例,一起來看一下。

我們有時候會批量處理同一個檔案夾下的檔案,並且希望讀取到一個檔案裡面便於我們計算操作。比方我有一系列的txt檔案,我該如何把它們寫入一個txt檔案中並且讀取為DataFrame格式呢?

首先我們要用到glob模組,這個python內建的模組可以說是非常的好用。

glob.glob('*.txt')

得到如下結果:

all.txt是我最後得到的結果檔案。可以見返回的是一個包含txt檔案名稱的列表,當然如果你的檔案夾下面只有txt檔案,那麼你用os.listdir()可以得到一個一樣的列表

然後讀取的時候只要注意txt檔案的編碼格式(可以用notepad++開啟記事本查看)和間隔符的形式就好了,完整的代碼如下:

import osimport pandasimport codecsimport globimport pandas as pdos.getcwd()os.chdir('D:\AAAASXQ\python study\data preprocessing')def txtcombine():  files = glob.glob('*.txt')  all = codecs.open('all.txt','a')  for filename in flist:  print(filename)  fopen=codecs.open(filename,'r',encoding='utf-8')  lines=[]  lines=fopen.readlines()  fopen.close()  i=0  for line in lines:   for x in line:   all.write(x) #讀取為DataFrame格式 all1 = pd.read_csv('all.txt',sep=' ',encoding='GB2312') #儲存為csv格式 all1.to_csv('all.csv',encoding='GB2312') if name == 'main':  txtcombine()

相信看了本文案例你已經掌握了方法,更多精彩請關注php中文網其它相關文章!

推薦閱讀:

python字串如何轉為二維數組

JS的EventEmitter使用步奏詳解

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.