這次給大家帶來python怎麼批量讀取txt檔案為DataFrame格式,python批量讀取txt檔案為DataFrame格式的注意事項有哪些,下面就是實戰案例,一起來看一下。
我們有時候會批量處理同一個檔案夾下的檔案,並且希望讀取到一個檔案裡面便於我們計算操作。比方我有一系列的txt檔案,我該如何把它們寫入一個txt檔案中並且讀取為DataFrame格式呢?
首先我們要用到glob模組,這個python內建的模組可以說是非常的好用。
glob.glob('*.txt')
得到如下結果:
all.txt是我最後得到的結果檔案。可以見返回的是一個包含txt檔案名稱的列表,當然如果你的檔案夾下面只有txt檔案,那麼你用os.listdir()可以得到一個一樣的列表
然後讀取的時候只要注意txt檔案的編碼格式(可以用notepad++開啟記事本查看)和間隔符的形式就好了,完整的代碼如下:
import osimport pandasimport codecsimport globimport pandas as pdos.getcwd()os.chdir('D:\AAAASXQ\python study\data preprocessing')def txtcombine(): files = glob.glob('*.txt') all = codecs.open('all.txt','a') for filename in flist: print(filename) fopen=codecs.open(filename,'r',encoding='utf-8') lines=[] lines=fopen.readlines() fopen.close() i=0 for line in lines: for x in line: all.write(x) #讀取為DataFrame格式 all1 = pd.read_csv('all.txt',sep=' ',encoding='GB2312') #儲存為csv格式 all1.to_csv('all.csv',encoding='GB2312') if name == 'main': txtcombine()
相信看了本文案例你已經掌握了方法,更多精彩請關注php中文網其它相關文章!
推薦閱讀:
python字串如何轉為二維數組
JS的EventEmitter使用步奏詳解