python 大資料處理小結

標籤：and   min   刪除   資料處理   檔案   空行   das   iter   write   

1.shop_min=shop.drop([‘category_id‘,‘longitude‘,‘latitude‘,‘price‘],axis=1)
pandas中刪除多個列

2.mall=shop_min.drop_duplicates(subset=‘mall_id‘)
pandas中將某一列去重

3.python寫檔案有空行
# Python 2
with open(‘/pythonwork/thefile_subset11.csv‘, ‘wb‘) as outfile:
writer = csv.writer(outfile)

# Python 3
with open(‘/pythonwork/thefile_subset11.csv‘, ‘w‘, newline=‘‘) as outfile:
writer = csv.writer(outfile)

4.python file 開啟檔案方式
r以唯讀方式開啟檔案。檔案的指標將會放在檔案的開頭。這是預設模式。
rb以二進位格式開啟一個檔案用於唯讀。檔案指標將會放在檔案的開頭。這是預設模式。
r+開啟一個檔案用於讀寫。檔案指標將會放在檔案的開頭。
rb+以二進位格式開啟一個檔案用於讀寫。檔案指標將會放在檔案的開頭。
w開啟一個檔案只用於寫入。如果該檔案已存在則將其覆蓋。如果該檔案不存在，建立新檔案。
wb以二進位格式開啟一個檔案只用於寫入。如果該檔案已存在則將其覆蓋。如果該檔案不存在，建立新檔案。
w+開啟一個檔案用於讀寫。如果該檔案已存在則將其覆蓋。如果該檔案不存在，建立新檔案。
wb+以二進位格式開啟一個檔案用於讀寫。如果該檔案已存在則將其覆蓋。如果該檔案不存在，建立新檔案。
a開啟一個檔案用於追加。如果該檔案已存在，檔案指標將會放在檔案的結尾。也就是說，新的內容將會被寫入到已有內容之後。如果該檔案不存在，建立新檔案進行寫入。
ab以二進位格式開啟一個檔案用於追加。如果該檔案已存在，檔案指標將會放在檔案的結尾。也就是說，新的內容將會被寫入到已有內容之後。如果該檔案不存在，建立新檔案進行寫入。
a+開啟一個檔案用於讀寫。如果該檔案已存在，檔案指標將會放在檔案的結尾。檔案開啟時會是追加模式。如果該檔案不存在，建立新檔案用於讀寫。
ab+以二進位格式開啟一個檔案用於追加。如果該檔案已存在，檔案指標將會放在檔案的結尾。如果該檔案不存在，建立新檔案用於讀寫。

python 大資料處理小結