Python下載網路文本資料到本地記憶體的四種實現方法樣本,python樣本
本文執行個體講述了Python下載網路文本資料到本地記憶體的四種實現方法。分享給大家供大家參考,具體如下:
import urllib.requestimport requestsfrom io import StringIOimport numpy as npimport pandas as pd'''下載網路檔案,並匯入CSV檔案作為numpy的矩陣'''# 網路資料檔案地址url = "http://archive.ics.uci.edu/ml/machine-learning-databases/pima-indians-diabetes/pima-indians-diabetes.data"# 方法一# ========================================================# 下載檔案#r = urllib.request.urlopen(url)# 匯入CSV檔案作為numpy的矩陣#dataset = np.loadtxt(r, delimiter=",")# 方法二# ========================================================# 下載檔案#r = requests.get(url)# 匯入CSV檔案作為numpy的矩陣#dataset = np.loadtxt(StringIO(r.text), delimiter=",") # 此處用到 StringIO !!!!!!# 方法三# ========================================================#用genfromtxt直接下載網路檔案,並將CSV檔案導作numpy矩陣。爽!!!!!!!!#dataset = np.genfromtxt(url, delimiter=",")# 方法四# ========================================================# 用pandas.read_csv直接下載網路檔案,並將CSV檔案導作pandas.DataFrame。# dataset = pd.read_csv('http://www-bcf.usc.edu/~gareth/ISL/Advertising.csv', index_col=0)dataset = pd.read_csv(url)# ========================================================# separate the data from the target attributesX = dataset[:,0:7]y = dataset[:,8]print(X)#print(y)