根據相關政策規定,國內比特幣交易將於2017年9月底關閉,但這幾年裡,比特幣交易的曆史行情資料,可能對日後用於研究經濟、金融以及量化交易策略等都有重大的價值,因此,這篇文章主要講述如何通過 Python 從交易平台提供的 API 中擷取資料並儲存成 CSV 檔案供日後利用。
本文主要內容如下: 比特幣、萊特幣曆史行情資料 利用 Python 擷取 okcoin.cn 比特幣曆史資料 利用 Python 擷取 huobi.com 比特幣曆史資料 比特幣、萊特幣曆史行情資料
比特幣和萊特幣及其他幾種數字貨幣的曆史行情資料已經擷取並儲存為csv格式,需要用到資料的可以從 GitHub 上直接下載使用,資料擷取的源碼同樣已經在 GitHub 上提供,想瞭解資料來源的可以閱讀源碼。 備忘: 以下資料來源於網路,擷取源碼已公開,不對資料的準確性作任何保證,請根據實際情況使用。
| 編號 |
標的 |
證券交易所 |
資料下載地址 |
| 1 |
btc_cny |
okcoin |
daily_price_btc_cny.csv |
| 2 |
ltc_cny |
okcoin |
daily_price_ltc_cny.csv |
| 3 |
eth_cny |
okcoin |
daily_price_eth_cny.csv |
| 4 |
etc_cny |
okcoin |
daily_price_etc_cny.csv |
| 5 |
bcc_cny |
okcoin |
daily_price_bcc_cny.csv |
| 6 |
btc_cny |
huobi |
daily_price_btc_cny.csv |
| 7 |
ltc_cny |
huobi |
daily_price_ltc_cny.csv |
利用 Python 從 okcoin.cn 擷取比特幣曆史資料
我們可以參考 okcoin 提供的 API手冊,擷取曆史行情資料。
擷取曆史資料主要有兩個步驟: 串連 API 擷取資料 使用 pandas 處理資料,並儲存為 csv 檔案
以下為從 okcoin.cn 擷取資料的詳細代碼:
import http.clientimport jsonimport pandas as pdREQUEST_URL = 'www.okcoin.cn'KLINE_TT_COLS = ['date', 'open', 'high', 'low', 'close', 'volume']def http_get(url, resource, params=''): conn = http.client.HTTPSConnection(url, timeout=10) conn.request("GET", resource + '?' + params) response = conn.getresponse() data = response.read().decode('utf-8') return json.loads(data)def ticker(symbol='', data_type='1day', since=''): ticker_resource = "/api/v1/kline.do" params = '' if symbol: params = 'symbol=%(symbol)s&type=%(type)s' % {'symbol': symbol, 'type': data_type} if since: params += '&since=%(since)s' % {'since': since} k_data = http_get(REQUEST_URL, ticker_resource, params) if len(k_data) == 0: raise ValueError('Can not obtain the data.') else: df = pd.DataFrame(k_data, columns=KLINE_TT_COLS) df['date'] = pd.to_datetime(df['date'], unit='ms') return dfif __name__ == '__main__': # okcoin.cn bitcoin - cny since 2013-6-11 ~ now, daily price history daily_price_btc_cny = ticker('btc_cny') daily_price_btc_cny.to_csv('./data/okcoin/daily_price_btc_cny.csv') # okcoin.cn litecoin - cny since 2013-9-11 ~ now daily price history daily_price_ltc_cny = ticker('ltc_cny') daily_price_ltc_cny.to_csv('./data/okcoin/daily_price_ltc_cny.csv') # okcoin.cn eth - cny since 2017-5-31 ~ now daily price history daily_price_eth_cny = ticker('eth_cny') daily_price_ltc_cny.to_csv('./data/okcoin/daily_price_eth_cny.csv') # okcoin.cn etc - cny since 2017-7-16 ~ now daily price history daily_price_etc_cny = ticker('etc_cny') daily_price_etc_cny.to_csv('./data/okcoin/daily_price_etc_cny.csv') # okcoin.cn bcc - cny since 2017-7-16 ~ now daily price history daily_price_bcc_cny = ticker('etc_cny') daily_price_bcc_cny.to_csv('./data/okcoin/daily_price_bcc_cny.csv') # okcoin.cn bitcoin - cny since 2013-6-11 ~ now, hour price history hour_price_btc_cny = ticker(symbol='btc_cny', data_type='1hour') hour_price_btc_cny.to_csv('./data/okcoin/hour_price_btc_cny.csv') # okcoin.cn litecoin - cny since 2013-6-11 ~ now, hour price history hour_price_ltc_cny = ticker(symbol='ltc_cny', data_type='1hour') hour_price_ltc_cny.to_csv('./data/okcoin/hour_price_ltc_cny.csv')
利用 Python 從 huobi.com 擷取比特幣曆史資料
與從 okcoin.cn 擷取曆史資料類似,參考 huobi.com 提供的 API 手冊,詳細代碼如下:
import http.clientimport jsonimport pandas as pdREQUEST_URL = 'api.huobi.com'KLINE_TT_COLS = ['date', 'open', 'high', 'low', 'close', 'volume']def http_get(url, resource, params=''): conn = http.client.HTTPSConnection(url, timeout=10) conn.request("GET", resource + '?' + params) response = conn.getresponse() data = response.read().decode('utf-8') return json.loads(data)def ticker(symbol=''): ticker_resource = "/staticmarket/%(symbol)s_kline_100_json.js" % {'symbol': symbol} params = '' if symbol: params = 'length=2000' k_data = http_get(REQUEST_URL, ticker_resource, params) if len(k_data) == 0: raise ValueError('Can not obtain the data.') else: df = pd.DataFrame(k_data, columns=KLINE_TT_COLS) df['date'] = pd.to_datetime(df['date'], format="%Y%m%d%H%M%S%f") return dfif __name__ == '__main__': # huobi.com bitcoin - cny since 2013-9-1 ~ now, daily price history daily_price_btc_cny = ticker('btc') daily_price_btc_cny.to_csv('./data/huobi/daily_price_btc_cny.csv') # huobi.com litecoin - cny since 2014-3-9 ~ now daily price history daily_price_ltc_cny = ticker('ltc') daily_price_ltc_cny.to_csv('./data/huobi/daily_price_ltc_cny.csv')
參考資料
Okcoin API
Huobi API
GitHub