Time of Update: 2018-07-24
這段時間聽歌少了,敲代碼的時候喜歡把喜馬拉雅FM廣播開啟。 既然在學習 Python ,就試著寫一個爬蟲,把喜馬拉雅上面的音頻爬下來。 分析了一下網站才發現爬喜馬拉雅上的音頻還是很容易的。 聲明:本文只是作為技術交流,切勿作為其他用途。 聲明:本文只是作為技術交流,切勿作為其他用途。 聲明:本文只是作為技術交流,切勿作為其他用途。 分析網站 擷取音頻檔案實質就是擷取音訊 URL 爬取這個網站我個人比較傾向先分析最後一步,然後在往前來分析。
Time of Update: 2018-07-24
最近開始學習Python的爬蟲,本來想著從基本的各種文法開始學習的但是在逛知乎的過程中發現了一個文章是就是關於如何入門Python爬蟲,裡面有一個回答,https://www.zhihu.com/question/20899988/answer/24923424
Time of Update: 2018-07-24
python函數中輸入關鍵字參數——字典參數,怎麼樣按輸入的順序輸出。 為了方便理解,舉多個例子: 例子一: https://www.zhihu.com/question/24360507 #編寫者 def test(**kwargs): print args.keys()#使用者,我如下調用test(a=1, c=3, d=2, e=4)#然後輸出的關鍵字是按照函數調用的順序給輸出(a,c,d,e),而不是無序輸出。 例子二:
Time of Update: 2018-07-24
因為對一個網站大量的使用urlopen操作,所以會被那個網站認定為攻擊行為。有時就不再允許下載。導致urlopen()後,request.read()一直卡死在那裡。最後會拋出errno10054. 這個錯誤是connection reset bypeer.也就是傳說的遠端主機重設了此串連。原因可能是socket逾時時間過長;也可能是request
Time of Update: 2018-07-24
base64模組 前言 昨天團隊的學妹來問關於POP3協議的問題,所以今天稍稍研究了下POP3協議的格式和Python裡面的poplib。而POP伺服器往回傳的資料裡有一部分需要用到Base64進行解碼,所以就順便看了下Python裡面的base64模組。 本篇先講一下base64模組,該模組提供了關於Base16,Base32,Base64,Base85和Ascii85的編碼和解碼相關的函數。有關poplib模組的內容,會在後面發上來。
Time of Update: 2018-07-28
python中使用socket進行編程時,發現client的tcp經常處於close_wait狀態:linux中使用命令 # netstat -atpn 原因是server端關掉了tcp串連,給client發送FIN訊號,client的tcp層回了ACK,然後它的socket狀態就處於close_wait狀態。 實驗:
Time of Update: 2018-07-28
Python字串轉數字 import binascii s = 'test123456test' str_16 = binascii.b2a_hex(s.encode('utf-8')) # 字串轉16進位 print(str_16) def baseN(num, b): return ((num == 0) and "0") or \ (baseN(num // b,
Time of Update: 2018-07-29
File "./t1.py", line 11, in <module> oproc=subprocess.Popen(cmd,stdout=subprocess.PIPE,stderr=subprocess.PIPE) File "/usr/local/lib/python2.7/subprocess.py", line 711, in __init__ errread, errwrite) File
Time of Update: 2018-07-29
下面是Python資料處理的題目說明與要求: The attachment is a log file used to show running status of set-top-box, and each line in the file follows the format of “LineNumber + Time + ProcessName + (ProcessID) + Logs”, currently the logs are displayed in time order.
Time of Update: 2018-07-30
常用標準庫 標準庫 說明 builtins 內建函數預設載入 os 作業系統介面 sys Python自身的運行環境 functools 常用的工具 json 編碼和解碼 JSON 對象 logging 記錄日誌,調試 multiprocessing 多進程 threading 多線程 copy 拷貝 time 時間 datetime 日期和時間 calendar 日曆 hashlib 密碼編譯演算法 random 產生隨機數 re 字串正則匹配
Time of Update: 2018-08-23
在這篇文章之中我們來瞭解一下什麼是python線程鎖。瞭解一下python線程鎖的相關知識,以及線程鎖在python編程之中能起到什麼樣的作用。線程鎖(互斥鎖Mutex)一個進程下可以啟動多個線程,多個線程共用父進程的記憶體空間,也就意味著每個線程可以訪問同一份資料,此時,如果2個線程同時要修改同一份資料,會出現什麼狀況?鎖的使用:建立鎖mutex = threading.Lock()鎖定mutex.acquire([timeout])釋放mutex.release()import
Time of Update: 2018-08-24
標籤:模組 不用 曆史 增強功能 調試 設定 注釋 增強 錯誤 編輯狀態時:Ctrl + [ 、Ctrl + ] 縮排代碼Alt+3 Alt+4 注釋、取消注釋程式碼Alt+5 Alt+6
Time of Update: 2018-08-25
標籤:bubuko 百度 找不到 變數 相關 value pyc 系統 error 今天嘗試在Jenkins上部署我們的自動化項目,用簡單的登入用例來配置,然後我們項目(我自己隨意寫的)使用的是
Time of Update: 2018-08-23
標籤:通過 產生隨機字串 span class upper 集合 port choice 隨機數 Random 我們的程式中很多地方需要用到隨機字元,我們可以通過random模組產生隨機字串
Time of Update: 2018-08-02
標籤:XML lag encoding utf-8 imp img validate ret findall 前言登入網站的時候,經常會遇到傳token參數,token關聯並不難,難的是找出伺服
Time of Update: 2018-07-31
標籤:www port div lin 錯誤 sys encoding out cmd 環境:python 3.6 下面的例子,通過 subprocess
Time of Update: 2018-07-16
標籤:多個 items 數組 使用 info imp numpy 類型 符號位 numpy引用import numpy as npN維數組對象np.array([0,1,2,3,4],[9,8,
Time of Update: 2018-07-04
標籤:編寫 gui roo **kwargs 沒有 原始碼 括弧 大牛 模組 俗話說:“沒有規矩不成方圓”。編程工作往往都是一個團隊協同進行,因而一致的編碼規範非常有必要,這樣寫成的代碼便於團隊
Time of Update: 2018-08-14
想必大家都是剛剛才開始接觸python這門語言的,今天這篇文章就來帶大家來瞭解一下python這門語言之中常常會用到的一個語句pass語句。想必大家都很好奇python中pass作用是什麼,接下來我就來帶大家來認識一下pass語句。Python pass語句這是一個空語句,這個語句是為了保持程式結構的完整性。pass
Time of Update: 2018-08-13
今天我們來講解python的基本概念性的知識。很多剛接觸python的朋友有很多疑問,python爬蟲是什嗎?那又為什麼把python叫做爬蟲?python爬蟲是什嗎?在進入文章之前,我們首先需要知道什麼是爬蟲。爬蟲,即網路爬蟲,大家可以理解為在網路上爬行的一隻蜘蛛,互連網就比作一張大網,而爬蟲便是在這張網上爬來爬去的蜘蛛,如果它遇到自己的獵物(所需要的資源),那麼它就會將其抓取下來。比如它在抓取一個網頁,在這個網中他發現了一條道路,其實就是指向網頁的超連結,那麼它就可以爬到另一張網上來擷取資料