
IP屬地:浙江
1. 背景 之前將pyspider部署在了一臺機子上,這一臺負責「數據存儲」,「消息隊列」,「任務調度」,「URL抓取」,「任務處理」。現在發現...
前提步驟 1. 安裝zlib 2. 指定zlib link 安裝 pyenv 1. 安裝pyenv 2.配置 3. 常用命令 安裝 pyenv-...
用了一段時間的pyspider,一直沒有研究源碼。這兩天抽空看了看,稍微拿幾個點出來研究一下,如果讀到哪里不對的地方,請及時指出我好糾正,本文我...
用git也將近半年了,一直沒有系統地整理一下,今天剛好有空,就把一切基本的操作整理一下。注意:本文章只包含基本的上傳代碼,切換分支,刪除分支,添...
之前爬蟲一直用的python2.7,不用第三方框架的話只能用多線程來提升爬蟲效率。自從聽說python3.5原生自帶異步后,就拿來實現了一下,效...
感想: 今天在微博中看到科比的采訪,我雖然不是他的粉絲,但是還是挺贊同他的“Mamba Mentality”,總結起來就是五個字: 對目前的我來...