2017年1月開始學習數據分析，現在已經快半年了，交個小結作業。
先截個猴子學習群的圖，基本上是按照這個順序來的，另外參加了城市數據團的課和簡書的python爬蟲群，也算是超額完成任務了吧。
數據分析課程，一共寫了以下文章
學習小結方面：
我的2017年大數據學習目標
學習大數據兩周筆記
迄今為止最有效率的春節
終身學習：啃啃大數據分析
大數據學習 第一季度小結
R語言數據展現（5篇）
R語言做統計學習題（2篇）
R語言Quantmod金融筆記(2篇）
R語言與地產結合的初步分析(5篇）
SQL練習，主要是做完了SQLZOO的練習。SQL專欄: http://www.lxweimin.com/nb/13379194
上了城市數據團的課，滿滿四門課，也很有收獲。http://www.lxweimin.com/p/9dc2edb8154e
另外還有python 爬蟲。Python爬蟲專欄：http://www.lxweimin.com/nb/12863403
筆記功課主要發表在知乎和簡書，看一下數據：
在知乎上，獲得贊最多的文章是《用R語言計算統計學習題》（大概很有需求吧！）其次是《買房還是買車位》，接下來是兩篇總結，《大數據學習第一季度小結》和《學習大數據兩周筆記》。
獲得評論最多的，也差不多是這幾篇。
在簡書比較久一點（不過越來越不喜歡首頁的雞湯風...），所以文章數目也多很多。差不多到目前，閱讀量已經過萬，可見堅持還是有成效的。
虛線是平均閱讀數。
把閱讀量在100以上的篩選出來，閱讀量最高的是《幻想摩拜單車的美好世界》，數據學習方面，是《大數據學習第一季度小結》，很簡單的一篇《利用R語言做最最初級金融分析de筆記》居然點贊數也很高，大概是因為很多人不知道R中quantmod包的強大功能吧。
5月開始學習python爬蟲，在學習期間，因為每個網站的網頁結構都不太相同，遇坑無數，每次爬都值得記錄下來。一共寫了20余篇。所以專門把爬蟲這個單獨列出來，看一下數據。
閱讀量最高的是《簡書爬蟲的功課一小覽》，因為比較全面。
其次是bs4和xpath比較，這篇也是點贊和評論最多的。其實寫的很簡單，但可能畢竟基礎平實吧。
下面7月計劃：
- 練習Kaggle的案例，這方面已經比很多同學落后太多了。
- 進一步拓展更深的知識，如聚類決策樹，隨機森林等知識。
3.繼續學習統計學知識，打好基礎。
加油吧！
最后做個廣告：7月中會有一場直播分享，是學習的點滴心得。
我在一塊聽聽的直播
附錄：爬取簡書代碼。自己起先寫的時候評論和贊都沒爬出來，原來又是多多手加上“*//”了。基礎不牢啊啊啊。
import requests
from lxml import etree
import random
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36'
}
for i in range(1,11):
url = 'http://www.lxweimin.com/u/b062b6eb573b?order_by=shared_at&page='+str(i)
html = requests.get(url, headers=headers).content
selector=etree.HTML(html)
infos= selector.xpath('//div[@id="list-container"]/ul[@class="note-list"]/li')
for info in infos:
title=info.xpath('div/a[@class="title"]/text()')
comment = str(info.xpath('div/div[2]/a[2]/text()')[1]).strip()
#comment=info.xpath('/div[@class="meta"]/a/i[@class="iconfont ic-list-comments"]/text()')
#comment=info.xpath('*//div/div[2]/a[2]/i/text()')
like = info.xpath('div/div[2]/span/text()')[0]
#like=info.xpath('/div[@class="meta"]/span/i[@class="iconfont ic-list-like"]/text()')
#like=info.xpath('*//div/div[2]/span/i/text()')
reader = str(info.xpath('div/div[2]/a[1]/text()')[1]).strip()
print (title, ' , ',reader, ' , ',comment, ' , ',like)
