學習目的以及需求

 

需求來自於：抓取的某個網站或者某個應用的內容，提取有用的價值

實現手段

 

模擬使用者在瀏覽器或者應用(app)上的操作，實現自動化的程式

爬蟲應用場景（利用爬蟲能做什麼？）

大家最熟悉的應用場景

搶票神器（360搶票器）

企業應用場景諮詢報告：拉勾網招聘職位資料分析報告2019年中國外賣O2O行業發展報告2019年中國線上出境遊市場研究報告

1、各種熱門公司招聘中的職位數及月薪分佈

2、對某個App的下載量跟蹤

3、 飲食地圖

還可以把男的排除掉，只看女的：

4、 票房預測

總結

搶票神器投票神器預測（股市預測、票房預測）國民情感分析社交關係網路

六度分隔(Six Degrees of Separation)現象(又稱為“小世界現象”small world phenomenon)，可通俗地闡述為：“你和任何一個陌生人之間所間隔的人不會超過六個，也就是說，最多通過六個人你就能夠認識任何一個陌生人。”

一家德國報紙接受了一項挑戰，要幫法蘭克福的一位土耳其烤肉店老闆，找到他和他最喜歡的影星馬龍·白蘭度(電影《教父1》主演)的關聯。結果經過幾個月，報社的員工發現，這兩個人只經過不超過六個人的私交，就建立了人脈關係。原來烤肉店老闆是伊拉克移民，有個朋友住在加州，剛好這個朋友的同事，是電影《這個男人有點色》的製作人的女兒在女生聯誼會的結拜姐妹的男朋友，而馬龍·白蘭度主演了這部片子。

輿情監控

“郭美美微博炫富”事件概況。2011年6月21日，新浪微博使用者“郭美美Baby”備受網友關注，這個自爆“住大別墅，開瑪莎拉蒂”的20歲女孩，而認證身份卻是“中國紅十字會商業總經理”，網友對其真實身份也猜測萬分，更有網友認為她是中國紅十字會副會長郭長江的女兒，由此引發網友對中國紅十字會的熱議

負面輿情最大的危害就是對公司形象，輿情口碑造成不良影響，而其直接後果就是公司銷售和競爭力的下降，嚴重者就像三鹿公司一樣，直接導致一個品牌的消亡

以上海為例，無論在涉日輿情、地鐵調價，還是普陀城管打人等“網路熱點輿情”處理上，各部門協同作戰、相互配合、共同商議，判斷危機走向，對預案進行適當修正和調整，以符合實際所需是危機應對的重要措。

預警負面輿情，及時發現和處理企業的負面資訊保持對事態的第一時間獲知權，加強監測力度。輿論危機涉及的政府相關部門保持緊密溝通。

這只是爬蟲一部分可以實現的事！