爬取網站提供介面的公開資訊不違法，如天氣等等。 如果涉及公民隱私類資訊，建議不要違法爬取更加不要用來謀利，國家立法命令禁止這類行為！雖然目前大部分公民資訊已經遭到洩露，但請至少從我們自己做起，不要吃人血饅頭！

一般只要不是敏感資訊，且不違反網站的robots.txt的要求，是不會違法。另外有些網站是可能會對爬蟲做各種限制的，這也就限制了爬蟲的一些行為。

更重要的是，不要去爬取一些隱私的資料，即使你有那個能力。更不要把敏感的隱私資料拿去售賣，有盈利的行為。

爬蟲的原理就是訪問伺服器 只是比人為的好快好多好多 但是他有一個弊端就是會對伺服器造成很大的訪問量 導致其宕機 這是一種損人的行為 如果是惡意破壞 會對其訪問的伺服器造成較大的損失 這就看你造成的損失有多大了

然後有一種就是不能讓你訪問或批次下載的資料 有隱私保護的 大家可以訪問那個rotbot.txt 看看user-agent 是不是給你訪問 有的爬蟲製造假的訪問代理人 批次訪問這個網站不對外提供的資料 就侵犯了人家的智慧財產權和隱私權啦

網路爬蟲，作為一種技術，本身不存在違法的問題，關鍵是用爬蟲爬什麼，以及怎麼爬。

就目前公開的判例，鄧世運律師團隊整理出爬蟲業務可能會觸犯的幾個常見罪名。

一、 侵犯公民個人資訊罪二、 非法獲取計算機資訊系統資料罪三、非法侵入計算機資訊系統罪四、侵犯著作權罪

爬蟲本身並不違法，而是看你使用的方式和目的，還要看是不是商業用途。這就像攝影一樣，人人都可以拍照，技術宅也可以用無人機滿天拍，但如果你拍人家隱私、在禁區裡拍、偷拍盜版人家的作品，對不起那是違法。

人工智慧為了快速學習發展，必然會出現各種各樣千奇百怪的爬蟲，資料就是資訊現代社會的資源，相當於工業時代的石油煤礦，