⑴ python爬蟲ip被封怎麼辦，求解
簡單來講，你通過代碼向伺服器發送的請求與瀏覽器向伺服器發送的請求不一樣，所以你可以通過瀏覽器獲取數據，但是無法通過代碼。
首先建議你打開瀏覽器的開發者工具，推薦使用Chrome瀏覽器。選中Network一欄之後重新通過瀏覽器向伺服器發送一次請求，然後，你就可以看到你剛才通過瀏覽器訪問伺服器資源的流程和數據流向。其中，數據流向包括：
瀏覽器向伺服器發送的請求頭
瀏覽器向伺服器發送的請求體
（可能）伺服器向瀏覽器發送的重定向地址及瀏覽器重新向新的地址發送請求
伺服器返回的響應頭
伺服器返回的響應體
---
你面臨的問題很可能是在模擬瀏覽器發送請求這一步（1、2）。檢查代碼，修復之。
至於解決方案，既然你可以通過瀏覽器訪問，說明你的IP並沒有被伺服器禁封，加上你提到用了requests庫，我猜測你通過requests.Session()來獲取了一個對象或者指定了headers中的Cookie欄位來發送請求。這兩種方法，伺服器都會認為你的多次請求來自同一個客戶端，自然訪問過快之後，伺服器會向此客戶端彈驗證碼（伺服器端通過Session確認某一個用戶，客戶端通過Cookie[中的某一條]告訴伺服器自己是某Session對應的用戶）。
所以，你可以嘗試切換一個新的requests.Session()對象來發送請求。更甚之，你可以通過代理IP，使用代理IP需要注意的是，最好選擇高匿的IP，並在使用前校驗有效性。通過requests使用代理：
⑵ 伺服器被攻擊後怎麼處理
1、發現伺服器被入侵，應立即關閉所有網站服務，暫停至少3小時。這時候很多站長朋友可能會想，不行呀，網站關閉幾個小時，那該損失多大啊，可是你想想，是一個可能被黑客修改的釣魚網站對客戶的損失大，還是一個關閉的網站呢?你可以先把網站暫時跳轉到一個單頁面，寫一些網站維護的的公告。
2、下載伺服器日誌，並且對伺服器進行全盤殺毒掃描。這將花費你將近1-2小時的時間，但是這是必須得做的事情，你必須確認黑客沒在伺服器上安裝後門木馬程序，同時分析系統日誌，看黑客是通過哪個網站，哪個漏洞入侵到伺服器來的。找到並確認攻擊源，並將黑客掛馬的網址和被篡改的黑頁面截圖保存下來，還有黑客可能留下的個人IP或者代理IP地址。
3、Windows系統打上最新的補丁，然後就是mysql或者sql資料庫補丁，還有php以及IIS，serv-u就更不用說了，經常出漏洞的東西，還有就是有些IDC們使用的虛擬主機管理軟體。
4、關閉刪除所有可疑的系統帳號，尤其是那些具有高許可權的系統賬戶!重新為所有網站目錄配置許可權，關閉可執行的目錄許可權，對圖片和非腳本目錄做無許可權處理。
5、完成以上步驟後，你需要把管理員賬戶密碼，以及資料庫管理密碼，特別是sql的sa密碼，還有mysql的root密碼，要知道，這些賬戶都是具有特殊許可權的，黑客可以通過他們得到系統許可權!
6、Web伺服器一般都是通過網站漏洞入侵的，你需要對網站程序進行檢查(配合上面的日誌分析)，對所有網站可以進行上傳、寫入shell的地方進行嚴格的檢查和處理。如果不能完全確認攻擊者通過哪些攻擊方式進行攻擊，那就重裝系統，徹底清除掉攻擊源。
⑶ 爬蟲工作中，如何最大程度的避免被封IP
做爬蟲，或者採集數據過程中，遇到最多的問題不是代碼bug，而是封IP。開發好一個爬蟲，部署好伺服器，隨後開始抓取信息，不一會兒，就提示封IP了，這時候的內心是崩潰的。
那麼，有什麼辦法不封IP呢?首先，要了解為什麼會封IP，這樣才可以更好地避免封IP。有些網站反爬措施比較弱，偽裝下IP就可以繞過了，大部分的網站的反爬措施都在不斷加強，不斷升級，這給預防封IP帶來更大的困難。
有人說，使用代理IP就沒事了了。誠然，使用大量的優質代理IP能夠解決大部分的問題，但並非無憂無慮。我們知道，網站的反爬蟲策略主要是反那些比較猖狂的爬蟲，不可能反那些正常的用戶。那麼什麼樣的用戶是正常的用戶呢，如果將爬蟲偽裝成正常的用戶呢，是不是就不會被封了。
首先，正常的用戶訪問網站頻率不會太快，畢竟手速是有限，眼速也是有限的，爬蟲要偽裝成用戶，那麼抓取的頻率就不能反人類，但這樣一來，效率就大大降低了，怎麼辦?能夠 使用多線程來解決。
其次，一些網站往往需要驗證碼來驗證，對於正常使用的用戶來說，基本都沒問題，但對於爬蟲來說，就需要一套較為厲害的驗證碼識別程序來識別了，像12306這樣的驗證碼就較為難搞定了。隨後，就是一些其他的細節了，比如，UserAgent經常換一換，cookie要清一清，訪問的順序最好不要有規律，爬取每個頁面的時間沒有規律等等。反爬蟲策略不斷升級，相應的爬蟲策略也要不斷升級，不然有一天，你會發現，哪怕您使用了大量的代理IP，依然預防不了大面積的封IP，爬蟲工作受阻
⑷ 入侵防護系統(IPS)的原理
通過全面的數據包偵測，TippingPoint的入侵防禦系統提供吉比特速率上的應用、網路架構和性能保護功能。應用保護能力針對來自內部和外部的攻擊提供快速、精準、可靠的防護。由於具有網路架構保護能力，TippingPoint的入侵防禦系統保護VOIP系統、路由器、交換機、DNS和其他網路基礎免遭惡意攻擊和防止流量異動。TippingPoint的入侵防禦系統的性能保護能力幫助客戶來遏制非關鍵業務搶奪寶貴的帶寬和IT資源，從而確保網路資源的合理配置並保證關鍵業務的性能。
⑸ 如何應對網路爬蟲帶來的安全風險
我們的網站上或多或少存在一些頁面涉及到網站的敏感信息不希望在搜索引擎上公開；還有一些頁面是根本沒必要被搜索引擎收錄的：比如網站的管理後台入口。對於SEOER而言有一些頁面如果被收錄後反而會影響關鍵詞著陸頁的排名，或者降低了著陸頁的轉化率，比如電子商務網站的商品評論頁。那麼我們通過什麼樣的方法可以限制搜索引擎收錄此類頁面呢？
1994年6月30日，在經過搜索引擎人員以及被搜索引擎抓取的網站站長共同討論後，正式發布了一份行業規范，即robots.txt協議。這個協議既非法律，也非命令，而是一個自律性的契約，需要各種搜索引擎自覺去遵守這個協議。這個協議告訴搜索引擎哪些頁面可以抓取，哪些頁面不能抓取。
當一個網路爬蟲訪問一個站點時它會首先檢查該站點根目錄下是否存在robots.txt；如果沒有對網站的robots協議進行設置，則爬蟲會盡可能的收錄所有能夠訪問到的頁面，而如果存在該robots協議文件，爬蟲則會遵守該協議，忽略那些不希望被抓取的頁面鏈接，下面我們以http://www..com/robots.txt為例：
User-agent: Googlebot
Disallow: /
Disallow: /s?
Disallow: /shifen/
Disallow: /homepage/
Disallow: /cpro
網路是不希望谷歌搜索引擎的Googlebot爬蟲收錄/ 、/shifen 、/homepage/ 、/cpro 目錄下以及所有/s開頭的搜索結果頁面的。
User-agent:表示爬蟲的名字
Allow:表示允許爬蟲訪問的頁面
Disallow:是指禁止爬蟲訪問的頁面
Visit-time:只有在visit-time指定的時間段里,robot才可以訪問指定的URL
Request-rate: 用來限制URL的讀取頻率
除了上述robots.txt文件之外，我們還可以針對每一個頁面，在網頁的原信息中設置該頁面是否允許被收錄：
noindex: 不索引此網頁
nofollow:不通過此網頁的鏈接索引搜索其它的網頁
none: 將忽略此網頁，等價於「noindex，nofollow」
index: 索引此網頁
follow:通過此網頁的鏈接索引搜索其它的網頁
all: 搜索引擎將索引此網頁與繼續通過此網頁的鏈接索引，等價於index，follow。
舉例 〈meta name= 「 Baispider 」 content= 「 none" /〉 是不允許網路蜘蛛索引該頁面，並且不允許爬行該頁面中的所有鏈接。
還有一種方法，就是在超級鏈接的rel屬性中填寫「nofollow」,形如 〈a rel=」nofollow」 href=」*」〉 超級鏈接 〈/a〉 ，表示搜索引擎不要跟蹤鏈接。
但是所有上述方法都是基於Robot的自律性協議，並非強制執行的法律法規。如果遇到不遵守該協議的網路爬蟲瘋狂的抓取網站頁面並對網站性能產生了嚴重影響，更為有效的方使用入侵檢測系統（IDS）入侵防護系統（ IPS ）網路設備。
⑹ 易微聯綁定螢石賬號顯終端已達上退怎麼辦
綁定螢石賬號終端數量過多，建議刪除一部分。
可通過螢石雲視頻app下「我的」—安全中心—終端管理查看您已經授權過的信任終端，並根據需要進行添加或刪除等的管理。
EZVIZ螢石播放失敗，設備資源達到上限，請稍候重試，產生這種原因很多，首先是你的設備人數連接太多，有的人會說我的設備只有我自己連，其實有很多互聯網爬蟲在訪問你的設備，比如說我們的設備能同時十個人訪問，現在如果有互聯網黑客以及爬蟲以及搜索引擎在訪問你的攝像頭，雖然他們沒有密碼，但是仍然佔用了一個資源，還有就是如果你的攝像頭連接硬碟錄像機連接多個硬碟錄像機也會出現這種提示，出現資源到達上限的原因有很多，其中可以解決的方法就是重啟硬碟錄像機，如果沒有硬碟錄像機，那就重啟攝像頭，修改螢石雲的密碼，斷開網路連接以及重啟路由器。
⑺ 如何一步一步學習到網路爬蟲技術
作為零基礎的你，我想你可能是想解決工作中的一個實際問題，或者僅僅是很想學習一下爬蟲的技術，多一技之長。其實我准備開始學 Python 爬蟲的時候也是一樣，老闆派了任務，暫時沒有人會爬蟲，我只有自學頂硬上。因此，我可以用思維圖給你理清楚，你應該干什麼。
我零基礎但我想學網路爬蟲：
路徑1：我不想寫代碼，Excel/八爪魚，用這些工具的好處是你可以很快上手，但是只能爬一些簡單的網站，一旦網站出現限制，這些方法就是個玩具。因此，想弄點數據玩玩，玩這些玩具就好。
路徑2：我可以學寫代碼，但是會不會很難啊？我以我的經驗告訴你，找一個好的老師比自我胡思亂想，自我設限好得多。寫代碼這個事不難學，這也是為什麼市面上有那麼多代碼速成的教學。這也是為什麼我有些同學1年轉專業進 Google 的事情發生。
這里給你描畫一下你的學習之路：
學會 Python 的基本代碼： 假如你沒有任何編程基礎，時間可能花1-2周，每天3小時。假設你有編程基礎（VBA 也算吧），1小時。
理解爬蟲原理：5分鍾。為什麼這么重要？我自認為學一個東西就像建大樓，先弄清楚大框架，然後再從地基學起。很多時候我們的學習是，還沒弄懂大框架，就直接看網上的碎片化的教學，或者是跟著網上教學一章一章學，很容易學了芝麻丟了西瓜。我的自學就在這上面走了很多彎路。
應用爬蟲原理做一個簡單爬蟲：30分鍾。
先吃透獲取網頁：就是給一個網址發個請求，那麼該網址會返回整個網頁的數據。類似：你在瀏覽器鍵入網址，回車，然後你就看到了網站的整個頁面。
再吃透解析網頁：就是從整個網頁的數據中提取你想要的數據。類似：你在瀏覽器中看到網站的整個頁面，但是你想找到產品的價格，價格就是你想要的數據。
再學會儲存數據：存儲很簡單，就是把數據存下來。
學會這些之後，你可以出去和別人說，我會 Python 爬蟲，我想也沒有人質疑你了。那麼學完這一套下來，你的時間成本是多少呢？如果你有編程基礎的話，1周吧。
所以，你是想當爬蟲做個玩具玩玩，還是掌握一門實戰利器。我覺得你可以自己衡量一下。
⑻ 網路爬蟲有哪些功能
網路爬蟲（又被稱為網頁蜘蛛，網路機器人，在FOAF社區中間，更經常的稱為網頁追逐者），是一種按照一定的規則，自動地抓取萬維網信息的程序或者腳本。另外一些不常使用的名字還有螞蟻、自動索引、模擬程序或者蠕蟲。
----這樣看來，網路蜘蛛就是一個爬行程序，一個抓取網頁的程序。
功能是從網站某一個頁面（通常是首頁）開始，讀取網頁的內容，找到在網頁中的其它鏈接地址，然後通過這些鏈接地址尋找下一個網頁，這樣一直循環下去，直到把這個網站所有的網頁都抓取完為止。如果把整個互聯網當成一個網站，那麼網路蜘蛛就可以用這個原理把互聯網上所有的網頁都抓取下來。
⑼ 單位其他電腦可以上網，我的這個IP只能上內網，換了別的IP本來可以上網，這兩天也被限制了，求助高手解決
去找你們單位管網路的吧
首先我不建議你和 網路管理員對著干
所以別弄什麼反P2P終結者
因為既然你問了這個問題 我料定你技術不高
所以 一個稍微有點經驗的 網管 可以輕松搞定你
你弄的那個 肯定會被發現 被發現 以後肯定會重點照顧你
所以直接找網管最好
本人親身體驗 不懂可以追問