爬蟲使用的代理IP有一些分類嗎?用戶喜歡刷、爬蟲等。通常通過代理ip突破限制。爬蟲代理ip通常在采集一次或多次后會改變IP,如局域網(wǎng)對用戶端口、目的網(wǎng)站、協(xié)議、游戲、即時(shí)通訊軟件的限制,網(wǎng)站對IP訪問頻率和訪問次數(shù)的限制等。另一方面,通過代理,還可以隱藏用戶的真實(shí)身份,訪問一些不希望對方知道你IP的服務(wù)器,抓取一些數(shù)據(jù)等等。
那么,問題來了,用戶的真實(shí)身份可以通過代理隱藏嗎?實(shí)際上,代理IP分為三種類型:透明代理、普通匿名代理和高級匿名代理。
(1)透明代理
在透明代理中,代理服務(wù)器將客戶端的信息轉(zhuǎn)發(fā)給目標(biāo)訪問對象,并不完全隱藏客戶端的真實(shí)身份。也就是說,服務(wù)器知道客戶端使用代理IP,并且知道客戶端的真實(shí)IP地址。
(2)普通匿名代理
在普通的匿名代理中,代理服務(wù)器用自己的IP替換客戶端的真實(shí)IP,但告訴目標(biāo)受眾這是代理訪問。
(3)高匿代理
在高低代理中,代理服務(wù)器很好地偽裝了客戶端,不僅用隨機(jī)的IP替換了客戶端的IP,還隱藏了代理信息。服務(wù)器不會意識到客戶端是通過代理訪問的,也就是說,用戶似乎直接將代理服務(wù)器作為自己的客戶端使用。