MSIECrawler. Webes ügynök

Két web-crawszükségtelen lers-ek, amelyek erőforrásokat fogyasztanak a webszerveren. 1. Ügynök: Yanga WorldSearch Bot v1.1/beta (http://www.yanga.co.uk/) 2. Ügynök: Mozilla/4.0 (kompatibilis; MSIE…