О проблемах доступа краулера к вебсайтам
В блоге Google Search Central Blog вышел материал (пока что только на английском языке) в стиле научпоп под названием "Комедия ошибок", посвященный различным проблемам доступа краулера к вебсайтам (ошибки DNS, сетевые ошибки, ошибки сервера и клиента).
В общем-то ничего революционного, но рекомендую к прочтению на досуге для общего развития и упорядочивания знаний в своей голове.
0 Comments