Сегодня эллектроная Россия напустила поискового бота на одну достаточно большую социальную сеть.
Создают графы связей и отношений между гражданами России и прочей планеты. И даже не шифруются
2 миллиона запросов за 12 часов из сети
109.207.13.0/24 запросы не тяжелые, но они разнесли мэмкэш.
Oбнаружили в логах nginx
Вот такой вот акопалипсис.
109.207.13.44 - - [22/Mar/2013:14:42:35 +0400] GET /people/217387210 HTTP/1.1 "200" 11442 "-" "Mozilla/5.0 (compatible; SearchBot)" "-" 20.367 XXX.20.0.58:80 20.367 s300342987XX.XXXXXX.ru 109.207.13.49 - - [22/Mar/2013:14:42:35 +0400] GET /people/490145981 HTTP/1.1 "401" 8660 "-" "Mozilla/5.0 (compatible; SearchBot)" "-" 20.520 XXX.20.0.58:80 20.520 suXXXfotoshop.XXXXX.ru 109.207.13.38 - - [22/Mar/2013:14:42:35 +0400] GET /people/107620610 HTTP/1.1 "200" 20871 "-" "Mozilla/5.0 (compatible; SearchBot)" "-" 10.645 XXX.20.0.56:80 10.641 kurgaXXX.XXXXXX.ru 109.207.13.46 - - [22/Mar/2013:14:42:35 +0400] GET /people/986500915 HTTP/1.1 "500" 1762 "-" "Mozilla/5.0 (compatible; SearchBot)" "-" 9.043 XXX.20.0.60:80 9.043 s30217938133.XXXXXX.ru