kysymys

[einari]

onkohan nämä tiedot ihan oikein, kalenteria aan kaikki katsovat ja samaan aikaan :-)

[weatherc]

Botteja nuo todennäköisesti ovat, eli esim Google
Se tykkää tutkia joka ikistä nurkkaa ellei ole erikseen siltä kielletty ja siltikin vähän niin ja näin että totteleeko...

[J.Jäntti]

Yleensä nuo jotka katsovat samaan aikaan jotain paikkaa samanaikaisesti ovat lähinnä netin hakukoneiden kuten Googlen ja MSN:n indeksointihämähäkkejä. Niillä on joku satunnainen aikataulu ja jostain syystä niitä käy useampi kerralla pyörähtämässä.

Kyllä ainakin Googlen hämppis tottelee robots.txt:n sisältöä. Muista en osaa sanoa, mutta eipä niillä pääsyä silti olisi kiellettyihin paikkoihin. 

[weatherc]

Tuolle Googlen hämmppikselle sai kerran liki rautalangasta vääntää että vähän vähempikin riitäisi kun liki kaatoi koko paikkakunta-ennusteen dediltä. Se muistaakseni tuuttas pahimmillaan tyyliin 100 hakua/sekunnissa mitä eriskummallisilla haku/url-parametreillä, ei siis ollut edes sellaisia mitä sivua kilikkaamalla olisi saanut aikaseksi. Silloinkin oli useampi hämppis asialla samanaikaisesti. Eli osaa se olla haitaksikin vaikka noin muuten välttämätön onkin (jos haluaa että sivut löytyy hausta)