youcanchatbot — bot servisa youcan.chat

youcanchatbot čita javne stranice sajtova koje su klijenti servisa youcan.chat dodali u svoj nalog. Na osnovu teksta tih stranica AI predstavnik klijenta odgovara posetiocima njegovog četa.

Kako bot radi

U svakom zahtevu se predstavlja ovako:

• Čita samo javne stranice: ne prijavljuje se na sajt, ne šalje obrasce i ne pokreće skripte.
• Poštuje robots.txt, uključujući Crawl-delay (do 10 sekundi). Između zahteva ka istom sajtu čeka najmanje sekundu.
• Ponovo proverava sajt jednom nedeljno ili jednom dnevno, u zavisnosti od paketa klijenta. Ručno klijent može pokrenuti proveru najviše jednom u 3 sata.
• Ponovo preuzima stranicu samo ako se promenila: prvo pita server preko ETag i Last-Modified.
• Ne čita fajlove sa linkova na stranicama (PDF i druge) i ne preuzima stranice veće od 5 MB.

Kako da zatvorite sajt za bota

Dodajte u fajl robots.txt vašeg sajta:

User-agent: youcanchatbot
Disallow: /

Bot će pročitati pravilo pri sledećoj proveri i više neće preuzimati stranice sajta. Možete zatvoriti i deo sajta — navedite putanju u Disallow.

Žalbe i pitanja

Ako je neko drugi dodao vaš sajt u youcan.chat bez vaše saglasnosti ili bot ometa rad sajta, pišite nam i navedite adresu sajta. Proverićemo zahtev i ukloniti stranice vašeg sajta iz podataka klijenta.