youcanchatbot — robotul youcan.chat

youcanchatbot citește paginile publice ale site-urilor pe care clienții youcan.chat le-au adăugat în contul lor. Pe baza textului acestor pagini, reprezentantul AI al clientului răspunde vizitatorilor din chatul său.

Cum funcționează robotul

În fiecare cerere se prezintă astfel:

• Citește doar pagini publice: nu se autentifică, nu trimite formulare și nu rulează scripturi.
• Respectă robots.txt, inclusiv Crawl-delay (până la 10 secunde). Între cererile către același site așteaptă cel puțin o secundă.
• Reverifică un site o dată pe săptămână sau o dată pe zi, în funcție de planul clientului. Manual, clientul poate porni o verificare cel mult o dată la 3 ore.
• Descarcă din nou o pagină doar dacă s-a schimbat: mai întâi întreabă serverul prin ETag și Last-Modified.
• Nu citește fișierele legate din pagini (PDF și altele) și nu descarcă pagini mai mari de 5 MB.

Cum blocați robotul

Adăugați în fișierul robots.txt al site-ului dvs.:

User-agent: youcanchatbot
Disallow: /

Robotul va citi regula la următoarea verificare și nu va mai descărca paginile site-ului. Puteți bloca și doar o parte — indicați calea în Disallow.

Reclamații și întrebări

Dacă altcineva v-a adăugat site-ul în youcan.chat fără acordul dvs. sau robotul afectează funcționarea site-ului, scrieți-ne și indicați adresa site-ului. Vom analiza solicitarea și vom elimina paginile site-ului dvs. din datele clientului.