1. Chi è
UserbotBot è il crawler di Neuraltech S.r.l., la società che sviluppa Userbot, parte del Gruppo Smeup. Nei log del tuo server si presenta con questo user agent:
UserbotBot/1.0 (+https://userbot.ai/bot)
2. Cosa legge
- Solo pagine pubbliche, raggiungibili con https senza password né accesso. Non entra in aree riservate, non compila moduli, non esegue il JavaScript delle pagine.
- Per ogni richiesta legge la home e al massimo altre cinque pagine che descrivono l'azienda, come «chi siamo», prodotti e servizi. Al massimo 1 MB per pagina.
- Rispetta il
robots.txt: se c'è un gruppo perUserbotBotvale quello, altrimenti vale il gruppo*. Se ilrobots.txtrisponde con un errore del server, non legge niente. - Si collega solo a indirizzi pubblici: non apre reti private né indirizzi interni.
- Non copia i contenuti per ripubblicarli. Del testo letto non resta nulla: si conserva solo la sintesi dell'analisi (settore, attività, ipotesi sui reparti) per 7 giorni.
3. A cosa serve
- AI Adoption Map. Quando una persona scrive il sito della propria azienda nella AI Adoption Map, UserbotBot legge quelle pagine. Il testo viene ripulito da email e numeri di telefono e inviato a un modello AI, che ne ricava settore e attività.
- Dati d'impresa. Per le aziende già in contatto con Userbot, legge le pagine dove la legge prevede di indicare la partita IVA (per esempio le note legali) e la confronta con il registro europeo VIES.
4. Come bloccarlo
Aggiungi queste due righe al robots.txt del tuo sito:
User-agent: UserbotBotDisallow: /
Vale dalla richiesta successiva. Per escludere solo una parte del sito, scrivi il percorso al posto di /. Se un'analisi del tuo dominio era già stata fatta, la sintesi resta in memoria fino a 7 giorni e poi scade da sola: per toglierla subito scrivici.
5. Contatti
Per segnalare un problema, chiedere di escludere un dominio o far cancellare una sintesi o una mappa, scrivi a info@userbot.ai indicando il dominio. Come trattiamo i dati: Informativa Privacy.