AgenziaAuditBot

Il programma con cui analizziamo i siti web. Questa pagina spiega come riconoscerlo e come escluderlo.

In breve

Nome per robots.txt: AgenziaAuditBot
User-Agent: AgenziaAuditBot/1.0 (+https://agenzia-audit-bot.pages.dev/)
Ritmo: al massimo una pagina al secondo per sito
robots.txt: rispettato
Contatto: bot@lettorebot.com

Chi siamo

AgenziaAuditBot è il lettore di un'agenzia digitale italiana, che lo usa per l'analisi dei siti web.

Come si riconosce

Si presenta sempre con lo stesso nome: non finge di essere un browser, una persona o un altro bot.

Che cosa legge

Solo pagine pubbliche: la home, poche altre pagine del sito e i file standard per i programmi, come robots.txt e le sitemap. Nessun modulo, nessun clic, nessun accesso ad aree riservate.

Con che ritmo

Chiede al massimo una pagina al secondo per sito, e rallenta se il tuo robots.txt indica un Crawl-delay. Se il sito rifiuta l'accesso o chiede di aspettare, non insiste.

robots.txt

AgenziaAuditBot rispetta robots.txt secondo lo standard RFC 9309. Per escluderlo da tutto il sito aggiungi:

User-agent: AgenziaAuditBot
Disallow: /

Con queste righe il bot legge soltanto il file robots.txt. Puoi anche escludere solo alcune parti, con un Disallow per ogni percorso. Se nel file non c'è un gruppo con il suo nome, vale il gruppo User-agent: *.

Come chiedere l'esclusione

Scrivi a bot@lettorebot.com indicando il dominio del sito. Lo escludiamo dalle analisi senza scadenza, insieme ai suoi sottodomini, anche se robots.txt non cambia.

Che cosa conserviamo

Conserviamo il risultato dell'analisi e una copia delle pagine lette, in archivi privati. Per chiederne la cancellazione scrivi all'indirizzo qui sopra.

English

The program we use to analyse websites. This page explains how to recognise it and how to opt out.

At a glance

Name for robots.txt: AgenziaAuditBot
User-Agent: AgenziaAuditBot/1.0 (+https://agenzia-audit-bot.pages.dev/)
Rate: at most one page per second per site
robots.txt: respected
Contact: bot@lettorebot.com

Who we are

AgenziaAuditBot is the reader of an Italian digital agency, which uses it to analyse websites.

How to recognise it

It always identifies itself with the same name: it never pretends to be a browser, a person or another bot.

What it reads

Only public pages: the home page, a few other pages of the site and the standard files for programs, such as robots.txt and sitemaps. No forms, no clicks, no access to restricted areas.

How fast

It asks for at most one page per second per site, and slows down if your robots.txt sets a Crawl-delay. If the site refuses access or asks it to wait, it does not insist.

robots.txt

AgenziaAuditBot follows robots.txt according to the RFC 9309 standard. To exclude it from the whole site, add:

User-agent: AgenziaAuditBot
Disallow: /

With these lines the bot reads only the robots.txt file. You can also exclude only some parts, with one Disallow per path. If the file has no group with its name, the User-agent: * group applies.

How to opt out

Write to bot@lettorebot.com with the domain of your site. We exclude it and its subdomains from our analyses with no expiry, even if robots.txt stays the same.

What we keep

We keep the result of the analysis and a copy of the pages read, in private archives. To ask for their deletion, write to the address above.