A mérőrobotom
Ha a szervernaplódban a TamasVighAnalysis nevet látod, az az analysis.tamasvigh.com mérője. Én építettem, Vigh Tamás vagyok. Leírom, mikor jön, és mit csinál.
Mikor jön?
Csak akkor, ha valaki az analysis.tamasvigh.com oldalon kéri az oldalad mérését, és megerősíti az e-mail címét. Magától sosem jár, nincs ütemezett vagy ismétlődő mérés. Bárki kérhet mérést bármelyik oldalra, nem csak az oldal gazdája.
Ha egy kész mérés 24 óránál fiatalabb, azt használom fel, és nem kérem le újra az oldalt. Ugyanarra az oldalra naponta legfeljebb három új mérés indulhat, akár egy új kéréssel, akár a „Mérd újra” gombbal.
Mit kér le?
Egy mérés legfeljebb 30 kérést küld az oldaladra. Ritkán, ha a lekérések lépése hiba vagy időtúllépés után megismétlődik, az ismétlésnek is megvan a maga 30 kérése. Mindegyik kérés legfeljebb 10 másodpercig tart, legfeljebb 5 átirányítást követ, és legfeljebb 3 MB-ot olvas be. Csak lekérdez, nem lép be sehová, és nem küld be űrlapot. A lekérések:
- a nyitóoldal, és ha nem érhető el, ugyanaz a másik protokollal (http vagy https)
- a nyitóoldal még egyszer a saját nevemen, és egyszer-egyszer nyolc AI-robot nevében, hogy lássam, a tűzfalad beengedi-e őket. A robotok nevében kettesével kérek, kis szünetekkel. Ha a tűzfal egy robot nevét elutasítja, utána még egyszer a saját nevemen is lekérem, hogy lássam, nem csak a sűrű kérések zavarták-e
- a robots.txt, az oldaltérkép (a robots.txt-ben megadott cím, a /sitemap.xml és a /sitemap_index.xml, ez legfeljebb három kérés), az llms.txt, és a nyitóoldal Markdown változata
- egy kitalált, nem létező cím, hogy lássam, valódi hibaoldalt kapok-e
- a nyitóoldal http:// változata és a www nélküli vagy www-s változata, hogy lássam, jól irányítanak-e át
- legfeljebb három aloldal: a Kapcsolat, az Impresszum és az Adatvédelem oldal, ha a nyitóoldal linkel rájuk
Ami ezen kívül még történik
- Egyszer megnyitom a nyitóoldalt egy fej nélküli böngészővel is, telefonméretben (a Cloudflare Browser Rendering szolgáltatásával). Ez az oldal képeit és programjait is betölti, de nem kattint, nem görget és nem ír be semmit. Ezt nem számolom a 30 kérésbe. Ritkán, ha ez a lépés hiba vagy időtúllépés után megismétlődik, még egyszer megnyitom.
- A mérésem megkéri a Google PageSpeed Insights nevű mérőjét is, és az megnyitja az oldalt a saját programjával. Ezt a kérést a Google küldi, de az én mérésem indítja. Ritkán, ha az első próbálkozás hibára fut, kétszer is.
- Az e-mail beállításaidat (MX, SPF, DKIM, DMARC) a nyilvános DNS-ből kérdezem le, ezek nem az oldaladra mennek.
- A robots.txt tiltásait nem veszem figyelembe, amikor ezeket lekérem, mert éppen azt mérem, mit enged be az oldalad. A fenti rögzített listán kívül mást nem kérek le.
Milyen néven jelentkezik?
Az AI-robotok neveit a hivatalos leírásaik alapján vettem át, de nem az ő gépeikről jönnek, ezért ez csak a tűzfalad viselkedését próbálja ki, a robotokét nem. A két Claude névnek az Anthropic nem közöl teljes szöveget, azok az én ellenőrizetlen változataim.
- A nyitóoldal egy lekérése a saját nevemen, és ha a tűzfal elutasít egy AI-robotot, utána még egy-egy:
TamasVighAnalysis/1.0 (+https://analysis.tamasvigh.com/robot) - A legtöbb lekérés egy hétköznapi böngésző nevében megy:
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/126.0.0.0 Safari/537.36 - A fej nélküli böngésző:
Mozilla/5.0 (iPhone; CPU iPhone OS 17_5 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.5 Mobile/15E148 Safari/604.1 - Az AI-robotok nevei, egy-egy lekéréssel a nyitóoldalra:
- ChatGPT-User:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ChatGPT-User/1.0; +https://openai.com/bot - Claude-User:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Claude-User/1.0; +Claude-User@anthropic.com) - Perplexity-User:
Mozilla/5.0 (compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user) - MistralAI-User:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; MistralAI-User/1.0; +https://docs.mistral.ai/robots) - OAI-SearchBot:
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot - Claude-SearchBot:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Claude-SearchBot/1.0; +Claude-SearchBot@anthropic.com) - PerplexityBot:
Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot) - DuckAssistBot:
DuckAssistBot/1.2; (+http://duckduckgo.com/duckassistbot.html)
- ChatGPT-User:
Mit tárolok a mérésből?
Erről az adatkezelési tájékoztatóban írok: Adatkezelési tájékoztató.
Ha zavar, vagy kérdésed van
Írj nekem: tamas@tamasvigh.com.