Hledatel · bot info
BRMSearchBot
BRMSearchBot je crawler vyhledávače Hledatel. Navštěvuje veřejně dostupné stránky českého webu, čte HTML obsah a ukládá metadata (titul, popis, hlavní text) do našeho indexu, abychom mohli odpovídat na vyhledávací dotazy bez závislosti na velkých hráčích.
User-Agent
BRMSearchBot/0.1 (+https://search.brmworks.space/about-bot)
Pravidla
- • Respektujeme
robots.txt(RFC 9309). Pokud zakážeteUser-agent: BRMSearchBotnebo*, nepřistupujeme. - • Throttle: maximálně jedno HTTP volání na doménu jednou za 1.5 sekundy.
- • Ukládáme jen text (titul, h1, popis, hlavní obsah). Žádné obrázky, žádné cookies.
- • Necachujeme stránky, které vyžadují přihlášení nebo paywall.
Chcete nás zablokovat?
Přidejte do svého /robots.txt:
User-agent: BRMSearchBot Disallow: /
Kontakt
Provozovatel: BRM Works · brmworks@email.cz