Unser Bot
IndudexBot liest öffentliche Stellenanzeigen für Indudex, eine kostenlose Suche nach technischen Jobs in Europa.
User-Agent
Mozilla/5.0 (compatible; IndudexBot/1.0; +https://indudex.com/about/our-bot)
Wie er liest
Er liest nur öffentliche Seiten: keine Anmeldungen, Formulare oder Bot-Prüfungen. Er folgt der robots.txt jeder Website und dem verlangten Crawl-delay und verteilt seine Anfragen an jeden Server.
Aussperren
Fügen Sie diese Zeilen in Ihre robots.txt ein:
User-agent: IndudexBot Disallow: /
Signatur
Jede Anfrage ist mit Web Bot Auth (HTTP Message Signatures, RFC 9421) signiert. Die öffentlichen Schlüssel stehen im Schlüsselverzeichnis.
Kontakt
Fragen, Beschwerden oder eine Website zum Ausschließen: contact@indudex.com.