RYTE und Yoast sagen NoIndex via robots.txt

Nutzt Du Bot Blocker oder Bot blockende Plugins (wie z.B. Wordfence)?

Ein häufiger Grund, warum Domains laut RYTE nicht indexierter sind, sind Plugins die zwischen Bot Besucher und Browser Besucher unterscheiden.

Bitte vergewissere Dich, dass unsere Crawler die Erlaubnis hat, Deine Webseite zu crawlen. Selbstverständlich kannst Du unseren Crawler User-Agent („Rytebot“) auf die Whitelist setzen.

 

Haben Sie Fragen? Anfrage einreichen

0 Kommentare

Bitte melden Sie sich an, um einen Kommentar zu hinterlassen.
Powered by Zendesk