"Ich" habe bei Google blockierte URL's, die ich unbedingt im Index haben will. Doch was muss ich jetzt tun, um diesem Problem Herr zu werden. Amanda von Google erklärt die Lösung. Folgende Probleme mit der Seite können bestehen:
- das Robots.txt blockiert
- der HTTP Header Status Code erlaubt einen Crawl nicht wenn das robots.txt geladen werden soll
- Redirects
Finde ich bei diesen 3 Punkten das Problem noch immer nicht, braucht's wohl einen
Spezialisten (SEO) oder man stellt die
Frage in den Raum, ins
Google Forum.