Анализирајте robots.txt датотеку, валидирајте правила и проверите sitemap директиве. Бесплатна онлајн алатка.