Keresés:

Ártani nem fogsz vele, de szerintem sokat nem is használ. Inkább GWT-ben érdemes beküldeni, esetleg a domain.tld/sitemap.xml helyen elérhetővé tenni (a domain.tld nyilván a saját domained), mert ezt...

A robots.txt-ben elméletileg azt tudod megadni, hogy a robotok (beleértve a Google feltérképező robotját is, de nem kizárólagosan azt) mit látogathatnak meg és mit nem. Elméletileg ez úgy működik,...

Ez nem igaz. A robots.txt a robot látogatására vonatkozik, nem az indexelésre. Ez két különböző dolog. Ha pedig nem tudja a robot meglátogatni a .js és .css fájlokat, akkor értelmezi majd...

Szerintem meg valamit elcsesztek a G-nél. Legalábbis én is kaptam ilyen üzenetet, pedig semmi nincs tiltva robots.txt-ben, és három éve hozzá nem nyúltam a forráskódhoz, eddig tökéletesen látott...