A WMT rosszul látja a robots.txt fájlt

**Petyyy** · 2013-08-06, 10:15

Sziasztok!

Lenne egy olyan problémám, hogy hozzaádtam egy oldalt a WMT-hez és valami oknál fogva azt olvassa ki a robots.txt fájlból, hogy ki van tiltva az oldalról a robot, pedig valójában nincs. Próbáltam újra feltölteni a fájlt és várni egy kicsit, de az se segített. Ráadásul a Bing WMT is ugyanezt mondja, de ha böngészőben megnyitom a fájlt, akkor is jó. Van esetleg ötletetek? Köszi!

**hunprobalazs** · 2013-08-06, 10:19

Nem tudom saját fejlesztés-e, vagy valamilyen CMS motor hajtja (mondjuk Wordpress), mindenesetre kis időnek el kell telnie, hogy átálljon! Én amire gondolok ennyi infó után, hogy új az oldal, fejlesztéskor ki volt tiltva a robot, ő már járt az oldalon és a tiltást látta, érzékelte, tárolta, most a WMT meg ezt mutatja! Ha legközelebb jár újra feltérképezés gyanánt, a megengedő robots.txt fogja fogadni! Legalábbis én erre tippelek, mert nálam is volt már ilyen! Tehát türelem, helyre fog állni, már amennyiben az az eset áll fenn, amit írtam! Ha nem, akkor kifejthetnéd bővebben!

**Petyyy** · 2013-08-06, 10:41

Korábban egy flash alapú oldal volt fent, az lett most lecserélve egy egyszerű html+css oldalra, de lehet, hogy akkor tényleg ez lesz a gond, amit írtál. Várok még 1-2 napot és kiderül. Köszi!

**fopeij** · 2015-04-02, 09:41

Mivel nem találtam relevánsabb topikot és a téma részben függ a robot.txt fájl beállításától is, ezért ide írom a kérdésem.

A Wordpress oldalunkon utólagosan csak február elején lett aktiválva a Kategória és az ehhez kapcsolódó Címkék és azóta jelent meg a WMT-ban a "Letíltott források", valamint az Indexelési állapot (haladó) oldalon a "Keresőrobotok által letíltott" oldalak (41 db).

Szerintetek
- ezek a hibák mennyire komolyak, tényleg befolyásolhatják/ronthatják a G helyezéseket?
- ha igen hogy lehetne ezeket megszüntetni? Esetleg töröljük a Kategóriák/Címkéket? (egyáltalán van értelme a Kategóriák/Címkék megjelenítésének?

**Emphus** · 2015-04-02, 11:27

Szerintem semmit nem befolyásol, ha eddig sem volt, és ezután sincs (mivel le vannak tiltva). És nyilván azt teheted ellene, hogy törlöd a tiltását ezeknek az aloldalaknak.

Gondolom robots.txt-ben.

**esotanc** · 2015-04-02, 12:32

Ha túl sok gyenge vagy duplikált tartalmú cimke és kategóriaoldalad van az ronthat a helyezéseden.
A kategóriaoldalak lehet érdemes indexeltetni, a cimke oldalakat általában nem.Ha indexelteted őket, akkor az elejére, ha a sablon engedi írj néhány bekezdésnyi egyedi szöveget.
Indexeltetni akkro érdemes ha hoz forgalmat, arra viszont vigyázz, hogy lehetőleg ne ugyan az legyen a title, mint a konverziót hozó oldal esetén. Pl: műanyag redőny oldal és műanyag redőny kategóriaoldal.

A WMT adatai nem mindig megbízhatóak keress rá az adott oldalakra a site:url paranccsal és láthatod, hogy indexelve vannak-e?

Ha nincsenek, de szeretnéd, akor ellenőrizd a SEO beállításokat és ha rendben vannak it be tudod küldeni: https://www.google.com/webmasters/tools/submit-url

**fopeij** · 2015-04-02, 14:37

esotanc eredeti hozzászólása

...... A kategóriaoldalak lehet érdemes indexeltetni, a cimke oldalakat általában nem......

Akkor mink rosszul csináltuk, mert nálunk a Use noindex for Tag Archives:-hez nem került pipa, azaz engedélyeztük a cimkék indexelését, mig a kategóriákét tiltottuk?
Így utólag érdemes, illetve szabad ezt felcserélni?

**esotanc** · 2015-04-02, 16:42

Általában fordítva célszerű, de a legtöbb oldal esetében, de ez függ attól hány és milyen típusú oldalatok van. Nézd meg jött e organikus látogató a cimkeoldalakra amit engedélyeztetek. Ha nem, vagy minimális akkor rakhatod noindexre.