Téma: Screaming Frog használata

Sziasztok!

Tudtok abban segíteni, lehetséges-e a Screaming Frog-gal csak egyes adatokat/elemzéseket lekérni és így elérni, hogy egy 8 órás munkaidőben végigfusson a honlapon?

Létezik erre beállítási lehetőség vagy spider végigmegy mindenen, ha kell, ha nem...?

Köszönöm!

Elővettem újra a Screaming Frog-ot... A fenti kérdésre természetesen igen a válasz, a Configuration - Spider menüpont alatt bizonyos lekérések kikapcsolhatók, illetve a Configuration - Speed alatt korlátozható, másodpercenként hány url-t vizsgáljon, így csökkenthető a terhelés.

Viszont nem jövök rá, hogyan tudok kilistázni fájl típusokat, például .xml vagy .pdf fájlokat. Ezekre lenne szükségem elsősorban.

Használ valaki Screaming Frog-ot és tud ebben segíteni? Köszönöm!

Köszi! Én még csak másodszor kopaszodtam meg, igaz, másodszor próbáltam használni (alap kontroll feladatokon kívül)...

Az alternatív megoldás jó ötlet (lenne), de sajnos így több millió sort kellene betöltenem, ráadásul nagyon sok alkalommal... Mindenesetre most nekiestem a Xenunak.

Tulajdonképpen ha találnék egy megoldást, ami képes kilistázni az url-eket, amelyek tartalmazzák a ".xml" kifejezést, teljes lenne a boldogság. De egyelőre a Screaming Frog prémium csomaggal sem tudom megtenni. Remélem, én vagyok a béna, a szoftver tud ilyet.

esotanc eredeti hozzászólása

Amúgy van egy lenyíló menü (Filter) és ott tudod filetípusok alapján.

Kezdem kicsit kreténnek érezni magam.

A filtert próbáltam (Configuration - Custom - Search), ami ugyen belső HTML-ben keres elméletileg, nem jött be. Az Include URL sem jött be a legegyszerűbb paraméret alapján, nem írtam reguláris kifejezést.

VISZONT lekértem egy ilyet: domain.hu/admin/ (előtte a spider-nél bepipáltam mindent, kivéve a képeket). Kilistázott 14 elemet, de amit keresek, nincs a listában, pedig tudom, hogy valójában van ott egy rakás ilyen fájl: domain.hu/admin/valami.ext

Lehet, hogy egyes fájltípusokat nem jeleníti meg? Az xml-t sem?

Bár a topic kimondottan Screaming Frog kapcsán nyílt, talán megoldás lehet egy másik program ami hasonló jellegű (ha van rá mód váltani, ha megéri). A program a Website Auditor és csatolok egy képet, hogy miért lehetne ez is megoldás ha rendszeresen kell és nagyobb munkáról van szó.

Harder eredeti hozzászólása

Ha nem találja, akkor én még arra tippelnék, hogy az adott xml-re semmilyen hivatkozás nem mutat amin keresztül a SF megtalálná. Az említett 14 elemre bizonyára volt hivatkozás akár a HTML-ben, vagy CSS, JS-ben. Lehet hogy a valami.ext jellegű fájlokra nem volt?

Nagyon köszönöm! Igen, szerintem is ez a probléma, a Spider menü esetében hiába állítom be, hogy mindent nézzen át...

Most a Website Auditor-ral próbálkozom. Sajnos egy nagyobb oldalnak futottam neki este, ahol 100%-ra tudtam, mit keresek, de nem tudtam megvárni, hogy végigmenjen. Ma nekifutok újra.