Téma: Foci adatbázis

Sziasztok!

Egy olyan projekthez kellene nekem segítség, amely foci és hamarosan egyéb sportágak friss infóit szedi össze, leginkább a sérültek, eltiltottak, kezdőcsapatok, a közelmúlt eredményei és az abból kinyerhető legfontosabb statisztikák + egyéb hasznos információk. Ugye ezt jelenleg kézzel szedjük össze nagyobb oldalakról és fordítjuk le, de egyre több és több meccsről számolunk be, illetve szeretnénk beszámolni, így ezt már nem bírjuk, szeretnénk könnyíteni a gyűjtési folyamaton. Jelenleg szöveges formátumban közöljük ezt olvasóinkkal, de nem weboldalon, egyéb felületeken.

A lényeg, hogy szeretnénk egy olyan adatbázist, ami tartalmazza a klubok adatait, közelmúltbéli eredményeit, a játékosok legfontosabb jellemzőit, frissüljön, hogy ki mikor tud játszani, mikor sérült le, meddig lesz sérült, stb, kezdő 11-eket, ugye a lejátszott meccsek után a játékos lejátszott meccsei mögötti szám automatikusan nőjön eggyel stb. Persze lehet nem megvalósítható minden, de a lényeg, hogy minél egyszerűbben menjen. A forrás teljesen mindegy lenne, csak pontos és megbízható legyen, lehet black illetve white hat is. Ha egyszerű excel táblázatban oldható meg, vagy valaki csak arra tud megoldást, hogy hogyan lehet egy hasonló manuálisan bevitt adatbázist excelben kezelni, minél egyszerűbben, fél-automatizálva szerkeszteni az is jó, ha javascript, vagy php, weboldal szükséges hozzá akkor az is tökéletes. Tehát teljesen mindegy csak minél több infó álljon rendelkezésemre a saját igényeim szerint, megbízható forrásokból (ezeket ugye ismerem), a gyűjtési módszer lényegtelen csak a végeredmény fontos, hogy minél egyszerűbben kezelhető adatbázisom legyen.

Aki kivitelezné az is írjon legyen szíves, vagy aki látott már hasonlót és van rá ötlete vagy ismer meglévő, akár teljesen más témában, de hasonló elven működő rendszert az is keressen meg. Előre is köszönöm!

Ha lehet kíméljetek a "nagy fába vágtad a fejszéd", "nem tudod mire vállalkoztál", "meg lehet oldani milliókból", stb. hozzászólásoktól, csakis a témához szorosan kötődő, hasznos kommenteket kérek. Köszönöm!

Hello,

Szerintem ezt a munkát ketté lehetne választani, források megtalálása és az adatok összegyűjtésének leprogramozása.

Ha te tudsz megbízható forrásokat, amik már neked beváltak eddig, csak automatizálni szeretnéd az adatgyűjtést, abban tudok esetleg segíteni (web scraping).

Üdv: dubliner

Szia,
szerintem is megoldható erre crawler - scraper írása, gondolom itt a forrás oldalak listája előre ismert, tehát lehet rájuk írni egy specifikus kódot ami feldolgozza

ami kérdésesebb, hogy a kiszedett adatot milyen formában akarod megkapni, pl ha létezik egy weboldal ami ezeket tárolja akkor egyből lehet oda importálni, akár az adatbázisába írni ha az hozzáférhető, vagy oda kell egy REST API ami fogadja

vagy lehet azt is, hogy a crawler kiköp magából egy szövegfájlt, vagy excelt, vagy egy sql insert-ekből álló szövegfájlt

üdv
jobkereso