Eredmény: 1 - 10 (10) összesen

Téma: Legális(?) adathalászat

  1. #1
    Bölcs
    Csatlakozott
    12-08-31
    Hozzászólás
    1.032
    Begyűjtött 351 köszönetet
    239 hozzászólásával

    Alapbeállítás Legális(?) adathalászat

    Sziasztok,

    A napokban dolgozom egy ebay termékekkel foglalkozó szolgáltatáson.
    A fellelhető php alapú ebay API-k nem túlságosan győztek meg a hatékonyságukról.

    Írtam egy saját adathalász programot, mely számomra a megfelelő módon gyűjti össze a termékeket, azoknak adatait, képeit. Kizárólag a termékek adatait gyűjti össze, eladó/vevő adatokat NEM és NEM is végez interakciót (kommentelés, rendelés, stb...).
    Ezzel nem teszek megkárosítást, viszont nem is az ebay által megadott API-t használom ezeknek az adatoknak az összegyűjtésére.

    Ez mennyire keresztezi a legalitás határait?



  2. #2
    Szerkesztő Koala logója
    Csatlakozott
    14-01-29
    Hozzászólás
    238
    Begyűjtött 97 köszönetet
    85 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Idézet Karessz eredeti hozzászólása Hozzászólás megtekintése
    Sziasztok,

    A napokban dolgozom egy ebay termékekkel foglalkozó szolgáltatáson.
    A fellelhető php alapú ebay API-k nem túlságosan győztek meg a hatékonyságukról.

    Írtam egy saját adathalász programot, mely számomra a megfelelő módon gyűjti össze a termékeket, azoknak adatait, képeit. Kizárólag a termékek adatait gyűjti össze, eladó/vevő adatokat NEM és NEM is végez interakciót (kommentelés, rendelés, stb...).
    Ezzel nem teszek megkárosítást, viszont nem is az ebay által megadott API-t használom ezeknek az adatoknak az összegyűjtésére.

    Ez mennyire keresztezi a legalitás határait?
    Szerintem ennek 0 köze van az adathalászathoz. Amit te csinálsz az scraping nem pedig phishing, és ez nem illegális.



  3. Az alábbi felhasználók hálásak a válaszért:

    Karessz (2017-09-04)

  4. #3
    Bölcs
    Csatlakozott
    07-04-28
    Hozzászólás
    1.115
    Begyűjtött 241 köszönetet
    176 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Erre vannak külön programok, amit gondolom azért nem vettél észre, mert meg tudod írni.



  5. #4
    Bölcs
    Csatlakozott
    12-08-31
    Hozzászólás
    1.032
    Begyűjtött 351 köszönetet
    239 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Milyen programokra gondoltál?
    Találtam kész megoldásokat, de nem feleltek meg nekem. Plusz a sajátomat könnyebben alakítom. Viszont ez nem használja az ebay API-ját, ami egyébként napi 5000 hívásig van limitálva, ami nekem kevés is.



  6. #5
    Bölcs earnnet logója
    Csatlakozott
    12-08-15
    Hely
    Budapest
    Hozzászólás
    1.820
    Begyűjtött 812 köszönetet
    576 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Az az általánosságban elfogadott módi, hogy ha egyértelmű User-Agent-et használsz, és ha szépen megkérnek a robots.txt-ben, hogy hagyd békén az oldalt azzal a User-Agenttel, akkor békén hagyod. Plusz nem küldesz annyi kérést, amivel kinyírod az oldalt. Ezt a kettőt figyelembe véve a scraping egy legális dolog.



  7. Az alábbi felhasználók hálásak a válaszért:

    Karessz (2017-09-05)

  8. #6
    Bölcs
    Csatlakozott
    12-08-31
    Hozzászólás
    1.032
    Begyűjtött 351 köszönetet
    239 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Úgy van megírva, hogy 2-3 másodperces késleltetéssel hívja meg az urleket. Egy feltérképezési ciklusban összesen 20-at, tehát nagyjából 1 percig tart. Igyekeztem úgy megoldani, hogy számomra is használható legyen és mást se terheljek vele túlságosan.



  9. #7
    Mentor hetes logója
    Csatlakozott
    09-04-17
    Hozzászólás
    452
    Begyűjtött 73 köszönetet
    60 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    És mennyire legális az így gyűjtött adatokat felhasználni, elemezni, újraközölni, stb...? Nem feltétlenül a konkrét esetre gondolok, hanem úgy általában.


    Az aláírás nem lehet hosszabb 100 karakternél kivéve a BB kód jelölőt.

  10. #8
    Bölcs earnnet logója
    Csatlakozott
    12-08-15
    Hely
    Budapest
    Hozzászólás
    1.820
    Begyűjtött 812 köszönetet
    576 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Idézet hetes eredeti hozzászólása Hozzászólás megtekintése
    És mennyire legális az így gyűjtött adatokat felhasználni, elemezni, újraközölni, stb...? Nem feltétlenül a konkrét esetre gondolok, hanem úgy általában.
    Ami a normál böngészés során is elérhető információ, azt legálisan fel tudod használni. Ha mondjuk elkezdesz kép ID-ket végigpörgetni, aztán találsz az oldalról amúgy nem elérhető képeket, az már nem éppen legális.

    Elemezni bármit elemezhetsz.

    Minden webes tartalomra teljesen ugyanazok a szerzői jogok vonatkoznak, függetlenül attól hogy scraperrel töltötted le, vagy felmentél és copypaste-tel szeretnél valamit átemelni a saját oldaladra. De nyilván nem azért gyűjtesz adatokat, hogy azt egy az egyben leközöld, hanem akár más adatforrásokkal összegyúrva levonj valami konklúziót, készíts statisztikát, vagy könnyen kezelhető formátumra hozd és azt értékesítsd. A lényeg a hozzáadott érték. Elloptad és továbbadtad, vagy feldolgoztad kellően és olyat raktál hozzá, ami a -nevezzük- konkurenciánál nem volt meg. Ez szubjektív dolog.


    Utoljára módosítva: earnnet által : 2017-09-05 18:48

  11. Az alábbi felhasználók hálásak a válaszért:

    Karessz (2017-09-06)

  12. #9
    Bölcs earnnet logója
    Csatlakozott
    12-08-15
    Hely
    Budapest
    Hozzászólás
    1.820
    Begyűjtött 812 köszönetet
    576 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Hülye vagyok, csak a topiknyitó hsz-en siklott el a szemem. Ez nem scraping - ez sima API használat. 101 százalékig legális. Elvégre azért csinálták az API-t hogy használd. (És ne scrapelj helyette).



  13. #10
    Bölcs
    Csatlakozott
    12-08-31
    Hozzászólás
    1.032
    Begyűjtött 351 köszönetet
    239 hozzászólásával

    Alapbeállítás re: Legális(?) adathalászat

    Igen, de épp azt mondom, hogy nem API-val szerzem meg az adatlapok információit, mert:
    Az az api használhatatlan arra, amire nekem kell
    Már van működő botom, ami megoldja anélkül
    Annak az api-nak a használata korlátozva van

    Ezért nem azt használom.

    Kizárólag adatlapokat gyűjtök össze, kézzel megadott URL alapján. Kigyűjtöm a termékek alap adatait (név, ár, paraméter -> paraméterenként eltérő árakat, persze forintban, illetve átmentem a képeket a saját szerveremre), ezekből pedig csv exportokat késztek egy szolgáltatásomhoz. A szolgáltatást pedig számlával értékesítem.


    Utoljára módosítva: Karessz által : 2017-09-06 09:23

Könyvjelzők

Hozzászólás szabályai

  • Új témákat nem hozhatsz létre
  • Válaszokat nem küldhetsz
  • Fájlokat nem csatolhatsz
  • A hozzászólásaidat nem módosíthatod
  •