Liigu sisu juurde

Veebiandmete kogumine ja eksport Excel-tabelisse

Lühidalt

Kogun Pythoni abil veebisaitidelt avalikult kättesaadavaid andmeid, puhastan need ja muudan korrastatud Excel- või CSV-tabeliteks. Ettevõtetele, teadlastele ja e-kaupmeestele, kes vajavad toodete ja hindade jälgimist, turu-uuringut või kuulutuste ja ettevõtete nimekirju, annan üle kasutusvalmis andmefaili ning soovi korral skripti, mida saate uuesti käivitada.

Kirjutage mulle Telegramis(avaneb uuel vahelehel)
Alates
35 €
Tähtaeg
2 päeva
Parandusringid
2 parandusringi

  • Python
  • Excel

Mida saate

Mida see teenus sisaldab?

  • Andmete kogumine

    Kogub toote-, hinna-, kuulutuste-, arvustuste- ja ettevõtteandmed lehekülg lehekülje järel ilma lünkadeta.

  • Korrastatud Exceli väljund

    Selgete päistega, filtreeritavad ja duplikaatideta Excel-, CSV- või Google Sheetsi tabelid.

  • Puhastamine ja kontroll

    Hinnad, kuupäevad ja telefoninumbrid viiakse ühtsele kujule ning puudulikud kirjed märgitakse.

  • Dünaamilised veebisaidid

    Andmeid saab koguda ka saitidelt, mis laadivad sisu JavaScriptiga, lõputu kerimise või lehekülgedeks jaotamisega.

  • Regulaarne uuendamine

    Hindade ja laoseisu jälgimiseks uuendatakse andmeid automaatselt iga päev või iga nädal.

  • Reegleid austav kogumine

    Töötab saiti koormamata tempos, kasutab ainult avalikke andmeid ja arvestab saidi kasutustingimustega.

Tööprotsess

Kuidas me samm-sammult edasi liigume

Teate alati, mis toimub – ilma üllatusteta, iganädalase edenemisega.

  1. 01

    Allikad ja väljad

    Lepime koos kokku, millistelt saitidelt, milliseid andmeid ja millise veerustruktuuriga vajate.

  2. 02

    Teostatavuse kontroll

    Uurin saidi ülesehitust, kasutustingimusi ja seda, kas sellel on ametlik API.

  3. 03

    Näidisandmed

    Kõigepealt jagan mõnesajarealist näidist; kui olete vormingu kinnitanud, kogume kõik andmed.

  4. 04

    Kogumine ja puhastamine

    Kõik andmed kogutakse, duplikaadid eemaldatakse ja väljad korrastatakse.

  5. 05

    Üleandmine

    Saate Excel/CSV-faili ning paketist olenevalt korduvkasutatava skripti koos kasutusjuhendiga.

Tehnoloogiad

Tööriistad, mida kasutan

  • Python
  • Excel

Paketid

Valige sobiv pakett

Hinnad on alghinnad; kui teie projekt on selge, saadan teile personaalse pakkumise.

Hinnad on määratud Türgi liirides; kuvatud summa on ligikaudne ja põhineb päevakursil.

KKK

Küsimused selle teenuse kohta

Ei leidnud vastust? Kirjutage mulle lihtsalt Telegramis.

Avalike andmete kogumine mõistlikus mahus on sageli võimalik, kuid järgida tuleb saidi kasutustingimusi, autoriõigust ja isikuandmete kaitse nõudeid, näiteks isikuandmete kaitse üldmäärust (IKÜM). Ma ei kogu sisselogimist nõudvaid andmeid, isikuandmeid ega andmeid, mille kogumise sait selgesõnaliselt keelab; kahtluse korral soovitan pidada nõu juristiga.

Enamikult avalikelt lehtedelt, näiteks e-poodide, kuulutusportaalide, kataloogide ja ettevõtete veebisaitidelt. Kui saidil on tugev robotikaitse või selle tingimused keelavad andmete kogumise selgesõnaliselt, pakun esmalt välja ametliku API või alternatiivse allika.

Mõni tuhat kirjet ühelt saidilt valmib tavaliselt 1–2 päevaga. Suurte või kaitstud saitide puhul selgub ajakava näidisandmete etapis.

Standard- ja Pro-paketiga saate kaasa ka skripti, mille saate ühe käsuga uuesti käivitada. Pro-paketi puhul uuendatakse andmeid automaatselt teie määratud intervalliga.

Veel teenuseid

Teile võib meeldida ka

Alustame
koostööd.

Rääkige mulle oma projektist ja saadan teile samal päeval tegevuskava ja hinnapakkumise.

Kirjutage mulle Telegramis(avaneb uuel vahelehel)
Kirjutage mulle Telegramis ((avaneb uuel vahelehel))