Octoparse

Apraksts

Octoparse ir bezmaksas klienta puses Windows tīmekļa izkopšanas programmatūra, kas nestrukturētus vai daļēji strukturētus datus no vietnēm pārvērš strukturētās datu kopās, bez nepieciešamības kodēt.

Tas ir ērti lietojams tīmekļa kopēšanas rīks, kas apkopo datus no tīmekļa. Rāpuļprogrammas, kas darbojas programmā Octoparse, nosaka konfigurētie ekstrakcijas noteikumi. Ekstrakcijas noteikums norādītu Octoparse: kura vietne ir jāatver; kur ir dati, kurus plānojat pārmeklēt. nodrošina liela ātruma datu vākšanu, veicot līdz pat 10 vienlaicīgus pavedienus.

Tā kā Octoparse ir Windows lietojumprogramma, tā labi darbojas statiskām un dinamiskām vietnēm, tostarp tām, kuru tīmekļa lapās tiek izmantots Ajax. Pēc jūsu izvēles ir pieejami dažādi eksporta formāti, piemēram, CSV, EXCEL, HTML, TXT un datu bāzes (MySQL, SQL Server un Oracle). Octoparse simulē cilvēka darbību, lai mijiedarbotos ar tīmekļa lapām.

Tā ievērojamās funkcijas, piemēram, veidlapu aizpildīšana, meklēšanas vienuma ievadīšana tekstlodziņā, ievērojami atvieglos tīmekļa datu izgūšanu. Savu ieguves projektu varat palaist vai nu savās iekārtās (lokālā ekstrakcija), vai mākonī (mākoņa ekstrakcija).

Octoparse nodrošina vizuālu darbības rūti, kas ir ļoti lietotājam draudzīga un vienkārša. Octoparse simulē cilvēka tīmekļa pārlūkošanas uzvedību, piemēram, tīmekļa lapas atvēršanu, pieteikšanos kontā, teksta ievadīšanu, norādot un noklikšķinot uz tīmekļa elementa. Vienkārši noklikšķiniet uz informācijas vietnē iebūvētajā pārlūkprogrammā un veiciet izvilkšanu, jūs iegūsit nepieciešamos strukturētos datus.

Tīmekļa vienlaicīga skrāpēšana lielā mērogā, pamatojoties uz sadalīto skaitļošanu, ir visspēcīgākā Octoparse funkcija. Kad esat augšupielādējis konfigurācijas projektu mākonī, varat izvēlēties veikt izvilkšanu vienlaikus, izmantojot daudzus mākoņa serverus. Ja jums īsā laikā jāizkasa 10 000 tīmekļa lapu, vislabāk atbilst mākoņpakalpojumam Octoparse.