Excavator

Kirjeldus

Diggernaut on pilvepõhine teenus veebi kraapimiseks, andmete eraldamiseks ja muudeks ETL (Extract, Transform, Load) ülesanneteks. Kui olete kaupade edasimüüja ja teie tarnija ei luba teil oma andmeid sobivas vormingus, näiteks excelis või csv-s, hankida, peate andmed nende veebisaidilt käsitsi hankima. Kõik, mida pead tegema, on luua kaevaja, pisike robot, mis suudab teie nimel veebi kraapida ja teie eest veebisaitidelt andmeid välja võtta, need normaliseerida ja andmed pilve salvestada. Kui see on valmis, saate selle alla laadida CSV-, XLS-, JSON-vormingus või isegi alla laadida meie Rest API abil.

Kui teil pole programmeerimisoskusi, saate kaabitsate konfiguratsiooni koostamiseks kasutada tööriista Excavator. Selle lihtne osuta ja klõpsake rakendus, kus saate valida, milliseid andmeid soovite ekstraktida, ja määrata, kuidas soovite neid oma väljundandmete struktuuris lisada. Meie liivakasti veebisaidil on videotunnid, mis selgitavad selle kasutamist.

Kui olete programmeerija või veebiarendaja, saate kaevaja konfiguratsiooni koostamiseks kasutada metakeelt. Nii saate lahendada tõeliselt keerulisi andmete eraldamise ülesandeid. Meil on põhjalik metakeelne dokumentatsioon, mis aitab teil sellega harjuda; Samuti on meie ajaveebis palju postitusi, kus näitame, kuidas saab kasutada erinevaid metakeele funktsioone erinevate reaalsete juhtumite lahendamiseks.