Web Searcher

Kirjeldus

Web Searcher on veebikraapimise tööriist, mis võimaldab otsida Google'is ja Bingis märksõnu ning hankida veebilehtedelt ja saitidelt erinevaid andmeid. See sisaldab otsingumootoritest linkide ja pealkirjade väljavõtmist, iga lingi positsiooni (järgu) otsimist otsingutulemustes, leitud veebilehtede laadimist ja pealkirjade, märksõnade, meilide ja linkide väljavõtmist, tagasilinkide eraldamist leitud veebilehtedelt teie saitidele, veebi laadimist. lehekülgi ekstraheeritud linkidest ja uute meilide ja linkide väljajätmist, ekstraktitud URL-ide ja pealkirjade filtreerimist, ekstraheeritud URL-ide kärpimist juurteks, dubleerivate linkide vahelejätmist ja väljundfaili jagamist väiksemateks failideks, millel on määratud ridade arv.