Pretraživanje i kopanje podataka na netu

[Аристократа]

Zanima me kako bih mogao brže i lakše da iskopam podatke sa interneta, a da to nije klasično pretraživanje na guglu. Pitanje je vezano za moj posao, pošto se susrećem sa tim problemom da za iste kategorije moram da pretražujem više slučajeva. Npr. dobijem zadatak da istražim 20 kompanija na internetu i nadjem podatke vezane za njihovo: ime, sajt, email, telefon, posao kojim se bave, usluge koje pružaju, sa koliko klijenata su poslovali i koji su to klijenti, koliki profit ostvaruju itd.

Sad za 20 kompanija ja mogu lako pronaći, medjutim šta kada je u pitanju 200 kompanija ili 500? Kako onda da iskopam te podatke?

- - - - - - - - - -

Ako primećujete, podaci su razbacani po netu. Npr. podatke o tome koliko neka kompanija stiče profit ne možete naći na sajtu te kompanije, nego na drugim mestima.

 

[jolemisa]

Sve sto nadjes od tih podataka o preduzecima,sacuvaj te stranice u Boomarks-u.nadji mesto negde na drugoj particiji i sacuvaj Bookmarks i povremeno kako nalazis podatke o drugim preduzecima,ponovo u bookmarks,pa na particiju,ako ti se desi da nekad moras da deinstaliras Browser,uvek mozes te podatke da Importijes u novi.

 

[Аристократа]

Sve sto nadjes od tih podataka o preduzecima,sacuvaj te stranice u Boomarks-u.nadji mesto negde na drugoj particiji i sacuvaj Bookmarks i povremeno kako nalazis podatke o drugim preduzecima,ponovo u bookmarks,pa na particiju,ako ti se desi da nekad moras da deinstaliras Browser,uvek mozes te podatke da Importijes u novi.

Izgleda da se nisam lepo izjasnio. Ja ne znam koje su to kompanije, ja samo dobijem zadatak tipa ''nadji 200 kompanija koje posluju u EU koje proizvode i prodaju čokoladu''. Dakle ni ja ni onaj ko mi je dao zadatak ne znamo koje su to kompanije, ali to treba da saznamo, treba da ih nadjemo i smestimo u bazu podataka sa svim ovim što sam gore napisao.

 

[jolemisa]

Izgleda da se nisam lepo izjasnio. Ja ne znam koje su to kompanije, ja samo dobijem zadatak tipa ''nadji 200 kompanija koje posluju u EU koje proizvode i prodaju čokoladu''. Dakle ni ja ni onaj ko mi je dao zadatak ne znamo koje su to kompanije, ali to treba da saznamo, treba da ih nadjemo i smestimo u bazu podataka sa svim ovim što sam gore napisao.

Tesko je to da bude precizno,jer koliko god da je precizan naslov koji si napisao,izadju kojekakve gluposti pored toga,tako da je izgleda,googlanje neizbezno.

 

[cvinker]

Zanima me kako bih mogao brže i lakše da iskopam podatke sa interneta, a da to nije klasično pretraživanje na guglu. Pitanje je vezano za moj posao, pošto se susrećem sa tim problemom da za iste kategorije moram da pretražujem više slučajeva. Npr. dobijem zadatak da istražim 20 kompanija na internetu i nadjem podatke vezane za njihovo: ime, sajt, email, telefon, posao kojim se bave, usluge koje pružaju, sa koliko klijenata su poslovali i koji su to klijenti, koliki profit ostvaruju itd.

Sad za 20 kompanija ja mogu lako pronaći, medjutim šta kada je u pitanju 200 kompanija ili 500? Kako onda da iskopam te podatke?

- - - - - - - - - -

Ako primećujete, podaci su razbacani po netu. Npr. podatke o tome koliko neka kompanija stiče profit ne možete naći na sajtu te kompanije, nego na drugim mestima.

Zavisi šta radite sa tim podatcima, ja sam pre nekih desetak godina radio na projektu kojem nekoliko hiljada preduzeća trebalo da se uvedu....
Podatke smo dobili od državne institucije, kao što sam naveo zavisi zašto se koriste, mi smo ih ubedili da koristimo za svrhu tih preduzeća.