| Versioun | 1.0 |
|---|---|
| Editeur | SqrBox |
| Release Datum | 18. Mäe. 2013 |
| Datum derbäi | 18. Mäe. 2013 |
| Os Ufuerderunge | Windows |
| Ufuerderunge | .NET Framework 3.5 |
| Total Downloads | 292 |
| Präis | Free |
Beschreiwung
Et gëtt eng endlos Unzuel u Grënn firwat eng Persoun oder Firma Web Crawler Software benotze wëllt. Dës Zort vu Programm surft de Web op eng designéierte Manéier déi automatiséiert, methodesch oder op eng uerdentlech Manéier kéint sinn. Wann Dir de Begrëff Web Crawler Software nei sidd, hutt Dir vläicht vu Spannen, Bots, Ameen, automateschen Indexen, Roboteren oder Scutters héieren? Si sinn all am Fong d'selwecht!
Den Zweck vun der Web Crawler Software
Wann Dir un Webcrawling Software denkt, da stellt Dir Iech wahrscheinlech déi grouss Numm Sichmotore wéi Google, Bing an Yahoo. Hir Bots krabbelen duerch Websäiten fir Inhalt, Relevanz an Indexéierung ze bestëmmen. Andeems Dir eng Kopie vu besichte Säiten erstellt, kënne se méi séier a méi präzis Sich ubidden. SqrBox wäert Iech soen datt Dir sécher keng Sichmotor braucht fir e Besoin fir Web Crawler Software ze hunn. Dir musst einfach een sinn deen de Besoin huet fir grouss Quantitéiten oder extrem komplizéiert Informatioun ze sammelen.
Zorte vu Web Crawler Software
Wann Dir plangt d'Servicer vun enger professioneller Firma wéi SqrBox ze benotzen, musst Dir Iech net wierklech mat all de komplizéierte Sprooche betreffend Web Crawler Software besuergt sinn. Trotzdem ass et hëllefräich e puer Saachen doriwwer ze verstoen.
Focused Crawling - Den Zweck vun dëser Aart vu Web Crawler Software ass d'Säiten erofzelueden déi schéngen ähnlech Informatioun ze enthalen. Et ginn awer dacks e puer Mängel mat dëser Method assoziéiert an déi tatsächlech Leeschtung vum Crawler an d'Resultat hänkt dovun of wéi räich d'Links op dat spezifescht Thema sinn dat gesicht gëtt. Dës Zort vu Web Crawler Software gëtt dacks als Ausgangspunkt benotzt fir d'Sich no weider Crawlen ze schmuel.
URL Normaliséierung - Web Crawler Software wäert dacks e puer Niveau vun URL Normaliséierung ausféieren, wat hëlleft repetitive Crawling vun der selwechter Quell méi wéi eemol ze reduzéieren.
Beschränken vun Followed Links - A verschiddene Fäll kann d'Web Crawler Software e bestëmmte Webinhalt vermeiden an nëmmen .html Säiten sichen. Fir dëst ze maachen, gëtt d'URL dacks iwwerpréift an da ginn d'Ressourcen nëmme gefrot wann et bestëmmte Charakteren an der URL sinn wéi .html, .asp, .htm, .php, .aspx, .jspx oder .jsp. Web Crawler Software ignoréiert normalerweis Ressourcen mat engem "?" fir Spannfäll ze vermeiden.
