diplomsko delo
Boštjan Ferlič (Avtor), Milan Ojsteršek (Mentor)

Povzetek

Spletni pajki so programi za prenos spletnih strani iz interneta, njihovo obdelavo in shranjevanje. V teoretičnem delu diplomske naloge je opisano splošno delovanje spletnih pajkov in problemi, s katerimi se srečujemo pri njihovi implementaciji. Opisano je tudi delovanje spletnih pajkov dveh najbolj razširjenih spletnih iskalnikov ter trije odprtokodni spletni pajki. V praktičnem delu diplomskega dela smo implementirali porazdeljen spletni pajek v dveh ločenih aplikacijah. Ena aplikacija je grafični vmesnik za urejanje vseh nastavitev, druga pa konzolna aplikacija, ki prenaša strani in jih shranjuje v podatkovno bazo.

Ključne besede

spletni pajki;porazdeljeni računalniški sistemi;detekcija podobnih vsebin;diplomske naloge;

Podatki

Jezik: Slovenski jezik
Leto izida:
Tipologija: 2.11 - Diplomsko delo
Organizacija: UM FERI - Fakulteta za elektrotehniko, računalništvo in informatiko
Založnik: B. Ferlič
UDK: 004.774.6(043.2)
COBISS: 20193046 Povezava se bo odprla v novem oknu
Št. ogledov: 1033
Št. prenosov: 76
Ocena: 0 (0 glasov)
Metapodatki: JSON JSON-RDF JSON-LD TURTLE N-TRIPLES XML RDFA MICRODATA DC-XML DC-RDF RDF

Ostali podatki

Sekundarni jezik: Angleški jezik
Sekundarni naslov: WEB SPIDER IMPLEMENTATION FOR PLAGIARISM DETECTION SOFTWARE
Sekundarni povzetek: Web crawlers are applications for transferring, processing and storing web sites from the internet. Theoretical part of the thesis describes the general operation of web crawlers and the problems we are facing during their implementation. In this part, the operation of web crawlers of the two most used web search engines and three open source web crawlers, are also described. In practical part of the thesis, we have implemented a distributed web crawler in two separate applications. One application is a graphical user interface for configuration, and the other is a console application, that downloads web sites and stores them into database.
Sekundarne ključne besede: web crawler;distributed computer system;detection software;
URN: URN:SI:UM:
Vrsta dela (COBISS): Diplomsko delo
Komentar na gradivo: Univ. v Mariboru, Fak. za elektrotehniko, računalništvo in informatiko, Računalništvo in informatika
Strani: VII, 42 f.
ID: 9164814