|
|
Pokročilý robot na procházení webu
Činčera, Jaroslav ; Jirák, Ota (oponent) ; Trchalík, Roman (vedoucí práce)
Tato diplomová práce se zabývá návrhem a implementací pokročilého robota na procházení webu. Tento robot je uživatelsky konfigurovatelný a slouží k pohybu po webových stránkách dle specifikovaných parametrů. Umí získávat a vyhodnocovat obsah, který je na nich umístěný. Jeho konfigurace probíhá pomocí vytváření projektů, které se skládají z různých typů kroků. Uživatel si tak může vytvořit jednoduché akce jako například stažení stránky, odeslání formuláře apod., nebo může vytvářet komplexnější a rozsáhlejší projekty.
|
|
|
Inkrementální stahování webu pomocí systému Bubing
Ondřej, Karel ; Fajčík, Martin (oponent) ; Škoda, Petr (vedoucí práce)
Tato bakalářská práce se zabývá úpravou systému BUbiNG pro takzvané inkrementální stahování. V práci jsou dále popsány hlavní problémy spojené s inkrementálním stahováním internetu a využití dalších open-source systémů pro inkrementální stahování. Upravený systém podporuje opětovné navštěvování stránek pomocí dvou běžně používaných strategií. První ze strategií opětovně navštěvuje stránku vždy po stejném intervalu. Druhá strategie přizpůsobuje interval mezi návštěvami podle frekvence změn stránky.
|
|
|
Web API Blocking
Frandel, Martin ; Hranický, Radek (oponent) ; Polčák, Libor (vedoucí práce)
The aim of this work is to obtain the web APIs used in the top 1 000 000 pages of the Tranco ranking along with their subpages using the Web API Manager extension, then analyze and categorize the obtained data. Design a mechanism for the JShelter extension supporting blocking of individual web APIs that have been evaluated as tracking or advertising, implement the solution and then test it. In total, 2 973 276 web pages were analyzed. The captured data was aggregated with respect to web API insecurity, analyzed and the results described in the paper, with some API calls being blocked up to 93.33 % of the time. I was able to develop a method for identifying problematic APIs. Using polynomial regression, I found polynomials that describe the blocking behavior towards individual web APIs and their methods. I implemented the blocking functionality in the JShelter extension and successfully tested the solution.
|
|
| |
|
|
Inkrementální stahování webu pomocí systému Bubing
Ondřej, Karel ; Fajčík, Martin (oponent) ; Škoda, Petr (vedoucí práce)
Tato bakalářská práce se zabývá úpravou systému BUbiNG pro takzvané inkrementální stahování. V práci jsou dále popsány hlavní problémy spojené s inkrementálním stahováním internetu a využití dalších open-source systémů pro inkrementální stahování. Upravený systém podporuje opětovné navštěvování stránek pomocí dvou běžně používaných strategií. První ze strategií opětovně navštěvuje stránku vždy po stejném intervalu. Druhá strategie přizpůsobuje interval mezi návštěvami podle frekvence změn stránky.
|
|
|
Pokročilý robot na procházení webu
Činčera, Jaroslav ; Jirák, Ota (oponent) ; Trchalík, Roman (vedoucí práce)
Tato diplomová práce se zabývá návrhem a implementací pokročilého robota na procházení webu. Tento robot je uživatelsky konfigurovatelný a slouží k pohybu po webových stránkách dle specifikovaných parametrů. Umí získávat a vyhodnocovat obsah, který je na nich umístěný. Jeho konfigurace probíhá pomocí vytváření projektů, které se skládají z různých typů kroků. Uživatel si tak může vytvořit jednoduché akce jako například stažení stránky, odeslání formuláře apod., nebo může vytvářet komplexnější a rozsáhlejší projekty.
|
|
|
Hodnocení kvality IT služeb za pomoci analýzy nestrukturovaných dat
Zimmermann, Radim ; Vencovský, Filip (vedoucí práce) ; Karkošková, Soňa (oponent)
Cílem této bakalářské práce je získat a analyzovat nestrukturované data ze webových stránek (http://www.ispreview.co.uk) poskytovatelů internetového připojení ve Velké Británii pomocí analytického programu KNIME Analytics Platform. V prvních 7 kapitolách jsem teoreticky popsal nástroje, které mi umožnili dosažní mého cíle. V praktické části jsem stáhl data pomocí web crawleru a následně jsem je analyzoval indexovaným vyhledáváním klíčových slov a porovnal dva poskytovatele z pohledu zákazníka. Výsledky jsem zobrazil pomocí grafů a popsal je. Přínos mé práce spočívá v podobě feedbacku nebo reportů pro manažery firem.
|
|
|
Monitoring internetu a jeho přínosy pro podnikání nástroji firmy SAS Institute
Moravec, Petr ; Pour, Jan (vedoucí práce) ; Rott, Ondrej (oponent)
Tato diplomová práce se zabývá možnostmi "získávání informací" ze zdroje World Wide Web. V úvodu je popsán teoretický přístup k možnostem sběru dat. Podstatná část je soustředěna na program Web Crawler, jakožto možnost sběru dat z internetu, načež dále navazují alternativní metody sběru dat. Například Google Search API. Následný text je soustředěn na produkty SAS a jejich významům v souvislosti s reportingem a monitoringem internetu. Jako stěžejní je zde uvedena podniková platforma SAS Intelligence platform. V rámci platformy jsou rozepsány konkrétní SAS řešení. SAS Web Crawler a Semantický server je popsán v řešení SAS Content Categorization. Zatímco v prvních dvou třetinách práce je kladen důraz na teorii, třetí a zároveň poslední část práce se věnuje ryze praktickým příkladům. Zde jsou demonstrovány příklady sběru dat z internetu, které jsou uváděny převážně v SASu. Praktická část navazuje na teorii a není možné ji vést jako samostatnou
|
host ::
RSS.