| Title: | Automatické stahování smluvních podmínek z webových stránek |
| Other Titles: | Automated scraping of licence agreements from websites |
| Authors: | Bartička, Vojtěch |
| Advisor: | Pražák Ondřej, Ing. |
| Referee: | Přibáň Pavel, Ing. |
| Issue Date: | 2021 |
| Publisher: | Západočeská univerzita v Plzni |
| Document type: | bakalářská práce |
| URI: | http://hdl.handle.net/11025/44238 |
| Keywords: | zpracování přirozeného jazyka;strojové učení;sémantické reprezentace slov;získávání informací;klasifikace textu;neuronové sítě;fasttext |
| Keywords in different language: | natural language processing;machine learning;semantic word representations;information retrieval;text classification;neural networks;fasttext |
| Abstract: | Práce se zabývá automatickým stahováním smluvních podmínek a zásad ochrany údajů z webových stránek. Je součástí většího projektu, který se zabývá analýzou obsahu těchto stránek a potřebuje pro ni trénovací dataset. Cílem je vytvořit aplikaci, která bude schopna tento dataset automaticky vytvořit. Jako základní řešení jsou použita pravidla založená na klíčových slovech. Toto řešení nám umožní získat dataset, pomocí kterého je vytvořena neuronová síť, která dále zlepšuje výsledky. Omezením kapacity sítě a zakrytím klíčových slov pak sítě dosahují zlepšení 6 až 9 % v f-míře, a až 71% snížení falešné pozitivity oproti klasifikaci pomocí klíčových slov. |
| Abstract in different language: | The thesis deals with the automatic scraping of terms and conditions and privacy protection information from web pages. It's a part of a larger project which focuses on the analysis of such pages and requires a dataset to train the system on. The goal is to create an application, which will be able to automatically create this dataset. As a baseline solution, a keyword-based system is used. This system allows us to create a dataset, on which we can train a neural network, which further enhances the results. By limiting the capacity of the network and hiding the keywords the network achieves a 6 to 9% improvement in f-score and up to 71% reduction in false positivity compared to the keywords-based system. |
| Rights: | Plný text práce je přístupný bez omezení. |
| Appears in Collections: | Bakalářské práce / Bachelor´s works (KIV) |
Files in This Item:
| File | Description | Size | Format | |
|---|---|---|---|---|
| prace.pdf | Plný text práce | 641,32 kB | Adobe PDF | View/Open |
| A18B0169P_Posudek.pdf | Posudek oponenta práce | 251,46 kB | Adobe PDF | View/Open |
| A18B0169P_Hodnoceni.pdf | Posudek vedoucího práce | 234,93 kB | Adobe PDF | View/Open |
| A18B0169P_Obhajoba.pdf | Průběh obhajoby práce | 42,61 kB | Adobe PDF | View/Open |
| A18B0169P_zadaniBP.pdf | VŠKP - příloha | 17,42 kB | Adobe PDF | View/Open |
| BP.zip | VŠKP - příloha | 571,81 MB | ZIP | View/Open |
Please use this identifier to cite or link to this item:
http://hdl.handle.net/11025/44238Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.