Hakurobotti ja robots.txt-tiedosto
2023:69 | 2024:110 | 2025:7
Tutkielmassani esitellään kuinka hakurobotti toimii ja mitkä ovat sen keskeisiä käyttötarkoituksia. Lisäksi tutkitaan hakurobottien toiminnan sääntelemiseen kehitettyä tämänhetkistä de facto-standardia: Robots Exclusion -protokollaa, sekä mitä haasteita hakurobottien epäeettisestä toiminnasta voi koitua sekä yksilöille että yhteiskunnalle. In my thesis we focus on the Web Crawler, how does it work and for what purposes are they used for. Additionally the de facto standard in the industry, the Robots Exclusion Protocol is presented. We also discuss what challenges does Web Crawler present to both individuals and for the society as whole.
Asiasanat
Metadata
Näytä kaikki kuvailutiedotKokoelmat
- Kandidaatintutkielmat [5407]
Lisenssi
Samankaltainen aineisto
Näytetään aineistoja, joilla on samankaltainen nimeke tai asiasanat.
-
Principles of social media monitoring and analysis software
Semenov, Alexander (University of Jyväskylä, 2013) -
Interacting with intelligent agents : key issues in agent-based decision support system design
Liu, Shenghua (University of Jyväskylä, 2010) -
CitySearcher: A City Search Engine For Interests
Maksoud, Mohamed Abdel; Pandey, Gaurav; Wang, Shuaiqiang (ACM, 2017)We introduce CitySearcher, a vertical search engine that searches for cities when queried for an interest. Generally in search engines, utilization of semantics between words is favorable for performance improvement. Even ... -
Ulkoisen linkityksen vaikutus verkkotunnuksen hakukonesijoitukseen Googlessa
Ranta, Niilo (2021)Ulkoinen linkitys on ulkoisen hakukoneoptimoinnin osa-alue, jolla on vaikutusta verkkotunnuksen menestykseen Googlen hakutuloksissa. Hakukoneoptimointi eli SEO jaetaan tyypillisesti sisäiseen ja ulkoiseen optimointiin, ... -
Suosittelujärjestelmien vaikutus median kulutukseen ja mielipiteen muodostumiseen
Böger, Niiles (2019)Tassa tutkielmassa selvitetaan sita, miten hakukoneiden, sosiaalisen median ja muiden medioiden suosittelujarjestelmat vaikuttavat median kulutukseen ja mielipiteen muodostumiseen. Tutkielma toteutetaan kirjallisuuskatsauksena, ...
Ellei toisin mainittu, julkisesti saatavilla olevia JYX-metatietoja (poislukien tiivistelmät) saa vapaasti uudelleenkäyttää CC0-lisenssillä.