Näytä suppeat kuvailutiedot

dc.contributor.advisorÄyrämö, Sami
dc.contributor.advisorPölönen, Ilkka
dc.contributor.authorLindroos, Jari
dc.date.accessioned2022-06-06T10:30:32Z
dc.date.available2022-06-06T10:30:32Z
dc.date.issued2022
dc.identifier.urihttps://jyx.jyu.fi/handle/123456789/81505
dc.description.abstractRintasyöpä on maailmanlaajuisesti naisten yleisin syöpä, sen varhainen havaitseminen voi merkittävästi vähentää siihen liittyvää kuolleisuutta. Histopatologista analyysiä tarvitaan kasvainten laadun määrittämiseksi solutasolla. Histopatologisten kuvien manuaalinen analyysi vie kuitenkin aikaa ja on altis virheille. Syväoppimiseen pohjautuvassa tutkimuksessa on esitetty menetelmiä rintasyövän tunnistamiseen, jotka voivat auttaa patologeja diagnosoimisessa. Konvoluutioneuroverkot ovat pitkään olleet käytetyin menetelmä rintasyövän luokitteluun syväoppimisessa, mutta ne ovat enimmäkseen rajoittuneet keskittymään kuvien paikallisiin ominaisuuksiin. Vision Transformer on osoittautunut suoriutumaan konvoluutioneuroverkkoja paremmin useissa kuvanluokittelutehtävissä, koska se pystyy keskittymään kuvien pitkän matkan riippuvuuksiin. Tämän tutkielman tavoitteena on arvioida Vision Transformer -pohjaisten mallien suorituskykyä vertaamalla niitä yleisesti käytettyyn konvoluutioneuroverkkoon ResNet-50, kokeilut suoritetaan PCam-aineistolla. Mallien koulutuksessa hyödynnämme sekä perinteistä siirto-oppimiseen perustuvaa lähestymistapaa että myös toimialuekohtaiseen esikoulutukseen perustuvaa lähestymistapaa. Osoitamme, että implementoiduilla Vision Transformer -malleilla saadaan parempia tuloksia kuin ResNet-50 -mallilla. Parhaalla mallilla B/16 saavutettiin paras AUC-tulos arvolla 0.97315. Toimialuekohtaisen esikoulutuksen käyttö parantaa suorituskykyä kaikissa malleissa paitsi Ti/16 malleissa.fi
dc.description.abstractBreast cancer is the most common cancer worldwide in females apart from non-melanoma skin cancer. Detecting breast cancer as early as possible could significantly reduce its death rates. Histopathological analysis of the breast tissues is needed for determining the malignancy of the tumor on a cellular level. Manual analysis of histopathological images is time consuming and sensitive to human errors. Deep learning has introduced methods for recognizing breast cancer to assist pathologists in their diagnostic workflow. The convolutional neural networks have for long been the bandwagon deep learning model for breast cancer classification, but they are mostly limited at focusing on local variations in image patterns. The Vision Transformer, which originated from the dominant Transformer architecture in natural language processing has shown to outperform convolutional neural networks on several image classification benchmarks, due to its ability to focus on long range dependencies in images. In this thesis we aim to evaluate the performance of Vision Transformer based models by comparing them to the commonly used convolutional neural network ResNet-50 on the PCam-dataset. For training we utilize both the conventional transfer learning based approach and also an pre-training approach based on domain adaptation. We demonstrate the effectiveness of the implemented Vision Transformer models in the medical domain, by obtaining better results than the ResNet-50 on the PCam-dataset, with the best model B/16 achieving the best AUC score of 0.97315. The use of domain-based pre-training shows a performance gain for every model except the Ti/16-family models.en
dc.format.extent54
dc.format.mimetypeapplication/pdf
dc.language.isoen
dc.subject.otherimage classification
dc.subject.othervision transformer
dc.subject.othertransformer
dc.subject.otherconvolutional neural network
dc.titleTransformers for breast cancer classification
dc.identifier.urnURN:NBN:fi:jyu-202206063122
dc.type.ontasotPro gradu -tutkielmafi
dc.type.ontasotMaster’s thesisen
dc.contributor.tiedekuntaInformaatioteknologian tiedekuntafi
dc.contributor.tiedekuntaFaculty of Information Technologyen
dc.contributor.laitosInformaatioteknologiafi
dc.contributor.laitosInformation Technologyen
dc.contributor.yliopistoJyväskylän yliopistofi
dc.contributor.yliopistoUniversity of Jyväskyläen
dc.contributor.oppiaineTietotekniikkafi
dc.contributor.oppiaineMathematical Information Technologyen
dc.rights.copyrightJulkaisu on tekijänoikeussäännösten alainen. Teosta voi lukea ja tulostaa henkilökohtaista käyttöä varten. Käyttö kaupallisiin tarkoituksiin on kielletty.fi
dc.rights.copyrightThis publication is copyrighted. You may download, display and print it for Your own personal use. Commercial use is prohibited.en
dc.type.publicationmasterThesis
dc.contributor.oppiainekoodi602
dc.subject.ysosyväoppiminen
dc.subject.ysorintasyöpä
dc.subject.ysosyöpätaudit
dc.subject.ysoneuroverkot
dc.subject.ysokonenäkö
dc.subject.ysodeep learning
dc.subject.ysobreast cancer
dc.subject.ysocancerous diseases
dc.subject.ysoneural networks (information technology)
dc.subject.ysocomputer vision
dc.format.contentfulltext
dc.type.okmG2


Aineistoon kuuluvat tiedostot

Thumbnail

Aineisto kuuluu seuraaviin kokoelmiin

Näytä suppeat kuvailutiedot