|
|
||
|---|---|---|
| .. | ||
| lab | ||
| README.md | ||
| SemanticSegmentationPytorch.ipynb | ||
| SemanticSegmentationTF.ipynb | ||
README.md
Segmentacija
Prej smo se naučili o zaznavanju objektov, ki nam omogoča lociranje objektov na sliki z napovedovanjem njihovih omejevalnih okvirjev. Vendar pa za nekatere naloge ne potrebujemo le omejevalnih okvirjev, temveč tudi bolj natančno lokalizacijo objektov. Ta naloga se imenuje segmentacija.
Pre-učni kviz
Segmentacijo lahko obravnavamo kot klasifikacijo pikslov, kjer moramo za vsak piksel slike napovedati njegov razred (ozadje je eden od razredov). Obstajata dva glavna algoritma za segmentacijo:
- Semantična segmentacija določa le razred pikslov in ne razlikuje med različnimi objekti istega razreda.
- Segmentacija primerkov razdeli razrede na različne primerke.
Pri segmentaciji primerkov so te ovce različni objekti, medtem ko pri semantični segmentaciji vse ovce predstavljajo en razred.
Slika iz tega blog prispevka
Obstajajo različne nevronske arhitekture za segmentacijo, vendar imajo vse enako strukturo. Na nek način je podobno avtoenkoderju, o katerem ste se že učili, vendar namesto razgradnje izvirne slike naš cilj postane razgradnja maske. Tako ima segmentacijsko omrežje naslednje dele:
- Kodirnik izlušči značilnosti iz vhodne slike.
- Dekodirnik pretvori te značilnosti v sliko maske, ki ima enako velikost in število kanalov, ki ustreza številu razredov.
Slika iz te publikacije
Posebej je treba omeniti funkcijo izgube, ki se uporablja za segmentacijo. Pri uporabi klasičnih avtoenkoderjev moramo izmeriti podobnost med dvema slikama, za kar lahko uporabimo povprečno kvadratno napako (MSE). Pri segmentaciji vsak piksel v ciljni sliki maske predstavlja številko razreda (ena-vroče kodirano vzdolž tretje dimenzije), zato moramo uporabiti funkcije izgube, specifične za klasifikacijo - funkcijo izgube križne entropije, povprečeno čez vse piksle. Če je maska binarna, se uporablja funkcija izgube binarne križne entropije (BCE).
✅ Ena-vroče kodiranje je način kodiranja oznake razreda v vektor dolžine, ki ustreza številu razredov. Oglejte si ta članek o tej tehniki.
Segmentacija v medicinskem slikanju
V tej lekciji bomo videli segmentacijo v praksi, tako da bomo trenirali omrežje za prepoznavanje človeških nevusov (znanih tudi kot znamenja) na medicinskih slikah. Uporabili bomo PH2 podatkovno zbirko dermoskopskih slik kot vir slik. Ta podatkovna zbirka vsebuje 200 slik treh razredov: tipični nevus, atipični nevus in melanom. Vse slike vsebujejo tudi ustrezno masko, ki označuje nevus.
✅ Ta tehnika je še posebej primerna za tovrstno medicinsko slikanje, vendar katere druge aplikacije iz resničnega sveta si lahko zamislite?
Slika iz PH2 podatkovne zbirke
Trenirali bomo model za segmentacijo nevusa iz ozadja.
✍️ Vaje: Semantična segmentacija
Odprite spodnje zvezke, da se naučite več o različnih arhitekturah semantične segmentacije, vadite delo z njimi in jih vidite v praksi.
Po-učni kviz
Zaključek
Segmentacija je zelo močna tehnika za klasifikacijo slik, ki presega omejevalne okvirje in omogoča klasifikacijo na ravni pikslov. To je tehnika, ki se uporablja v medicinskem slikanju in drugih aplikacijah.
🚀 Izziv
Segmentacija telesa je le ena izmed pogostih nalog, ki jih lahko izvedemo s slikami ljudi. Druge pomembne naloge vključujejo zaznavanje skeleta in zaznavanje drže. Preizkusite knjižnico OpenPose, da vidite, kako se lahko uporablja zaznavanje drže.
Pregled in samostojno učenje
Ta članek na Wikipediji ponuja dober pregled različnih aplikacij te tehnike. Naučite se več o poddomenah segmentacije primerkov in panoptične segmentacije na tem področju raziskovanja.
Naloga
V tem laboratoriju poskusite segmentacijo človeškega telesa z uporabo Segmentation Full Body MADS Dataset iz Kaggle.
Omejitev odgovornosti:
Ta dokument je bil preveden z uporabo storitve AI za prevajanje Co-op Translator. Čeprav si prizadevamo za natančnost, vas prosimo, da upoštevate, da lahko avtomatizirani prevodi vsebujejo napake ali netočnosti. Izvirni dokument v njegovem maternem jeziku je treba obravnavati kot avtoritativni vir. Za ključne informacije priporočamo profesionalni človeški prevod. Ne odgovarjamo za morebitne nesporazume ali napačne razlage, ki bi nastale zaradi uporabe tega prevoda.