12 KiB
Objektigenkänning
De bildklassificeringsmodeller vi har arbetat med hittills tog en bild och producerade ett kategoriskt resultat, som klassen 'nummer' i ett MNIST-problem. Men i många fall vill vi inte bara veta att en bild föreställer objekt – vi vill kunna bestämma deras exakta position. Det är precis detta som är syftet med objektigenkänning.
Förquiz före föreläsning
Bild från YOLO v2-webbplats
Ett naivt tillvägagångssätt för objektigenkänning
Anta att vi ville hitta en katt på en bild. Ett mycket naivt tillvägagångssätt för objektigenkänning skulle vara följande:
- Dela upp bilden i ett antal rutor.
- Kör bildklassificering på varje ruta.
- De rutor som ger tillräckligt hög aktivering kan anses innehålla det aktuella objektet.
Bild från övningsanteckningsboken
Detta tillvägagångssätt är dock långt ifrån idealiskt, eftersom det bara tillåter algoritmen att lokalisera objektets begränsningsruta mycket oprecist. För att få en mer exakt position behöver vi köra någon form av regression för att förutsäga koordinaterna för begränsningsrutorna – och för det behöver vi specifika dataset.
Regression för objektigenkänning
Detta blogginlägg ger en bra introduktion till att upptäcka former.
Dataset för objektigenkänning
Du kan stöta på följande dataset för denna uppgift:
- PASCAL VOC – 20 klasser
- COCO – Common Objects in Context. 80 klasser, begränsningsrutor och segmenteringsmasker
Mätvärden för objektigenkänning
Intersection over Union
För bildklassificering är det enkelt att mäta hur väl algoritmen presterar, men för objektigenkänning måste vi mäta både korrektheten av klassen och precisionen i den förutsagda begränsningsrutans position. För det senare använder vi den så kallade Intersection over Union (IoU), som mäter hur väl två rutor (eller två godtyckliga områden) överlappar.
Figur 2 från detta utmärkta blogginlägg om IoU
Idén är enkel – vi delar området för överlappningen mellan två figurer med området för deras union. För två identiska områden skulle IoU vara 1, medan för helt åtskilda områden blir det 0. Annars varierar det mellan 0 och 1. Vi betraktar vanligtvis endast de begränsningsrutor där IoU är över ett visst värde.
Genomsnittlig precision
Anta att vi vill mäta hur väl en viss klass av objekt C känns igen. För att mäta detta använder vi mätvärdet Genomsnittlig precision (Average Precision, AP), som beräknas enligt följande:
- Betrakta Precision-Recall-kurvan som visar noggrannheten beroende på ett detektionströskelvärde (från 0 till 1).
- Beroende på tröskeln kommer vi att få fler eller färre objekt upptäckta i bilden och olika värden för precision och recall.
- Kurvan kommer att se ut så här:
Bild från NeuroWorkshop
Den genomsnittliga precisionen för en given klass C är arean under denna kurva. Mer exakt delas Recall-axeln vanligtvis in i 10 delar, och Precision medelvärdesbildas över alla dessa punkter:
AP = {1\over11}\sum_{i=0}^{10}\mbox{Precision}(\mbox{Recall}={i\over10})
AP och IoU
Vi betraktar endast de detektioner där IoU är över ett visst värde. Till exempel antas vanligtvis \mbox{IoU Threshold} = 0.5 i PASCAL VOC-datasetet, medan AP i COCO mäts för olika värden av \mbox{IoU Threshold}.
Bild från NeuroWorkshop
Medelvärde av genomsnittlig precision – mAP
Det huvudsakliga mätvärdet för objektigenkänning kallas Medelvärde av genomsnittlig precision, eller mAP. Det är värdet av genomsnittlig precision, medelvärdesbildat över alla objektklasser och ibland även över \mbox{IoU Threshold}. Processen för att beräkna mAP beskrivs mer detaljerat
i detta blogginlägg) och även här med kodexempel.
Olika tillvägagångssätt för objektigenkänning
Det finns två breda klasser av algoritmer för objektigenkänning:
- Region Proposal Networks (R-CNN, Fast R-CNN, Faster R-CNN). Huvudidén är att generera Regions of Interest (ROI) och köra CNN över dem för att leta efter maximal aktivering. Det liknar det naiva tillvägagångssättet, med undantaget att ROI genereras på ett mer intelligent sätt. En av de stora nackdelarna med sådana metoder är att de är långsamma, eftersom vi behöver många passeringar av CNN-klassificeraren över bilden.
- En-pass (YOLO, SSD, RetinaNet) metoder. I dessa arkitekturer designar vi nätverket för att förutsäga både klasser och ROI i ett enda pass.
R-CNN: Regionbaserad CNN
R-CNN använder Selective Search för att generera en hierarkisk struktur av ROI-regioner, som sedan skickas genom CNN-funktionsutdragare och SVM-klassificerare för att bestämma objektklassen, och linjär regression för att bestämma begränsningsrutans koordinater. Officiell artikel
Bild från van de Sande et al. ICCV’11
Bilder från denna blogg
F-RCNN – Fast R-CNN
Detta tillvägagångssätt liknar R-CNN, men regioner definieras efter att konvolutionslager har applicerats.
Bild från den officiella artikeln, arXiv, 2015
Faster R-CNN
Huvudidén med detta tillvägagångssätt är att använda ett neuralt nätverk för att förutsäga ROI – så kallat Region Proposal Network. Artikel, 2016
Bild från den officiella artikeln
R-FCN: Regionbaserat fullt konvolutionellt nätverk
Denna algoritm är ännu snabbare än Faster R-CNN. Huvudidén är följande:
- Vi extraherar funktioner med hjälp av ResNet-101.
- Funktionerna bearbetas av Position-Sensitive Score Map. Varje objekt från
Cklasser delas in ik\times kregioner, och vi tränar för att förutsäga delar av objekt. - För varje del från
k\times kregioner röstar alla nätverk för objektklasser, och den objektklass med flest röster väljs.
Bild från officiell artikel
YOLO – You Only Look Once
YOLO är en realtidsalgoritm med ett enda pass. Huvudidén är följande:
- Bilden delas in i
S\times Sregioner. - För varje region förutsäger CNN
nmöjliga objekt, begränsningsrutans koordinater och confidence=sannolikhet * IoU.
Bild från officiell artikel
Andra algoritmer
- RetinaNet: officiell artikel
- SSD (Single Shot Detector): officiell artikel
✍️ Övningar: Objektigenkänning
Fortsätt ditt lärande i följande anteckningsbok:
Slutsats
I denna lektion fick du en snabb genomgång av alla olika sätt som objektigenkänning kan utföras på!
🚀 Utmaning
Läs igenom dessa artiklar och anteckningsböcker om YOLO och prova dem själv:
- Bra blogginlägg som beskriver YOLO
- Officiell webbplats
- Yolo: Keras-implementation, steg-för-steg-anteckningsbok
- Yolo v2: Keras-implementation, steg-för-steg-anteckningsbok
Efterquiz efter föreläsning
Granskning och självstudier
- Objektigenkänning av Nikhil Sardana
- En bra jämförelse av algoritmer för objektigenkänning
- Granskning av djupinlärningsalgoritmer för objektigenkänning
- En steg-för-steg-introduktion till grundläggande algoritmer för objektigenkänning
- Implementation av Faster R-CNN i Python för objektigenkänning
Uppgift: Objektigenkänning
Ansvarsfriskrivning:
Detta dokument har översatts med hjälp av AI-översättningstjänsten Co-op Translator. Även om vi strävar efter noggrannhet, bör det noteras att automatiserade översättningar kan innehålla fel eller brister. Det ursprungliga dokumentet på dess originalspråk bör betraktas som den auktoritativa källan. För kritisk information rekommenderas professionell mänsklig översättning. Vi ansvarar inte för eventuella missförstånd eller feltolkningar som uppstår vid användning av denna översättning.









