12 KiB
Objectdetectie
De beeldclassificatiemodellen die we tot nu toe hebben behandeld, namen een afbeelding en produceerden een categorisch resultaat, zoals de klasse 'nummer' in een MNIST-probleem. Echter, in veel gevallen willen we niet alleen weten dat een afbeelding objecten toont - we willen ook hun exacte locatie kunnen bepalen. Dit is precies het doel van objectdetectie.
Pre-lecture quiz
Afbeelding van YOLO v2 website
Een naïeve benadering van objectdetectie
Stel dat we een kat op een afbeelding willen vinden, een zeer eenvoudige benadering van objectdetectie zou als volgt zijn:
- Verdeel de afbeelding in een aantal tegels.
- Voer beeldclassificatie uit op elke tegel.
- De tegels die resulteren in voldoende hoge activatie kunnen worden beschouwd als tegels die het betreffende object bevatten.
Afbeelding uit Exercise Notebook
Deze aanpak is echter verre van ideaal, omdat het algoritme alleen in staat is om de begrenzingskaders van het object zeer onnauwkeurig te lokaliseren. Voor een nauwkeurigere locatie moeten we een vorm van regressie uitvoeren om de coördinaten van begrenzingskaders te voorspellen - en daarvoor hebben we specifieke datasets nodig.
Regressie voor objectdetectie
Deze blogpost biedt een uitstekende introductie tot het detecteren van vormen.
Datasets voor objectdetectie
Je kunt de volgende datasets tegenkomen voor deze taak:
- PASCAL VOC - 20 klassen
- COCO - Common Objects in Context. 80 klassen, begrenzingskaders en segmentatiemaskers
Objectdetectie-metrics
Intersection over Union
Bij beeldclassificatie is het eenvoudig om te meten hoe goed het algoritme presteert, maar bij objectdetectie moeten we zowel de juistheid van de klasse als de precisie van de voorspelde locatie van het begrenzingskader meten. Voor dat laatste gebruiken we de zogenaamde Intersection over Union (IoU), die meet hoe goed twee kaders (of twee willekeurige gebieden) overlappen.
Figuur 2 uit deze uitstekende blogpost over IoU
Het idee is simpel - we delen het overlappingsgebied tussen twee figuren door het gebied van hun unie. Voor twee identieke gebieden zou IoU 1 zijn, terwijl voor volledig gescheiden gebieden het 0 zal zijn. Anders varieert het van 0 tot 1. We beschouwen doorgaans alleen die begrenzingskaders waarvoor IoU boven een bepaalde waarde ligt.
Gemiddelde precisie
Stel dat we willen meten hoe goed een bepaalde klasse van objecten C wordt herkend. Om dit te meten gebruiken we de Gemiddelde Precisie-metrics, die als volgt wordt berekend:
- Beschouw de Precision-Recall-curve die de nauwkeurigheid toont afhankelijk van een detectiedrempelwaarde (van 0 tot 1).
- Afhankelijk van de drempelwaarde zullen er meer of minder objecten in de afbeelding worden gedetecteerd, en verschillende waarden van precisie en recall.
- De curve zal er als volgt uitzien:
Afbeelding van NeuroWorkshop
De gemiddelde precisie voor een bepaalde klasse C is het gebied onder deze curve. Meer precies wordt de Recall-as doorgaans verdeeld in 10 delen, en wordt de precisie gemiddeld over al deze punten:
AP = {1\over11}\sum_{i=0}^{10}\mbox{Precision}(\mbox{Recall}={i\over10})
AP en IoU
We beschouwen alleen die detecties waarvoor IoU boven een bepaalde waarde ligt. Bijvoorbeeld, in de PASCAL VOC-dataset wordt doorgaans \mbox{IoU Threshold} = 0.5 aangenomen, terwijl in COCO AP wordt gemeten voor verschillende waarden van \mbox{IoU Threshold}.
Afbeelding van NeuroWorkshop
Gemiddelde gemiddelde precisie - mAP
De belangrijkste metric voor objectdetectie wordt Gemiddelde Gemiddelde Precisie, of mAP, genoemd. Dit is de waarde van de gemiddelde precisie, gemiddeld over alle objectklassen, en soms ook over \mbox{IoU Threshold}. Het proces van het berekenen van mAP wordt in meer detail beschreven
in deze blogpost), en ook hier met codevoorbeelden.
Verschillende benaderingen van objectdetectie
Er zijn twee brede klassen van objectdetectie-algoritmen:
- Region Proposal Networks (R-CNN, Fast R-CNN, Faster R-CNN). Het belangrijkste idee is om Regions of Interests (ROI) te genereren en CNN eroverheen te laten lopen, op zoek naar maximale activatie. Het lijkt een beetje op de naïeve benadering, met als uitzondering dat ROI's op een slimmere manier worden gegenereerd. Een van de grootste nadelen van dergelijke methoden is dat ze traag zijn, omdat we veel passes van de CNN-classificator over de afbeelding nodig hebben.
- One-pass (YOLO, SSD, RetinaNet) methoden. In deze architecturen ontwerpen we het netwerk om zowel klassen als ROI's in één keer te voorspellen.
R-CNN: Region-Based CNN
R-CNN gebruikt Selective Search om een hiërarchische structuur van ROI-regio's te genereren, die vervolgens door CNN-feature extractors en SVM-classificators worden geleid om de objectklasse te bepalen, en lineaire regressie om de coördinaten van begrenzingskaders te bepalen. Officiële paper
Afbeelding van van de Sande et al. ICCV’11
Afbeeldingen uit deze blog
F-RCNN - Fast R-CNN
Deze aanpak lijkt op R-CNN, maar regio's worden gedefinieerd nadat convolutielagen zijn toegepast.
Afbeelding uit de officiële paper, arXiv, 2015
Faster R-CNN
Het belangrijkste idee van deze aanpak is om een neuraal netwerk te gebruiken om ROI's te voorspellen - de zogenaamde Region Proposal Network. Paper, 2016
Afbeelding uit de officiële paper
R-FCN: Region-Based Fully Convolutional Network
Dit algoritme is zelfs sneller dan Faster R-CNN. Het belangrijkste idee is als volgt:
- We extraheren features met behulp van ResNet-101.
- Features worden verwerkt door Position-Sensitive Score Map. Elk object uit
Cklassen wordt verdeeld ink\times kregio's, en we trainen om delen van objecten te voorspellen. - Voor elk deel uit
k\times kregio's stemmen alle netwerken op objectklassen, en de objectklasse met de meeste stemmen wordt geselecteerd.
Afbeelding uit officiële paper
YOLO - You Only Look Once
YOLO is een realtime één-pass algoritme. Het belangrijkste idee is als volgt:
- De afbeelding wordt verdeeld in
S\times Sregio's. - Voor elke regio voorspelt CNN
nmogelijke objecten, begrenzingskader-coördinaten en confidence=probability * IoU.
Afbeelding uit officiële paper
Andere algoritmen
- RetinaNet: officiële paper
- SSD (Single Shot Detector): officiële paper
✍️ Oefeningen: Objectdetectie
Ga verder met leren in het volgende notebook:
Conclusie
In deze les heb je een snelle rondleiding gekregen langs de verschillende manieren waarop objectdetectie kan worden uitgevoerd!
🚀 Uitdaging
Lees deze artikelen en notebooks over YOLO en probeer ze zelf uit:
- Goede blogpost die YOLO beschrijft
- Officiële site
- Yolo: Keras implementatie, stap-voor-stap notebook
- Yolo v2: Keras implementatie, stap-voor-stap notebook
Post-lecture quiz
Review & Zelfstudie
- Objectdetectie door Nikhil Sardana
- Een goede vergelijking van objectdetectie-algoritmen
- Review van Deep Learning-algoritmen voor objectdetectie
- Een stapsgewijze introductie tot de basisobjectdetectie-algoritmen
- Implementatie van Faster R-CNN in Python voor objectdetectie
Opdracht: Objectdetectie
Disclaimer:
Dit document is vertaald met behulp van de AI-vertalingsservice Co-op Translator. Hoewel we streven naar nauwkeurigheid, dient u zich ervan bewust te zijn dat geautomatiseerde vertalingen fouten of onnauwkeurigheden kunnen bevatten. Het originele document in zijn oorspronkelijke taal moet worden beschouwd als de gezaghebbende bron. Voor cruciale informatie wordt professionele menselijke vertaling aanbevolen. Wij zijn niet aansprakelijk voor misverstanden of verkeerde interpretaties die voortvloeien uit het gebruik van deze vertaling.









