|
|
||
|---|---|---|
| .. | ||
| lab | ||
| ObjectDetection.ipynb | ||
| README.md | ||
README.md
Pengesanan Objek
Model klasifikasi imej yang telah kita pelajari sebelum ini mengambil imej dan menghasilkan keputusan kategori, seperti kelas 'nombor' dalam masalah MNIST. Walau bagaimanapun, dalam banyak kes, kita bukan sahaja ingin mengetahui bahawa gambar menggambarkan objek - kita juga ingin menentukan lokasi tepat objek tersebut. Inilah tujuan utama pengesanan objek.
Kuiz Pra-Kuliah
Gambar dari laman web YOLO v2
Pendekatan Naif untuk Pengesanan Objek
Jika kita ingin mencari seekor kucing dalam gambar, pendekatan naif untuk pengesanan objek adalah seperti berikut:
- Pecahkan gambar kepada beberapa jubin.
- Jalankan klasifikasi imej pada setiap jubin.
- Jubin yang menghasilkan pengaktifan yang cukup tinggi boleh dianggap mengandungi objek yang dicari.
Gambar dari Exercise Notebook
Namun, pendekatan ini jauh dari ideal kerana ia hanya membolehkan algoritma menentukan kotak sempadan objek dengan sangat tidak tepat. Untuk lokasi yang lebih tepat, kita perlu menjalankan sejenis regresi untuk meramalkan koordinat kotak sempadan - dan untuk itu, kita memerlukan set data khusus.
Regresi untuk Pengesanan Objek
Blog post ini memberikan pengenalan yang baik tentang pengesanan bentuk.
Set Data untuk Pengesanan Objek
Anda mungkin akan menemui set data berikut untuk tugas ini:
- PASCAL VOC - 20 kelas
- COCO - Common Objects in Context. 80 kelas, kotak sempadan dan topeng segmentasi
Metrik Pengesanan Objek
Intersection over Union
Untuk klasifikasi imej, mudah untuk mengukur sejauh mana algoritma berfungsi, tetapi untuk pengesanan objek, kita perlu mengukur ketepatan kelas serta ketepatan lokasi kotak sempadan yang diramalkan. Untuk yang terakhir, kita menggunakan Intersection over Union (IoU), yang mengukur sejauh mana dua kotak (atau dua kawasan sewenang-wenangnya) bertindih.
Rajah 2 dari blog post yang sangat baik tentang IoU
Ideanya mudah - kita membahagikan kawasan persilangan antara dua bentuk dengan kawasan gabungan mereka. Untuk dua kawasan yang sama, IoU akan menjadi 1, manakala untuk kawasan yang tidak bertindih langsung, ia akan menjadi 0. Jika tidak, ia akan berbeza dari 0 hingga 1. Kita biasanya hanya mempertimbangkan kotak sempadan yang mempunyai IoU melebihi nilai tertentu.
Purata Ketepatan (Average Precision)
Misalkan kita ingin mengukur sejauh mana satu kelas objek C dikenali. Untuk mengukurnya, kita menggunakan metrik Purata Ketepatan yang dikira seperti berikut:
- Pertimbangkan lengkung Precision-Recall yang menunjukkan ketepatan bergantung pada nilai ambang pengesanan (dari 0 hingga 1).
- Bergantung pada ambang, kita akan mendapatkan lebih banyak atau lebih sedikit objek yang dikesan dalam imej, dan nilai ketepatan serta ingatan yang berbeza.
- Lengkungnya akan kelihatan seperti ini:
Gambar dari NeuroWorkshop
Purata Ketepatan untuk kelas C tertentu adalah kawasan di bawah lengkung ini. Lebih tepat lagi, paksi Recall biasanya dibahagikan kepada 10 bahagian, dan Ketepatan diambil purata pada semua titik tersebut:
AP = {1\over11}\sum_{i=0}^{10}\mbox{Precision}(\mbox{Recall}={i\over10})
AP dan IoU
Kita hanya akan mempertimbangkan pengesanan yang mempunyai IoU melebihi nilai tertentu. Sebagai contoh, dalam set data PASCAL VOC, biasanya \mbox{IoU Threshold} = 0.5 diandaikan, manakala dalam COCO, AP diukur untuk pelbagai nilai \mbox{IoU Threshold}.
Gambar dari NeuroWorkshop
Purata Ketepatan Mean - mAP
Metrik utama untuk Pengesanan Objek dipanggil Purata Ketepatan Mean, atau mAP. Ia adalah nilai Purata Ketepatan, diambil purata merentasi semua kelas objek, dan kadang-kadang juga merentasi \mbox{IoU Threshold}. Proses pengiraan mAP dijelaskan dengan lebih terperinci
dalam blog post ini), dan juga di sini dengan contoh kod.
Pendekatan Berbeza untuk Pengesanan Objek
Terdapat dua kelas utama algoritma pengesanan objek:
- Region Proposal Networks (R-CNN, Fast R-CNN, Faster R-CNN). Idea utama adalah untuk menjana Regions of Interests (ROI) dan menjalankan CNN ke atasnya, mencari pengaktifan maksimum. Ia agak serupa dengan pendekatan naif, kecuali ROI dijana dengan cara yang lebih bijak. Salah satu kelemahan utama kaedah ini adalah ia perlahan kerana memerlukan banyak laluan pengklasifikasi CNN ke atas imej.
- Satu-laluan (YOLO, SSD, RetinaNet). Dalam seni bina ini, rangkaian direka untuk meramalkan kedua-dua kelas dan ROI dalam satu laluan.
R-CNN: CNN Berasaskan Wilayah
R-CNN menggunakan Selective Search untuk menjana struktur hierarki kawasan ROI, yang kemudian dilalui oleh pengekstrak ciri CNN dan pengklasifikasi SVM untuk menentukan kelas objek, serta regresi linear untuk menentukan koordinat kotak sempadan. Kertas Rasmi
Gambar dari van de Sande et al. ICCV’11
Gambar dari blog ini
F-RCNN - Fast R-CNN
Pendekatan ini serupa dengan R-CNN, tetapi kawasan ditentukan selepas lapisan konvolusi diterapkan.
Gambar dari Kertas Rasmi, arXiv, 2015
Faster R-CNN
Idea utama pendekatan ini adalah menggunakan rangkaian neural untuk meramalkan ROI - yang dipanggil Region Proposal Network. Kertas, 2016
Gambar dari kertas rasmi
R-FCN: Rangkaian Konvolusi Sepenuhnya Berasaskan Wilayah
Algoritma ini lebih pantas daripada Faster R-CNN. Idea utamanya adalah seperti berikut:
- Ekstrak ciri menggunakan ResNet-101.
- Ciri-ciri diproses oleh Position-Sensitive Score Map. Setiap objek dari
Ckelas dibahagikan kepadak\times kkawasan, dan kita melatih untuk meramalkan bahagian objek. - Untuk setiap bahagian dari
k\times kkawasan, semua rangkaian mengundi untuk kelas objek, dan kelas objek dengan undian maksimum dipilih.
Gambar dari kertas rasmi
YOLO - You Only Look Once
YOLO adalah algoritma satu-laluan masa nyata. Idea utamanya adalah seperti berikut:
- Imej dibahagikan kepada
S\times Skawasan. - Untuk setiap kawasan, CNN meramalkan
nobjek yang mungkin, koordinat kotak sempadan dan keyakinan=kebarangkalian * IoU.
Gambar dari kertas rasmi
Algoritma Lain
- RetinaNet: kertas rasmi
- SSD (Single Shot Detector): kertas rasmi
✍️ Latihan: Pengesanan Objek
Teruskan pembelajaran anda dalam notebook berikut:
Kesimpulan
Dalam pelajaran ini, anda telah mengambil lawatan pantas tentang pelbagai cara pengesanan objek dapat dicapai!
🚀 Cabaran
Baca artikel dan notebook ini tentang YOLO dan cuba sendiri:
- Blog post yang baik yang menerangkan YOLO
- Laman rasmi
- Yolo: Implementasi Keras, notebook langkah demi langkah
- Yolo v2: Implementasi Keras, notebook langkah demi langkah
Kuiz Pasca-Kuliah
Ulasan & Kajian Kendiri
- Pengesanan Objek oleh Nikhil Sardana
- Perbandingan yang baik tentang algoritma pengesanan objek
- Ulasan Algoritma Pembelajaran Mendalam untuk Pengesanan Objek
- Pengenalan Langkah demi Langkah kepada Algoritma Pengesanan Objek Asas
- Implementasi Faster R-CNN dalam Python untuk Pengesanan Objek
Tugasan: Pengesanan Objek
Penafian:
Dokumen ini telah diterjemahkan menggunakan perkhidmatan terjemahan AI Co-op Translator. Walaupun kami berusaha untuk memastikan ketepatan, sila ambil maklum bahawa terjemahan automatik mungkin mengandungi kesilapan atau ketidaktepatan. Dokumen asal dalam bahasa asalnya harus dianggap sebagai sumber yang berwibawa. Untuk maklumat penting, terjemahan manusia profesional adalah disyorkan. Kami tidak bertanggungjawab atas sebarang salah faham atau salah tafsir yang timbul daripada penggunaan terjemahan ini.









