Darts_Project

Tuan Dart

Keterangan

Proyek ini adalah bagian dari kursus VR/AR di universitas saya TU Darmstadt. Tujuan dari Proyek ini adalah untuk membuat aplikasi pencetak gol panah otomatis, di mana dua pemain dapat memainkan permainan panah tanpa fokus pada penghitungan poin. Aplikasi ini menggunakan OpenCV untuk bagian computer vision dan Pyside2 untuk GUI.
Kami menggunakan webcam yang dikalibrasi untuk menangkap aliran video dan memprosesnya dengan OpenCV untuk mengekstrak anak panah di papan dan melacak para pemain.

Video Demo

Bagaimana cara kerjanya

Pipa deteksi lengkap terlihat seperti ini:

• Deteksi dulu marker aruco
• mendeteksi papan panah dengan detektor lingkaran
• memasang sistem koordinat kutub ke papan panah

• ambil gambar referensi
• beberapa filter untuk menghilangkan noise dan meningkatkan deteksi
• menghitung perbedaan gambar antara gambar referensi dan gambar saat ini
• deteksi kontur pada gambar perbedaan
• kontur > filter area minimum

• paskan segitiga ke kontur
• temukan ujung anak panah dengan menggunakan sudut yang berlawanan dengan sisi terpendek
• perbaiki posisi ujung dengan memindahkannya ke tengah segitiga sesuai dengan ukurannya

• mendapatkan posisi ujung relatif terhadap sistem koordinat kutub
• Evaluasi skor dengan DartScorer()

Keseluruhan alur dirangkum dalam diagram alur berikut (saat ini hanya dalam bahasa Jerman):

Pengaturan

Perangkat keras

Anda akan membutuhkan:

• kamera web
• sesuatu untuk memasang webcam
• sebuah komputer
• sebuah papan dart
• 4 penanda aruco yang dapat ditemukan di Resources/Doku/

Tempatkan Spidol di sekitar papan dart seperti pada gambar di bawah dan pastikan mereka terlihat. Letakkan webcam di depan papan dart dengan jarak kurang lebih 1 meter dan agak ke kanan agar tidak mengganggu proses pelemparan anak panah.

Penting: Anda memerlukan pencahayaan yang baik untuk mendapatkan hasil yang baik. Hanya Pencahayaan langsung dari atas papan dart yang buruk. Optimalnya adalah ring light dengan diffuser seperti ini:

Kami mengalami beberapa masalah dengan guncangan pada papan yang menyebabkan kebisingan dalam pendeteksian. Kami memecahkan masalah ini dengan cetakan 3D untuk papan:

Perangkat lunak

Cukup kloning repositori dan jalankan perintah berikut:

pip install -r requirements.txt

Pertama, Anda perlu mengkalibrasi kamera. Ini dapat dilakukan dengan Skrip Kalibrasi. Kemudian Anda dapat memulai main_with_gui.py. GUI-nya terlihat seperti ini:

Instruksi Singkat

• Pertama pilih Poin awal Anda (501, 301 atau 101) untuk permainan dart Anda.
• Kemudian atur gambar default dengan tombol "Set Default".
• Setelah itu Anda dapat memulai pendeteksian dengan "Start"
• Jika anak panah terdeteksi dengan buruk, Anda dapat menyesuaikan ambang batas dengan penggeser.