Seminarium specjalnościowe
Mateusz Burniak, 218321
Konspekt
- Temat i prowadzący
- Cel pracy
- Zebrane dane
- Schemat aplikacji
- Harmonogram realizacji
- Podsumowanie
Temat
Komputerowe rozpoznawanie
wybranych elementów języka migowego
na podstawie obrazów
Prowadzący
Prof. dr hab. inż. Marek Kurzyński
Aspekt BADAWCZY
Opracowanie algorytmów ekstrakcji cech z obrazu postury dłoni oraz algorytmów rozpoznawania wybranych
elementów języka migowego. Zaplanowanie badań eksperymentalnych oraz analiza i dyskusja wyników.
Aspekt INŻYNIERSKi
Komputerowa implementacja opracowanych algorytmów w wybranym środowisku eksperymentowania oraz aspekt techniczny badań eksperymentalnych.
Zebrane dane
kaggle: asl alphabet
- 87k zdjęć
- 29 klas
- 200x200 px
kaggle: Sign Language MNIST
- 35k zdjęć
- 24 klasy
- 28x28 px
Hand Keypoint Detection in Single Images using Multiview Bootstrapping
- 17k zdjęć
- różne rozmiary, np. 720x576 px lub 400x300 px
Schemat aplikacji
wydzielenie dłoni
defekty wypukłości
Sieć neuronowa
SIEĆ NEURONOWA
- 3 cechy: R, G, B dla każdego piksela
- 2 klasy: dłoń / nie dłoń
szukanie 21 elementów dłoni
yolo
harmonogram
| Data | Zadanie |
|---|---|
| Do 30.11.18 | opracowanie spisu literatury |
| 01.12.18 - 31.12.18 | zdefiniowanie celu i zakresu pracy |
| 01.01.19 - 22.01.19 | zebranie obrazów testowych i redakcja napisanych rozdziałów |
| 23.01.19 - 28.02.19 | wydzielenie dłoni ze zdjęcia |
| 01.03.19 - 31.03.19 | matematyczne opisanie kszałtu |
| 01.04.19 - 30.04.19 | porównanie algorytmów klasyfikacji |
| 01.05.19 - 31.05.19 | zakończenie tworzenia aplikacji |