이번에 소개할 프로젝트는 반려로봇 프로젝트입니다. 반려로봇은 주행기능, 영상인식, 소리인식 등의 기능을 모두 구현하려고 노력했습니다. 이 친구들도 AI 로봇이란느 키워드로 수업을 시작한지 5개월 만에 시작하고, 한 달 정도의 기간동안 완성한 프로젝트입니다.
이름을 가로~라고 지었는데, 가족같은 로봇이라는 이름인것 같아요^^
저 스케치처럼 이쁜 아이를 만들고 싶었겠지만~ 현실은...^^
그래도 나름 열심히 계획을 하고 목표를 만들고 진행했습니다.
음성인식은 주파수영역으로 변환한 후 머신러닝을 사용해서 예측을 하고 있습니다.
일반적인 마이크에서 들어오는 음성을 처리하는거라 전처리에 많은 공을 들인것 같습니다.
마이크와의 거리에 맞춰 또 소리를 내는 사람의 음량의 차이를 반영하기 위한 노력도 했습니다.
또 사람의 얼굴만 인식하도록 하고
얼굴이 인식되면 거기서 다시 손의 제스쳐를 인식하도록 하고 있습니다.
ROS로 구현하기 때문에 ROS 패키지 구성도 직접 수행했습니다.
로봇이 바닥에 붙어 있으니 사람의 다리도 잘 인식하도록 하고
그 다리를 따라가도록 또 학습을 시켰습니다.
손 동작을 몇 개 인식 시켜서 반려로봇이 반응하도록도 했구요
귀여운 표정도 추가했습니다>^^.
https://www.pinklab.art/edu_project
위 링크는 지금가지의 수강생들의 프로젝트입니다. 이 링크를 보시고 핑크랩의 교육컨텐츠에 관심이 있으시면 연락주세요^^
반응형
'Education' 카테고리의 다른 글
2023 ICROS 논문 발표. 무려 5팀. 핑크랩도 살짝 발을 담궜습니다. (0) | 2023.06.27 |
---|---|
[수강생 프로젝트 소개] 리뷰 분석 및 리뷰 가치 평가 (0) | 2023.06.12 |
핑크랩이 진행한 H Mobility 해커톤 대회 이야기 (4) | 2023.05.18 |
[수강생 프로젝트 소개] 자율주행 로봇 SW 개발 - 차선인식, 장애물 회피, SLAM, ROS2 (0) | 2023.04.28 |
[수강생 EDA 프로젝트 소개] 주변 맛집 데이터를 이용해서 슬랙으로 추천하기 (2) | 2023.03.03 |
아트센터 나비에서 예술쪽 분들에게 아두이노 교육을 진행했습니다. (0) | 2023.02.27 |
[수강생 프로젝트 소개] 물건 사진으로 물건값을 계산하는 앱 (0) | 2023.02.13 |