김동희 포트폴리오

Arduino UNO Q 헬스 코치 로봇

2026.06 ~ 2026.09 · 개인 (멘토링 프로젝트) · GitHub

카메라로 자세를 보고 운동 횟수를 세고, PTZ 짐벌로 사람을 따라가며, 휴대폰 웹앱으로 결과를 보여 주는 로봇입니다. NPU가 없는 Arduino UNO Q(Qualcomm QRB2210, Cortex-A53 4코어) 한 대에서 이 세 가지를 컨테이너 하나, 프로세스 하나로 돌렸습니다.

짐벌 하우징. 머리에 카메라와 피치 모터, 받침에 요 모터와 UNO Q
3D 프린트 짐벌 하우징
스쿼트, 무릎 각도 100°와 140° 사이
PTZ 추적, 화면 밖으로 나갔다 들어와도 다시 찾음

모두 웹앱 화면을 녹화한 것이고 배속하지 않았습니다.

구조

Arduino UNO Q · 컨테이너 1개 · 프로세스 1개 USB 카메라 프레임 수집 스레드 최신 프레임만 유지 MoveNet Thunder INT8 256×256 · 4스레드 키포인트 17개 관절 각도 · 횟수 세기 히스테리시스 + 유지 시간 PTZ 제어 ST3215 서보 2개 · pyserial 1 Mbaud HTTP 서버 MJPEG · /api · 웹앱
서보는 MCU를 거치지 않고 리눅스가 버스 서보 어댑터로 직접 제어합니다. 운동 종목은 자동 분류하지 않고 웹앱에서 고릅니다.

측정

항목값비고
포즈 추론약 11.4 FPS시청자 없을 때. 추론이 병목
루프 지연약 90 ms프레임 수집부터 인코딩까지 직렬
시청자 1명 / 2명약 10 / 8 FPS전송 스레드가 늘며 경합
CPU 사용률약 83%4코어 모두 최대 클럭
온도51~73 °C스로틀링 전 범위

2026-09-08 재측정에서도 e2e 11.3 FPS(10.5~11.6)로 비슷했습니다. 측정 횟수를 따로 기록하지 않아 "약"을 붙였습니다.

문제와 해결

시청자가 늘면 FPS가 떨어졌다

휴대폰과 PC가 동시에 보면 약 8 FPS까지 내려갔습니다. 파이썬 스레드가 GIL을 두고 경합하는 것과 원격 접속(Tailscale) 암호화 부담이 겹친 것으로 분석했습니다. 이 CPU는 INT8 내적 명령(asimddp)이 없어서, FPS를 크게 올릴 방법은 NPU·DSP 위임뿐이라는 것도 정리해 두었습니다.

보정 중 짐벌이 급회전해 하우징이 부서졌다

서보 영점 오프셋의 부호 비트를 bit11이 아니라 bit15에 넣었고, 토크가 켜진 상태에서 오프셋을 바꾼 것이 겹쳤습니다. LeRobot의 Feetech 레지스터 표와 대조해 원인을 찾았습니다. 부호 비트를 인자로 받게 고치고, 토크가 켜져 있으면 보정 함수가 예외로 멈추도록 했습니다. +100 같은 작은 값으로 먼저 확인하고 늘려 간 덕분에 원인을 빨리 좁힐 수 있었습니다.

푸시업은 2D 포즈로 판정할 수 없었다

푸시업은 팔이 카메라 깊이 방향으로 굽어서 2D 포즈로는 팔꿈치 각도가 뭉개집니다. 정면과 사선에서 판정이 애매하다는 것을 확인하고, 숄더프레스와 레터럴 레이즈로 종목을 바꿨습니다.

한계

사용 기술

Arduino UNO Q (QRB2210), MoveNet Thunder INT8, LiteRT, OpenCV, ST3215 버스 서보, Docker, Tailscale. 포즈 모델은 UNO Q Edge AI Lines에서 실측해 고른 것입니다.