XR·AI·Accessibility… 애플 학생 개발자 쇼케이스 현장, 놀라운 앱들 | Vision Pro·경찰 수사·접근성 혁신 앱 총정리 | 애플 디벨로퍼 아카데미 5기 모집중

비전 프로로 수술실을 바꾼 히포 앱

삼성서울병원과 협업한 히포 팀은 2억 원짜리 수술실 모니터를 Vision Pro 하나로 대체하는 걸 목표로 했습니다. 기존에는 집도의가 멸균 장갑을 낀 채로 모니터 화면을 일일이 조작해야 했는데, 이제는 눈과 음성만으로 3D 장기 모델을 돌리고 확대할 수 있게 됐어요. 실제 시연에서는 “이쪽으로 돌려줘”라는 음성 명령 대신, 그냥 시선으로 포인팅하고 손가락 제스처로 회전시키는 방식이라 수술 흐름이 끊기지 않았습니다.

현업에서 비슷한 걸 만들 때 가장 중요한 건 레이턴시예요. 내시경 영상을 무선으로 스트리밍해서 Vision Pro에 띄우는 과정에서 100ms 이상 지연이 생기면 집도의가 불편해하더라고요. 히포 팀은 MacBook에서 영상을 한 번 처리한 뒤 압축해서 보내는 구조로 이 문제를 해결했는데, 이 부분은 실제 의료 기기 인증을 받을 때도 핵심 포인트가 될 겁니다.

또 하나 주목할 점은 1인칭 시점 녹화 기능입니다. 수술 중 집도의 시야 그대로 저장되기 때문에 나중에 리뷰하거나 후배 교육 자료로 쓰기 딱 좋아요. 기존에는 GoPro 같은 별도 장비를 달아야 했는데, Vision Pro 하나로 이게 다 해결되니까 가성비가 확 올라가죠. 다만 장시간 착용 시 무게감은 아직 개선이 필요한 부분으로 보입니다.

경찰 수사에 지도를 입힌 수사이사 앱

수사이사 팀은 실제 형사님들과 인터뷰하면서 문제를 발견했습니다. 용의자 한 명당 하루 20~28건의 기지국 문자가 오는데, 이걸 엑셀로 정리해서 동선을 파악하는 방식이 너무 비효율적이었어요. 그래서 지도 위에 히트맵을 그리고, 시간대별 체류 시간을 색상으로 표현하는 기능을 넣었습니다.

실제 데모를 보니 새벽 2시~6시 사이 특정 원룸촌에 매일 잡히는 경우, 형사님이 “여기서 잠복하면 되겠네”라고 바로 판단할 수 있더라고요. 주민등록상 주소와 실제 체류지가 다른 것도 한눈에 보이니까 수사 효율이 크게 올라갑니다. CCTV 위치까지 지도에 함께 표시돼서 일일이 발품 팔 필요가 없어진 점도 실무자들에게 좋은 평가를 받았습니다.

개발 관점에서 재미있었던 건 애플의 OCR과 앱 인텐트 기술을 활용한 부분입니다. 보안 문자로 온 기지국 정보를 자동으로 파싱해서 지도 데이터로 변환하니까, 형사님이 직접 입력할 필요가 거의 없어졌어요. 온디바이스에서 처리되기 때문에 개인정보 유출 우려도 적고요. 비슷한 앱을 만들 때 “데이터 입력을 최소화하는 게 진짜 핵심”이라는 걸 다시 한번 느꼈습니다.

일상에서 바로 쓰는 킵·오디오로그 앱

쇼케이스에서 가장 “지금 당장 써보고 싶다”고 느꼈던 건 킵 앱입니다. 기프티콘 유효기간, 스크린샷으로 찍어둔 정보, 공유 받은 링크 등을 자동으로 정리해 주는데, 온디바이스 AI로 처리돼서 카톡 대화 내용이 서버로 안 나갑니다. 스타벅스 근처만 지나가도 “지금 쓰세요”라는 알림이 오는 위치 기반 리마인더도 실제로 써보니 편하더라고요.

오디오로그는 시각 장애인을 위한 360도 공간 메모 앱인데, 사진 대신 소리를 기록합니다. 애플 파운데이션 모델로 대화·환경음·감정을 5단계로 분석해서 자동으로 태그를 달아주고, 자연어로 “파도 소리 나는 바다”라고 검색하면 바로 찾아줍니다. 위젯과 애플워치 퀵 액션으로 사진 찍듯이 빠르게 녹음할 수 있게 만든 점이 특히 좋았습니다.

두 앱 모두 “번거로운 입력을 없애는 것”이 공통점이었어요. 개발할 때도 “사용자가 이걸 왜 써야 하는가”보다 “기존에 하던 걸 얼마나 줄여주는가”에 집중하면 반응이 좋을 것 같습니다.