Apple Fitness 운동 스크린샷에서 운동 유형, 시간, Active Calories, 심박수 추출

Finish Screen과 Workout Summary는 거의 동일해 보입니다. 둘 다 동일한 그라데이션 배경, 동일한 링 그래픽, 동일한 글꼴을 사용합니다. Finish Screen에는 "Move 320 / 600 kcal"이 표시되는데, 이는 링 진행 상황입니다. Workout Summary에는 세션별 소모 칼로리인 "Active Calories 185 kcal"이 표시됩니다. Apple 커뮤니티 사용자들은 혼란을 자주 보고합니다: "Apple Watch로 수영 운동을 추적하기 시작했는데... 데이터를 어떻게 전송/내보낼 수 있나요?" 기존 OCR은 어떤 화면이 어떤 화면인지 구분할 수 없습니다.

Active Calories와 Move 링, 같은 단위지만 다른 의미. 두 값 모두 킬로칼로리로 표시됩니다. 하나는 운동별 수치이고, 다른 하나는 일일 누적 활동량입니다. 텍스트 기반 OCR 도구는 맥락을 구분하지 않고 "320"과 "185"를 출력합니다. 사용자는 두 개의 다른 화면이 있다는 것을 인지했더라도 어떤 숫자가 어떤 화면에서 나온 것인지 수동으로 파악해야 합니다.

일부 보기에서는 심박수가 색상 막대로 표시됩니다. Workout Summary에는 Avg Heart Rate가 숫자와 그 아래 색상 구간 막대로 표시됩니다. 회색에서 빨간색까지의 5개 세로 구간으로 구성된 이 색상 막대는 구간별 시간을 나타내지만 추출 가능한 텍스트 라벨이 없습니다. 기존 OCR은 평균 숫자를 출력하지만 시각적 구간 분포를 해석할 방법이 없습니다.

열 이름을 지정하면 AI가 화면이 아닌 필드 라벨로 값을 찾습니다. "Workout Type, Duration, Active Calories, Distance, Avg Heart Rate"를 정의하세요. AI는 각 지표의 텍스트 라벨을 찾아 Workout Summary를 읽습니다. 실수로 Finish Screen을 캡처하면 모델이 "Active Calories" 라벨을 찾지 못해 해당 셀을 비워 둡니다. 잘못된 귀속이나 조작된 데이터가 없습니다.

지역과 운동 유형에 따른 혼합 단위를 처리합니다. 미국 계정은 Distance를 마일로, 영국 계정은 킬로미터로 표시합니다. 한 운동은 Pace를 min/mi로, 다른 운동은 min/km로 보여줍니다. AI는 사전 설정 없이 각 값 옆의 단위 라벨(mi, km, kcal)을 읽습니다. 또한 Walk와 Run이 동일한 지표 구조를 보여준다는 것을 인식하므로 하나의 열 세트로 둘 다 처리할 수 있습니다.

공유된 이미지에서 작동하며 Apple 기기나 계정이 필요 없습니다. 코치가 모두 Apple Watch를 사용하는 다섯 명의 운동선수로부터 스크린샷을 수집합니다. 단위 설정, 운동 유형, 날짜가 모두 다릅니다. 한 번에 모두 업로드하고, 열 세트를 한 번 정의하면 AI가 각 이미지를 독립적으로 추출하며 HealthKit 권한, iCloud 로그인, iPhone이 필요 없습니다. 한 Apple Watch 사용자가 언급했듯이, "Fitness 앱에서 스프레드시트로 활동 데이터를 직접 다운로드할 수 있는 쉬운 방법은 몇 가지 절차를 거치지 않고서는 없는 것 같습니다." 스크린샷 추출은 그러한 절차를 완전히 제거합니다.