Apple Fitness ワークアウトスクリーンショットからワークアウトの種類、時間、アクティブカロリー、心拍数を取得

Finish ScreenとWorkout Summaryはほぼ同一に見えます。 どちらも同じグラデーション背景、同じリンググラフィック、同じフォントを使用しています。Finish Screenには「Move 320 / 600 kcal」（リングの進捗）が表示され、Workout Summaryには「Active Calories 185 kcal」（セッション固有の消費カロリー）が表示されます。Apple Communityでは、ユーザーが頻繁に混乱を報告しています。「Apple Watchで水泳のワークアウトを記録し始めたのですが…データを転送・エクスポートするにはどうすればいいですか？」従来のOCRでは、どちらの画面かを判別できません。

Active CaloriesとMoveリング — 同じ単位でも異なる意味。 どちらの値もキロカロリーで表示されます。一方はワークアウト固有の値で、もう一方は累積の1日のアクティビティです。テキストベースのOCRツールは「320」と「185」を出力しますが、コンテキストを区別しません。ユーザーは、2つの異なる画面があったことに気づいたとしても、どの数値がどの画面からのものかを手動で判断する必要があります。

一部の表示では心拍数がカラーバーとして表示されます。 Workout Summaryには、Avg Heart Rateが数値（例：152 bpm）とその下のカラーゾーンバーで表示されます。このカラーバー（灰色から赤色までの5つの縦のセグメント）はゾーン滞在時間を表しますが、抽出可能なテキストラベルはありません。従来のOCRは平均値を出力しますが、視覚的なゾーン分布を解釈する方法はありません。

列に名前を付けると、AIは画面ではなくフィールドラベルから値を検出します。「ワークアウトの種類、時間、アクティブカロリー、距離、平均心拍数」を定義します。AIはWorkout Summaryを読み取り、「Active Calories」というテキストラベルの隣にある数値とkcal単位を特定します。誤ってFinish Screenをスクリーンショットした場合、モデルは「Active Calories」ラベルを見つけられず、そのセルは空欄になります。誤った属性付けやデータの捏造は発生しません。

地域やワークアウトの種類を問わず、混合単位にも対応します。米国のアカウントでは距離がマイル表示、英国のアカウントではキロメートル表示になります。あるワークアウトではペースが分/マイル、別のワークアウトでは分/kmで表示されます。AIは事前設定なしで、各値の横にある単位ラベル（mi、km、kcal）を読み取ります。また、ウォークとランは同じメトリクス構造を示すため、1つの列セットで両方をカバーできます。

共有画像から動作するため、Appleデバイスやアカウントは不要です。コーチがApple Watchを使用する5人のアスリートからスクリーンショットを収集します。単位設定、ワークアウトの種類、日付はそれぞれ異なります。すべてを一度にアップロードし、列セットを一度定義すれば、AIが各画像を個別に抽出します。HealthKitの許可、iCloudログイン、iPhoneは一切不要です。あるApple Watchユーザーが指摘したように、「Fitnessアプリからスプレッドシートにアクティビティデータを直接ダウンロードする簡単な方法は、いくつかの手間をかけないと存在しないようです。」スクリーンショット抽出により、その手間が完全に不要になります。