# 結果：20261122_258_SO101でMacとカメラとアームから取れるデータを全部確かめる

- 状態：完了
- 始めた時刻：2026-11-22 17:00
- 終わった時刻：2026-11-22 17:54（54分）
- 作業フォルダ：/Users/shimazueiichi/r2r2r-scripts
- この続きを Claude Code で話すとき：作業フォルダで `claude --resume 629cc0d1-6706-4407-9693-4151d50f1ae7`

## Claude Code の報告

やったこと：机の前のエイイチがウィンドウの大きな字の指示どおりに操作し、段階0〜6を順に計測しました（17:07〜17:51、6段階とも最後まで終了）。段階7はコードを読むだけにしました。
- 段階0：つながりの確認
- 段階1：机側カメラのピント合わせ
- 段階2：読み取りの速さ（動かさない）
- 段階3・4：テレオペ（爪の開け閉め5回と、ゆっくり・ふつう・速くの3段）
- 段階5：lerobot-record で10秒×3回の記録
- 段階6：lerobot-replay で記録の1回を2回再生

結果：
- **0. つながり**：フォロワーもリーダーもサーボ6個ずつ見えました。カメラは手首が OpenCV 1、机側が OpenCV 0 です。iPhone（Iriun）も見えていました。
- **1. 机側カメラのピント**：中央の数値は、依頼248 の画像の 2.6 から 1286〜1330 に上がりました（1280x720 で測定）。
- **2. 読み取りの速さ**
  - 関節：フォロワーとリーダーを両方読んで、1回あたり中央値 2.3ms・95% 3.9ms・最大 8.1ms。30Hz の1コマ（33ms）を超えた回は 900回中 0 回です。
  - 電流・負荷・温度・電圧も読めました。1つあたり約 1ms で、4つ足すと1回あたり約 +4ms です。
  - カメラ：2台とも、1280x720 でも 640x480 でも約 30fps でした。コマの間隔は 95% で 35〜36ms、落ちたコマは30秒で 4〜9 です。
  - カメラ2台と関節を同時に回すと、手首カメラに 150ms の穴が1回、関節の1回が 33ms を超えたのが2回ありました。
  - 露出・ホワイトバランスは、Mac の OpenCV では全部 0 が返り、自動かどうか・その値は読めませんでした。
- **3. 時刻のずれ**
  - フォロワーはリーダーより約 100〜130ms 遅れて追いつきます（爪だけは 170ms）。
  - 手首カメラとフォロワーの関節は、爪の動き始めの差が +9 / −10 / −26ms で、1コマ以内に揃っています。
  - 机側カメラは画面の中の爪が小さく、−145〜+22ms とばらついて信用できません。
  - 5回のうち1回目はリーダーの爪が動いておらず、2回目は合図より前に動きがあったため、使えたのは3回分です。
- **4. 速く動かしていいか**
  - 「速く」の段の最大の速さは、shoulder_pan 203°/s、wrist_flex 183°/s です。そのときリーダーとの差は最大 33° でした。
  - 差はほぼ「速さ × 約0.1秒」で、サーボが速さの上限で頭打ちになった形ではありません。
  - 先に苦しくなるのは shoulder_pan と wrist_flex です。電流がいちばん大きいのは shoulder_lift（559mA、負荷 75%）でした。温度は全体で +1〜2℃ です。
  - 手首カメラのぶれは、150°/s を超えると約15% 出始めます。
  - max_relative_target は既定のまま None（制限なし）でした。姿勢が違うままテレオペを始めると、ならす仕組みがないのでフォロワーが飛ぶことをコードで確かめました。
- **5. LeRobot の記録の形**
  - 中身は、action と observation.state（どちらも float32 で6つ）と、動画2本（wrist・desk：av1、640x480、30fps）です。
  - timestamp は「コマの番号 ÷ 30」で、実際の撮影時刻は保存されません。そのため、上で測ったずれや揺れは timestamp には一切現れません。コマが落ちると前のコマがそのまま入ります。
  - 大きさは毎秒 0.227MB です。1回30秒なら 100回で 681MB、1000回で 6.8GB になります。
- **6. 関節の値は正確か**
  - 再生の始め 0.5 秒を除くと、記録との差は最大 0.62°、2回の再生どうしの差は最大 1.05° でした。
  - キャリブレーションの値は12個ともサーボの中と一致し、角度の変換も式と差 0 でした。1目盛は 0.0879° です。
  - 爪の値と手首カメラの映像は、向きも大きさも合っていました（1 で閉じ、98 で全開）。ただし記録した3回では爪を動かしていないので、再生で爪の精度は見ていません。
  - **再生1回目の始めに、フォロワーが 35〜42° 飛びました。** 再生前の確認では、記録の最初の姿勢との差は 10° 以内でした。動いた向きが記録の最後の姿勢と同じなので、サーボに残っていた前の目標の角度へ、力が入った瞬間に動いたと考えています。2回目では起きておらず、原因は確定していません。
  - 記録3回とも、腕を上げた姿勢で終わっていました。終わりに力が抜けた時点で、フォロワーは落ちたはずです。
- **7. 動きを直す仕組み**
  - 方策を動かしながら人が割り込むことはできます。`lerobot-rollout --strategy.type=dagger` で、tab で直し始め・終わりです。
  - 割り込む瞬間は、リーダーに力を入れてフォロワーの姿勢へ2秒かけて寄せてから人に渡すので、飛びません。
  - 人が直したコマと AI が動かしたコマは、`intervention` の列で区別できます。
  - 足りない所：方策の最初の動きをならす仕組みがあるかは確かめられていません。最初の段落の「前の目標に飛ぶ」問題は、この仕組みでも同じように起きるはずです。

判定：止めた（決めてほしいことあり）。計測そのものは6段階すべて終わっています。

変えたファイル：
- 新しく足して、個別に add・commit したもの（4d79b10）
  - `so101/check_258.py`
  - `so101/check_258_analyze.py`
  - `so101/replay_logged_258.py`
  - `so101/verify_calibration_258.py`
- git に入れていないもの
  - データ一式 `so101/check_258/`（報告の本体は `so101/check_258/REPORT.md`）
  - 作業記録 `logs/20261122_1753.md`
- KIOXIA と Hugging Face には何も作っていません。

決めてほしいこと：
1. 再生1回目の始めに飛んだ件の対策です。
   - 案A：lerobot-record・replay の前に、サーボの目標を今の位置に書いておく一手を足す
   - 案B：max_relative_target を設定する（安全の値の変更になるので、私からは変えていません）
2. 私のテレオペ（段階3・4）では、フォロワーに力を入れる前に、サーボの目標を今の位置に書いておく一手を加えていました（電源を切ると消える領域で、動きは出ません）。依頼には書かれていない操作なので、このやり方でよいか確認してください。
3. 記録の終わりは休みの姿勢で終えることを、決まりにするかどうか。
4. 机側カメラのずれは信用できる値が取れませんでした。爪が大きく写る置き方で測り直すかどうか。
5. お手本を集めるときの解像度（640x480 にするか 1280x720 にするか）。
6. 露出・ホワイトバランスを OpenCV 以外の道具で読むかどうか。
