音声同期

音声同期（Audio Sync）ノードは、1 つの会話を収録した 2〜6 本の録音について、それぞれの時計がどれだけずれているかを音から測定します。ポッドキャストは、ゲストごとのカメラ、ワイドショット、メインマイクのように、同時に何本も収録されることがよくあります。それぞれの収録は、別々のタイミングで開始されます。音声同期はそのすべてを聞き取り、1 本の基準の録音に対して、各録音がどれだけずれているかを報告します。これで、誰もオフセットを入力しなくても、マルチカム編集の素材がそろいます。

このノードは、AI モデルもプロバイダーのキーも使わずにローカルで動作するため、すべてのエディションで使えます。

使いどころ

• ゲストごとのカメラとメインマイクで収録したマルチカムのポッドキャストを、編集を計画する前にそろえます。
• テーブルに置いたレコーダーなど、別のオーディオレコーダーのオフセットを、カメラの音を基準にして求めます。
• 長時間の収録で、2 台のレコーダーの時計がずれていかないかを確認します。

クイックスタート

入力と出力

各録音は、その録音を送るノードで識別されます。そのノードの ID が、結果の中で録音の sourceId になります。これは、編集プランが同じ録音に付ける ID と同じです。

出力のオフセットは、オーディオではなくデータです。フィールドを抽出（Extract Field）など、データを読み取るノードに接続します。

設定

測定の仕組み

ノードは、3 つの段階で各録音を基準の録音と比較します。

1. 粗い比較：2 つの録音全体のラウドネスを比較します。これにより、ずれがどれだけ大きくても見つけられます。マイクより何分も前に開始したカメラでも同じです。
2. 細かい比較：最初の結果の周辺で、波形を比較します。比較には、両方の録音に共通する区間から取った、10 秒のウィンドウを最大 3 つ使います。各周波数は位相で重み付けされるため、響きのある部屋の向こう側にあるカメラでも、反響音ではなく直接音でタイミングが測られます。クリーンな録音では誤差は約 1 ミリ秒以内に収まり、反響のある録音でも通常は数ミリ秒以内です。
3. ドリフト：別々のレコーダーの時計は、わずかに異なる速さで進みます。その差は、一般的に 20〜100 ppm（100 万分の 20〜100）です。ノードは各ウィンドウのオフセットを直線に当てはめ、その直線の傾きをドリフトとします。測定できるドリフトは、最大 200 ppm です。

時間は、各ファイル自身の時計で読み取ります。これは、編集でカットの基準になる時計です。音が映像より後に始まる動画は、その差を含んだまま測定されます。

結果の読み方

オフセット出力は、次のような形式です。

{
  "version": 1,
  "reference": "mic",
  "offsets": [
    { "sourceId": "mic", "offsetMs": 0, "confidence": 1, "driftMsPerHour": 0 },
    { "sourceId": "camA", "offsetMs": 7500, "confidence": 0.94, "driftMsPerHour": 1.2 },
    { "sourceId": "camB", "offsetMs": -40000, "confidence": 0.91, "driftMsPerHour": null }
  ],
  "notes": []
}

オフセットのルール

基準の時間 = 録音の時間 + オフセットです。これは、編集決定リストと同じ符号のルールです。メインの録音を基準にすると、各オフセットは、その録音を編集で使うときの値そのものになります。

• マイクより 7.5 秒後に開始したカメラのオフセットは +7500 です。カメラの 0 秒目が、マイクの 7.5 秒目にあたります。
• マイクより 40 秒前に開始したカメラのオフセットは -40000 です。

信頼度

• 共通区間が 6 分以上ある場合、ノードは 3 つのウィンドウで測定します。3 つの結果が 1 ミリ秒以内で一致すれば、オフセットは信頼でき、信頼度は 0.6 以上になります。響きのある部屋の向こう側にあるカメラでも同じです。はっきりと一致すれば、信頼度は 1 まで上がります。ウィンドウどうしの結果が 5 ミリ秒以上食い違う場合、信頼度は 0 になります。
• 共通区間がそれより短い場合、ウィンドウは 1 つだけです。そのため、そのウィンドウでの一致と、全体の位置合わせの両方が明確である必要があります。
• 信頼度が低いことは、失敗ではなく 1 つの結果です。マイクがオフだったカメラにはそろえるための音がありませんが、それでも実行は完了します。

メモ

クレジット

音声同期の料金は、基準の録音にそろえる録音 1 本につき 10 クレジットで、10 ×（録音の数 - 1）です。基準の録音そのものは何にもそろえないため、料金はかかりません。録音の長さによって料金は変わりません。

キャンバス上では、料金はソースに接続された録音の数に応じて決まります。ワークフローの接続情報なしで見積もる場合は、低く見積もることがないように、録音 6 本分の料金である 50 クレジットを表示します。セルフホスティングの Community エディションと Business エディションでは、クレジットを使いません。

例

マイクとカメラ 1 台：カメラは、マイクより 7.5 秒後に開始しました。結果は、基準の mic が 0、cam が +7500 です。料金は 10 ×（2 - 1）= 10 クレジットです。

マイクとカメラ 3 台：カメラ A はマイクより 7.5 秒後、カメラ B は 40 秒前、44.1 kHz で録音するカメラ C は 3.25 秒後に開始しました。結果は、mic が 0、camA が +7500、camB が -40000、camC が +3250 です。料金は 30 クレジットです。

カメラ A を基準にした 6 本の録音：同じオフセットを、代わりにカメラ A の時計で測定します。すべての値がカメラ A 自身のオフセットの分だけずれ、camA は 0 になります。料金は 50 クレジットです。

ドリフト：時計が 100 ppm 異なる 2 台のレコーダーは、1 時間に 360 ミリ秒ずれていきます。40 分の共通区間では 240 ミリ秒になり、しきい値の 33 ミリ秒を大きく超えます。driftMsPerHour の大きさは約 360 で、その符号は、録音がどちらの方向にずれていくかを示します。メモで、両端のずれが最大 120 ミリ秒になることが警告されます。補正は何も行われません。

制限

• 1 回の実行につき 2〜6 本の録音：これより少ないか多い場合、実行は開始前に拒否され、クレジットは確保されません。
• 共通の音：録音どうしで、少なくとも 2 秒間の音を共有している必要があります。共通する音がない録音には、メモと信頼度 0 が付きます。
• 基準の録音には音が必要：基準の録音は、すべての測定の基準となる時計です。基準の録音にサウンドトラックがない場合、実行は失敗し、その録音の名前を示すメッセージが表示されます。それ以外の録音に音がない場合は、その録音に信頼度 0 の行が作られるだけです。
• ドリフトは報告されますが、補正はされません。
• 長いファイル：最初の実行では、録音全体を取得します。上限は 64 GB、長さ 1 時間までです。ダウンロードの速度は、約 2 Mbit/s 以上である必要があります。それより遅い状態が 1 分間続くと、取得は中止されます。2 回目以降の実行では、準備済みのオーディオを再利用します。

ヒント

• メインマイクを基準にする：メインマイクを最初に接続するか、基準で選びます。そうすれば、オフセットをそのまま編集に使えます。編集では、メインマイクの時計がタイムラインになるためです。
• 信頼度が低いときは耳で確認する：信頼度が低いのは、たいてい、その録音に会話がほとんど入っていないためです。たとえば、ミュートされたカメラや、騒がしい部屋で遠くから撮ったワイドショットです。
• 長いエピソードではドリフトのメモを読む：1 フレームを超えるドリフトがあると、冒頭がそろっていても、エピソードが進むにつれて口の動きと音声がずれていきます。
• オフセットを編集に入力する：編集プラン（Edit Plan）では、設定パネルで各ソースのオフセットを入力できます。

API から

POST /v1/audio-sync は、sources と、任意の reference を受け付けます。sources は、一意の id と url を持つ 2〜6 個のオブジェクトのリストで、reference はその ID のいずれかである必要があります。ID が重複している場合や、reference がどの ID とも一致しない場合、リクエストは、該当する値を示す 400 validation_error で拒否されます。完了した実行の output_data.json は、上記の結果です。SDK のメソッドは client.edit.audioSync、CLI のコマンドは nodaro edit audio-sync、MCP ツールは audio_sync です。音声とメディアを参照してください。