< プレスルームに戻る
エヴィクサー、音響透かし・特徴量マッチングに加えて新たに音声認識を組み合わせた舞台字幕の同期技術を開発（2026-10-29）
2026年10月29日
エヴィクサー、音響透かし・特徴量マッチングに加えて
新たに音声認識を組み合わせた舞台字幕の同期技術を開発
〜生の舞台ならではのテンポや間合いの変化にも追従、
「HELLO! Theater」「HELLO! MUSEUM」「HELLO! MOVIE」に順次搭載〜
エヴィクサー株式会社（本社：東京都中央区、代表取締役社長 CEO：瀧川 淳、以下エヴィクサー）は、舞台・演劇の字幕サービス向けの機能充実を図るため、当社の音響透かし技術と、音の特徴量を照合する特徴量マッチング技術に加えて、セリフを自動で認識する音声認識技術を組み合わせた、新たな字幕同期技術を開発しました。本技術は、当社が提供する「HELLO! Theater」「HELLO! MUSEUM」、および子会社のハロームービー株式会社が提供する「HELLO! MOVIE」に順次搭載する予定です。
図：新技術のイメージ（クリックで拡大）
背景
生の舞台は、同じ演目でも公演ごとにテンポやセリフの間合いが変わり、生演奏・生歌唱の場面では演奏の速さも毎回異なります。エヴィクサーはこれまで、舞台音響に人の耳には聞こえにくい音響透かしを埋め込み、その信号から上演の進行位置を特定して字幕を表示する仕組みで、2018年から大規模なミュージカル公演などに字幕サービスを提供してきました。音響透かしは、事前に用意した効果音やBGMなどに埋め込むため、生演奏・生歌唱の区間や、BGMのないセリフだけの場面には入れることができません。そのため、こうした区間や公演ごとの揺らぎが大きい場面では、字幕のタイミング調整に運用上の工夫が必要でした。
技術の概要
本技術は、役割の異なる3つの技術を組み合わせます。
1
音響透かし舞台音響に埋め込んだ信号から、上演のどの場面かを確実に特定します。
2
特徴量マッチング音の高さ（音程）などの特徴量に着目して、事前に登録した音（稽古時の録音など）と会場の音を照合します。音量や音色、会場の響きの違いに左右されにくく、幕開けが生演奏の場合でも、その始まりを捉えて字幕の起点をそろえる「頭合わせ」に使います。
3
音声認識上演中の俳優のセリフを自動で文字に起こし、台本と照合して、いまどのセリフが話されているかを特定します。BGMのない芝居の場面でも、セリフの間合いの変化に合わせて字幕を送ります。
3つを組み合わせることで、場面の特定は音響透かしで確実に行いながら、幕開けの頭合わせは特徴量マッチングで、セリフの区間のテンポや間合いの揺らぎは音声認識で追従し、生の舞台でも、お客様のスマートフォンやスマートグラスに字幕を自然なタイミングで表示します。
主な特長
1
幕開けが生演奏の場面や、BGMのないセリフの場面でも字幕を合わせられる
2
公演ごとのテンポ・間合いの変化に自動で対応（オペレーターの手動送りの負担を軽減）
3
既存の音響透かしの設備・運用を活かしたまま導入可能
4
本技術では、表示する字幕は事前に用意・監修した字幕（翻訳字幕を含む）のまま。音声認識はタイミング合わせに使い、認識結果をそのまま表示するものではありません
特許について
エヴィクサーは、上演中に流れる音から「同期ポイント」を検出し、予定のタイミングとのずれを補正して字幕などを再生する技術について、日本・米国・中国・韓国・香港で特許を取得しています。これらの特許では、同期ポイントの位置とは独立に字幕の表示タイミングを設定でき、上演のテンポが変わっても、検出したずれに合わせて字幕の開始タイミングを補正できます。
さらに日本では、同期ポイントを音に埋め込んだ透かしだけでなく、音から抽出した特徴量によって検出する構成についても権利化しています。本技術は、これらの特許に含まれる「音響透かし」と「音の特徴量」による2つの検出方式を生の舞台の字幕同期で実用化し、さらに音声認識を組み合わせたものです。
今後の展開
本技術は「HELLO! Theater」「HELLO! MUSEUM」「HELLO! MOVIE」に順次搭載し、ミュージカル・演劇・コンサートなど、生演奏や即興性の高い公演への字幕・ガイド提供を広げていきます。
導入のご相談・お問い合わせ
報道関係の方は [email protected] までご連絡ください。
サービス概要
HELLO! Theaterhttps://hellotheater.info/
エヴィクサーが提供する、舞台・演劇・ミュージカル向けの字幕ガイドアプリ。電波を使わない音響通信方式で、舞台機構と干渉することなく、お客様のスマートフォンやスマートグラスに字幕を表示します。2025年8月に正式リリース（iOS／Android）。
HELLO! MUSEUMhttps://hellomuseum.info/
美術館・博物館・展示施設向けの汎用ガイドアプリ。音声ガイド・字幕・多言語対応を手軽に導入できます。
HELLO! MOVIEhttps://hellomovie.info/
子会社のハロームービー株式会社が運営する、映画のバリアフリー上映向けアプリ。音声ガイド・字幕ガイド・副音声を、公開初日からすべての映画館でスマートフォンやスマートグラスで利用できます。累計100万ダウンロードを突破（2026年10月）。
会社概要
エヴィクサー株式会社 https://www.evixar.com/
音響分野のディープテック企業。音響識別技術（音響透かし・音響フィンガープリント）を中核に、映画・舞台のバリアフリー字幕・音声ガイド、音響連動グッズ、音声・動画コンテンツの真正性証明などのソリューションを提供しています。
- 代表者：代表取締役社長 CEO 瀧川 淳
- 所在地：東京都中央区新川 1-17-22 松井ビル 1 階
その他のお問い合わせは、お問い合わせフォームよりご連絡ください。
Press Release — English
Evixar Develops Stage Caption Synchronization Technology
Combining Acoustic Watermarking, Feature Matching,
and Speech Recognition
Captions that keep pace with the shifting tempo and timing of live performance —
to be rolled out on HELLO! Theater, HELLO! MUSEUM, and HELLO! MOVIE
Evixar Inc. (Tokyo, Chuo-ku; President & CEO: Atsushi Andrew Takigawa) has developed a new caption synchronization technology for stage and theater captioning services. It adds speech recognition, which automatically recognizes actors’ lines, to Evixar’s acoustic watermarking and acoustic feature matching technologies. The technology will be rolled out in stages on HELLO! Theater and HELLO! MUSEUM, provided by Evixar, and on HELLO! MOVIE, provided by its subsidiary HELLO! MOVIE Inc.
Figure: Overview of the new technology (click to enlarge)
Background
In live theater, the tempo and the pauses between lines change from one performance to the next, even for the same production, and the pace of live music and singing differs every time. Since 2018, Evixar has provided captioning services for large-scale musical productions and other performances, embedding inaudible acoustic watermarks in the stage audio and using them to identify the current position in the performance and display captions. Because acoustic watermarks are embedded in pre-produced sound effects and background music, they cannot be placed in live music and singing, or in dialogue-only scenes without background music. Keeping captions on time in these passages, and in scenes that vary widely between performances, has required careful manual operation.
How It Works
The technology combines three techniques, each with a different role.
1
Acoustic watermarkingreliably identifies which scene is being performed, from signals embedded in the stage audio.
2
Feature matchingfocusing on features such as pitch, it matches the sound in the venue against pre-registered audio (such as rehearsal recordings). Robust to differences in volume, timbre, and room acoustics, it is used to align the starting point of captions even when a show opens with live music.
3
Speech recognitionautomatically transcribes actors’ lines during the performance and matches them against the script to identify which line is being spoken, advancing captions in step with the actors’ delivery even in scenes without background music.
By combining the three, the scene is reliably identified by acoustic watermarking, captions are aligned at the opening by feature matching, and variations in tempo and timing in dialogue are followed by speech recognition — so captions appear at natural timing on audience members’ smartphones and smart glasses, even in live performance.
Key Features
1
Captions can be aligned even when a show opens with live music, and in dialogue-only scenes without background music
2
Automatically adapts to changes in tempo and timing between performances, reducing the burden of manual caption cueing
3
Can be introduced while keeping existing acoustic watermarking equipment and workflows
4
With this technology, captions shown to the audience remain the pre-prepared, reviewed captions (including translated captions); speech recognition is used for timing, and its output is not displayed as-is
Planning captions for productions with live music or extensive dialogue?
We offer demonstrations of speech-recognition-based caption synchronization and consultations on introducing it to your production.
Request a Demo / ConsultationPatents
Evixar holds patents in Japan, the United States, China, South Korea, and Hong Kong on technology that detects “synchronization points” in the sound of a live performance and corrects the deviation from the planned timing to play back captions and other content. Under these patents, caption display timing can be set independently of where the synchronization points are, and caption start times can be corrected according to the detected deviation even when the tempo of the performance changes.
In Japan, Evixar has also obtained rights covering detection of synchronization points not only from watermarks embedded in the sound but also from features extracted from the sound. The new technology puts these two patented detection methods — acoustic watermarking and sound features — into practical use for live stage captioning, and adds speech recognition.
Looking Ahead
Evixar will roll out the technology in stages on HELLO! Theater, HELLO! MUSEUM, and HELLO! MOVIE, expanding captioning and guide services for musicals, plays, concerts, and other performances with live music or a high degree of spontaneity.
Inquiries
For stage and concert producers
HELLO! Theater
Captions that keep pace with live performance, supporting accessibility and multilingual audiences.
For museums and exhibition facilities
HELLO! MUSEUM
Easily introduce audio guides, captions, and multilingual support on visitors’ own smartphones.
For the film industry
HELLO! MOVIE
Audio description, captions, and alternate audio tracks in every theater from opening day.
Members of the press, please contact [email protected].
About the Services
HELLO! Theaterhttps://hellotheater.info/
A caption guide app for stage plays and musicals, provided by Evixar. Using radio-free acoustic communication, it displays captions on audience members’ smartphones and smart glasses without interfering with stage equipment. Officially launched in August 2025 (iOS / Android).
HELLO! MUSEUMhttps://hellomuseum.info/
A guide app for museums, galleries, and exhibition facilities, making it easy to introduce audio guides, captions, and multilingual support.
HELLO! MOVIEhttps://hellomovie.info/
An accessibility app for cinema operated by Evixar’s subsidiary HELLO! MOVIE Inc. Audio description, captions, and alternate audio tracks are available on smartphones and smart glasses in every theater from opening day. Surpassed one million downloads in October 2026.
About Evixar
Evixar Inc. https://www.evixar.com/
A deep tech company in acoustics. Built on its core acoustic identification technologies (acoustic watermarking and acoustic fingerprinting), Evixar provides solutions including accessible captions and audio guides for film and theater, sound-synchronized merchandise, and authenticity verification for audio and video content.
- Representative: President & CEO, Atsushi Andrew Takigawa
- Headquarters: Matsui Building 1F, 1-17-22 Shinkawa, Chuo-ku, Tokyo
For other inquiries, please email [email protected].