感情、文脈など総合分析で現地文化に合った吹替技術を開発。キム・ホングク代表は「手作業と比較して制作時間90%、コストを80%削減する」と話す。

映像コンテンツが国境を越えて流通する時代だが、言語の壁は依然として存在する。海外視聴者向けの吹替を制作するには、翻訳から声優録音、編集、検収まで複雑な工程を経る必要がある。AI(人工知能)による吹替技術が登場したものの、感情表現や口の動きと音声の一致の有無、効果音などを確認し修正する作業には依然として人の手が必要だ。

光州科学技術院(GIST)の教員創業企業AunionAIは、こうした既存のAI吹替技術の限界を克服することに注力している。映像内のシーンや話者の感情、文脈、効果音などを総合的に分析し、現地の文化や環境に合った多言語吹替を実現する技術を開発した。

キム・ホングクAunionAI代表は「シーンの文脈と感情、効果音などを併せて考慮する技術が既存のAIとの差別化要素だ」とし、「単純な翻訳と音声合成を超えて、映像全体の没入感を高めることに焦点を合わせた」と説明した。ここにAIが生成した成果物の品質検収とエラー修正までを自動化する技術も開発した。自社検証によると、既存の手作業方式と比較して制作時間を最大90%、コストは最大80%削減できるという。

AunionAIはキム代表が長年研究してきた音声技術を事業化するために2023年10月に設立された。キム代表は音声・オーディオAI分野で約35年間の研究開発経験を積んだ専門家で、サムスン総合技術院や米国AT&T研究所などに勤務した。大学でも企業との様々な産学協力課題を遂行してきた。

文章ではなく「シーン」を理解するAI…吹替のエラーも自ら修正

AunionAIの主力製品は、AIベースの多言語吹替ソリューション「AunionAI DUB Plus(ダブプラス)」だ。映像を入力するとAIが台詞と話者、感情、効果音などを分析し、翻訳と音声合成、発話時間の調整などを経て異なる言語の吹替音声を生成する。現在10以上の言語に対応している。

核心は文章ではなくシーン(Scene)単位で映像を分析する技術だ。同じ台詞でも緊迫した追跡シーンと落ち着いた対話シーンでは、声の高低や話す速度、感情表現が変わる必要がある。AunionAIはこうした特性を吹替に反映する「シーン認識(Scene-aware)」技術を開発した。

言語別の文章の長さの違いも補正する。英語の台詞を韓国語に翻訳すると文章が長くなったり短くなったりして口の動きと音声がずれる可能性がある。これを解決するため、翻訳文を再構成し元の映像の発話時間に合わせる技術を適用した。映像内のオブジェクトと空間情報を基に効果音と空間音響を生成・再構成する技術も開発した。

特に同社が強調する差別点は、AIが作った吹替を再びAIが検収し修正する「自動品質検収(Auto QA)」技術だ。音声の自然さや発話リズムなどを評価する指標、言語モデルに基づく分析などを活用し、品質が低下した区間を見つけ出す。

キム代表は「エラーが発見されると映像全体を再制作する代わりに、問題のある区間だけを再生成し品質を再評価する」とし、「人が一つ一つエラーを見つけて修正しなければならない負担を減らすことができる」と説明した。

技術検証と事業化にもスピードを上げている。AunionAIは韓国内大企業の映像ディスプレイ(VD)事業部との概念実証(PoC)を通じて、コンテンツ100本以上を対象にAI吹替技術を試験した。グローバル光州放送(GGN)をはじめ、光州科学技術院(GIST)、水原教育支援庁、韓国観光公社など放送・教育・公共分野でも実証を進め、技術の活用可能性を広げた。

昨年と今年は世界最大のIT・家電展示会CESに2年連続で参加し、今年7月には技術力を認められてシード投資を獲得した。

AUNION AI概要/グラフィック=キムダナ

一方、同社は30日にソウル・三成洞のCOEX B館プラス・ステージで開催される「2026 K-ディープテック・スタートアップ王者決定戦」決勝(https://forms.gle/McNBqdiBts8RJazVA)にGIST教員創業チームの代表として出場する。

今年で5回目を迎える王中王戦は、MONEYTODAYのスタートアップメディアプラットフォーム「ユニコーンファクトリー」が主管し、KAIST(カイスト、韓国科学技術院)、DGIST(大邱慶北科学技術院)、UNIST(蔚山科学技術院)、GIST(光州科学技術院)、ポステック(浦項工科大学校)、KENTECH(韓国エネルギー工科大学校)が共同主催する。

審査委員団にはサムスンC-Labアウトサイドと GSベンチャーズ、Ecoproパートナーズ、L&Sベンチャーキャピタル、LB Investment、Bluepoint Partners、SERIES VENTURES、CNTTECH、韓国科学技術持株、研究開発特区振興財団などディープテック投資・事業化の専門家が参加する。大企業のCVC(企業型ベンチャーキャピタル)からディープテック専門VC、初期投資AC(アクセラレーター)、公共技術事業化機関まで参加し、技術の事業化可能性と投資魅力度を総合的に検討する。

決勝は教員・学生創業部門別に6チームずつ、計12チームが進出した。実際の資金調達IR(企業説明会)方式でチームごとに10分の発表と10分の質疑応答を行い、技術性30点、市場性20点、事業性40点、チーム力10点を合算して評価する。

大賞は教員・学生創業部門でそれぞれ1チームを選定する。大賞2チームには副総理賞である科学技術情報通信部長官賞と賞金300万ウォン(約35.2万円)が授与される。優秀賞4チームには研究開発特区振興財団理事長賞と賞金100万ウォン(約11.7万円)、奨励賞6チームにはMONEYTODAY代表賞と賞金50万ウォン(約5.9万円)がそれぞれ与えられる。

受賞チームにはCVCオープンイノベーション連携やグローバルデジタル革新ネットワーク(GDIN)海外進出プログラム参加時の加点などの特典が提供される。受賞の有無にかかわらず決勝に進出した12チームには、企業広報や専門家コンサルティング、投資会社とのネットワーキングなど1年間の後続スケールアッププログラムが支援される。

<画像=キム・ホングク代表>

原文:https://www.unicornfactory.co.kr/article/2026101208172841905