رأي

النقيض من توليد الموسيقى بالذكاء الاصطناعي

لماذا يبقى المغنّي هو المغنّي.

أبحاث FAMILIAR LABSكل المقالات

الملخّص

نحن النقيض من توليد الموسيقى بالذكاء الاصطناعي. نرفض أن يُستبدل البشر. Song Dubbing ينقل الأغنية التي تعرفها إلى لغة أخرى بصوت المغنّي نفسه؛ اللغة وحدها تتغيّر. هذا ما ينبغي أن يُستخدم له الذكاء الاصطناعي: أن تفهم أمي أغانيّ المفضّلة هي أيضًا.

أغاني أمي

تغنّي لي أمي أغانيها، ولا أفهمها.

أفهم شيئًا من الماندرين، لكن السطر حين يُغنّى يمضي قبل أن ألحق به. وأريدها أن تفهم أغانيّ المفضّلة.

الكلمات هي ما يفوتنا

كلنا نريد أن نفهم كلمات الأغاني التي نسمعها.

أنا شغوف بنقاء الصوت، وأعزف على البيانو والتشيلو والغيتار الباص. الكلمات هي الجزء الوحيد من التسجيل الذي يفوتني بلغة أخرى، وفهمها قد يحوّل سطرًا دندنته سنوات إلى اعتراف أو وداع.

الفريق كله يحب الكاريوكي، ولا أحد يذهب إلى الكاريوكي ليسمع آلة تغنّي. اعرف أن أحدًا من البشر لم يغنِّ أغنية أحببتها فيقلّ إعجابك بها، وهكذا ينبغي (لماذا أؤمن بأن المؤدّين سيبقون بشرًا).

المغنّي يبقى هو المغنّي

التوليد

  • أغنية جديدة وصوت جديد، يُصنعان من أمر نصي.
  • لها مكانها حيث لا يُصغي أحد بانتباه: في إعلان، أو في موسيقى متجر.

الدبلجة

  • الأغنية التي تعرفها، المغنّي نفسه، التسجيل نفسه.
  • الصوت والصياغة والأنفاس والعاطفة تبقى؛ وكلمات الأغنية تنتقل إلى اللغة الجديدة.

الأغنية أداء ينبع من حياة عاشها صاحبها؛ استبدل المغنّي، وتصبح أغنية أخرى. يوافق الفنان على كل سطر قبل أن يُطرح أي شيء.

ما ينبغي أن يُستخدم له الذكاء الاصطناعي

دبلجة، لا توليد.

حتى اليوم لم تكن الأغنية تصل إلى لغة أخرى إلا إذا غُنّيت من جديد: بصوت الفنان، أو مغنٍّ آخر، أو بصوت غنائي جديد يُصنع لها. أما مع Song Dubbing فلا يُعاد غناء شيء؛ الأداء الأصلي نفسه ينتقل، والشفاه في الفيديو الموسيقي تتبع الكلمات الجديدة. هذه أول دبلجة حقيقية للأغاني.

بنينا النموذج التأسيسي متعدد الوسائط لتوطين المحتوى (MLFM) ليُبقي الشخص كاملًا في لغة أخرى، والسطر المغنّى أصعب نسخة من تلك المهمة. وبصفتي موسيقيًا، أُصغي إلى القوافي متعددة المقاطع والقوافي الداخلية، وإلى المعنى، ونوع الأغنية، والإيقاع: إن لم يجلس السطر الجديد على الإيقاع حيث كان يجلس القديم، فهو السطر الخطأ.

ناس من ثقافات شتّى، متصلون

++

نحب أن نفهم الأغنية.

Song Dubbing لشركات التسجيلات وفنانيها، ألبومًا بعد ألبوم، والفيديوهات الموسيقية معه (Song Dubbing). لتنقل ألبومًا إلى لغات جديدة، راسل الفريق.

دبلجة، لا توليدمن إنسان إلى إنسان

الأسئلة

هل Song Dubbing توليد للموسيقى بالذكاء الاصطناعي؟

لا. لا يصنع أغنية جديدة ولا صوتًا جديدًا؛ إنه ينقل تسجيلًا موجودًا إلى لغة أخرى بصوت المغنّي نفسه.

هل على المغنّي أن يغنّيها من جديد؟

لا. مع Song Dubbing لا يُعاد غناء شيء: الأداء الأصلي نفسه ينتقل، ولهذا يسمّيه Familiar Labs أول دبلجة حقيقية للأغاني.

من يوافق على الكلمات المترجمة؟

يوافق الفنان أو فريقه على كل سطر بكل لغة قبل الطرح.

المراجع

  1. [1]Song Dubbing
  2. [2]من إنسان إلى إنسان، لا من ذكاء اصطناعي إلى آخر

الترجمة متعددة الوسائط

تبني Familiar Labs دبلجة أفضل بجيل كامل عبر نموذج تأسيسي متعدد الوسائط لتوطين المحتوى (MLFM)، وهو أول نموذج تأسيسي للترجمة متعددة الوسائط: نموذج واحد يقرّر ما الذي يُوطَّن في النص والصوت والصورة، ويعرض عليك الخيارات. صوتك وشفاهك، إلى لغات جديدة. فريق من 7 أشخاص من حملة الدكتوراه، بدعم من Samsung وRedBird وGold House. مهمتنا

بدعم من

  • Wheelhouse
  • Maximum Effort
  • Stanford
  • Yonsei
  • University of Waterloo