டி.வி.யில் விளம்பரங்கள் பார்த்து கொண்டிருக்கும் போது அமிதாப் பச்சன்  வந்து தமிழில் பேசுவார், இந்த பொருளை வாங்குங்கள் என்பார். அவருக்கு தமிழ் தெரியாது. ஆனால், அப்போது அவரது வாயசைப்பு, அவர் பேசும் தமிழுக்கு பொருத்தமாக இருக்க வேண்டும். இது இன்றைய தினம் ஜெனரேட்டிவ் AI இன் டெக்னாலஜியின் தலையீட்டால் சாத்தியம்.

அமிதாப்பின் டப்பிங் கண்டெண்ட் பார்வையில் உண்மையானது மற்றும் ரியலிஸ்டிக்காக இருப்பது போன்று தோற்றமளிக்க ஒரு ஸ்டார்ட் அப் முயற்சி செய்து வெற்றியும் கண்டிருக்கிறது.

இன்றைய தினம் டி.வி., யூடியூப், சினிமா போன்ற துறைகளில் டப்பிங் அதிக அளவில் உபயோகப் படுத்தப்படுகிறது. ஒரு தடவை எடுக்கும் ஷூட்டிங் பல மொழிகளில் டப் செய்யப்படுகிறது. இது விளம்பர படங்களுக்கும், சினிமாவிற்கு அதிக அளவில் பொருந்தும்.

நியூரல் கேரேஜ் என்ற கம்பெனியின் “விஷுவல்டப்” என்ற இந்த ஸ்டார்ட் அப் கம்பெனியின் டெக்னாலஜியை பயன்படுத்தும் போது காட்சியை மறுபடி எடுக்காமலேயே நீங்கள் சிரமமின்றி, துல்லியமாக உரையாடல்களை மாற்றலாம்.

இது எப்படி சாத்தியமாகிறது என்றால், ஜெனரேட்டிவ் ஏஐ என்ற தொழில்நுட்பத்தினால் தான். இது நடிகர்களின் உதடுகள், வாய், தாடை மற்றும் புன்னகை வரிகளை டப்பிங் செய்யப்பட்ட ஆடியோவுடன் சரியாக ஒத்திசைப்பதன் மூலம் டப்பிங் செய்யப்பட்ட உள்ளடக்கத்தில் தடையற்ற பார்வை அனுபவத்தை உருவாக்க உதவுகிறது.

இன்று, கண்டெண்ட் உரிமையாளர்கள் மற்றும் விநியோகஸ்தர்கள்  பார்வையாளர்களைச் சென்றடைய பல மொழிகளில் உள்ளடக்கத்தை டப் செய்கிறார்கள். இருப்பினும், நடிகர்களின் உதடு மற்றும் தாடை அசைவுகள் அவர்களின் வாயிலிருந்து வரும் வார்த்தைகளுடன் பொருந்தாததால், டப்பிங் செய்யப்பட்ட உள்ளடக்கம் ஒரு ஒத்திசைவான பார்வை அனுபவத்தை வழங்கவில்லை.

இந்த ஸ்டார்ட் அப் கம்பெனியை தோற்றுவித்தவர் கொரியன் மொழியில் இருந்து டப் செய்யப்பட்ட படங்களை அதிகம் பார்ப்பவர். அப்போது அந்த கொரியன் நாட்டு நடிகர்கள் பேசும் ஆங்கிலம் அவர்களின் வாயசைப்புக்கு சிறிதும் பொருந்தாமல் இருந்தது. மேலும், அப்படி வாயசைப்பு பொருத்தாமல் இருந்ததால் அவரால் அந்த படத்தை லயித்து பார்க்க இயலவில்லை. இதற்கு ஏதாவது செய்ய வேண்டும் என்ற உந்துதலில் பிறந்தது தான் இந்த ஸ்டார்ட் அப்.

  செயற்கை நுண்ணறிவின் முன்னேற்றங்கள் இந்த சிக்கலைத் தீர்க்க உதவுமா என்று யோசித்து, இந்த தொழில்நுட்பத்தின் சாத்திய கூறுகளை ஆராய ஆராய்ச்சியைத் தொடங்க முடிவு செய்தார். அவரது ஆர்வம் மற்றும் ஆடியோ மற்றும் வீடியோ இடையே உள்ள இடைவெளியைக் குறைப்பது ஆகும். பின்னர் நண்பர்களுடன் இணைந்து இதை சாத்தியமாக்கினார்.

எப்படி செயல்படுகிறது?

‘நியூரல் கேரேஜ்’ என்ற பெயர் நரம்பியல் நெட்வொர்க்குகளைக் குறிக்கிறது – விஷுவல் டப் என்ற இவர்களின் முதன்மை நிறுவனம், நடிகர்களின் உதடு மற்றும் தாடை அசைவுகளை ஆடியோவுடன் ஒத்திசைப்பதன் மூலம் டப்பிங் உள்ளடக்கத்தில் ஆடியோ-விஷுவல் வேறுபாட்டைக் குறைக்கிறது. “விஷுவல்டப்”- பின் தனியுரிம உருவாக்கும் AI தொழில்நுட்பமானது, பேசப்படும் வார்த்தைகளுடன் நடிகர்களின் தாடை மற்றும் உதடு அசைவுகளை ஒத்திசைப்பதன் மூலம் டப்பிங் உள்ளடக்கத்தில் வெளிப்படையாக இருக்கும் முரண்பாடுகளை நீக்குகிறது. ஜெனரேட்டிவ் AI ஆனது ஆடியோ ஆக்டிவேஷனைப் பயன்படுத்தி முகப் பகுதிகளை மாற்றுகிறது, அவற்றை மற்ற காட்சிகளுடன் கலக்கிறது. உதடு அசைவுகள் அசைவுகளுக்கு ஏற்றவாறு மாற்றியமைக்கப்பட்டுள்ளன, மேலும் தாடை மற்றும் கன்னம் அசைவுகள் மற்றும் புன்னகைக் கோடுகள் இதனுடன் ஒத்திசைக்கப்பட்டு, டப்பிங் செய்யப்பட்ட உள்ளடக்கத்தை காட்சிக்கு யதார்த்தமாகவும் இயற்கையாகவும் மாற்றுகிறது.மேலும் விபரங்களுக்கு இவர்களின் இணையதளத்தை சென்று பாருங்கள் www.visualdub.com.

Read More