როგორ გააცოცხლა Samsung-მა AR Emojis Galaxy S9-ში

ჩაშენებული Samsung Galaxy S9 კამერის აპლიკაცია, AR Emoji საშუალებას გაძლევთ გამოიყენოთ წინა კამერა ციფრული მულტფილმის ავატარების შესაქმნელად და გასაგზავნად. Apple-ის მსგავსი ანიმოჯები კონცეფციაში, AR Emoji აღბეჭდავს თქვენი სახის მოძრაობებს და ასახავს მათ პერსონაჟის ან ცხოველის სახით. მაგრამ მისი „Create My Emoji“ ფუნქციით, თქვენ ასევე შეგიძლიათ შექმნათ ერთ-ერთი საკუთარი თავი უბრალოდ სელფის გადაღებით - რაც საშუალებას მოგცემთ აირჩიოთ კანის ტონი, ჩაცმულობა, ვარცხნილობა, თმის ფერი და სათვალე.

AR Emoji-ით, Samsung-მა გადაწყვიტა გადაჭრას ის, რაც მას პრობლემად თვლის - იპოვა გზა არსებული emoji-ებით ჩაანაცვლოს ინტერაქტიულით. კომპანიას სურდა ამის გაკეთება მარტივი გზით, მომხმარებლებისთვის შესაბამისი ხელსაწყოების მიწოდებით ემოციების დაჭერა, მაგრამ მაინც საშუალება მისცა მათ მარტივად გაეზიარებინათ შედეგი სხვადასხვა შეტყობინებებში პლატფორმები.

მაშ, როგორ შექმნა Samsung-მა თავისი AR Emojis? დასაწყისისთვის, საქმე პირდაპირ 3D ანიმაციის ექსპერტებთან მივიდა, რომლებმაც გააცოცხლეს ჰოლივუდის ყველაზე პოპულარული პერსონაჟები.

დიდი ეკრანიდან სმარტფონის კამერამდე

ახალი ფუნქციის გასაძლიერებლად Samsung თანამშრომლობდა ლომ.აი — სან-ფრანცისკოში დაფუძნებული სტარტაპი, რომელიც სპეციალიზირებულია 3D ანიმაციაში. კომპანიის პროგრამული უზრუნველყოფა საშუალებას აძლევს მომხმარებლებს შექმნან სრულად პერსონალიზებული და კონფიგურირებადი 3D ავატარები ერთი ფოტოდან, მორგებული აპარატურის ან სიღრმის სენსორების გარეშე. პარტნიორობისა და პროგრამული უზრუნველყოფის განვითარების ნაკრების (SDK) მეშვეობით Samsung-მა გააერთიანა Loom.ai-ს ტექნოლოგია S9-ის კამერის ტექნოლოგიასთან (გაძლიერებული რეალობა და სახის ამოცნობა), რათა შესაძლებელი გახადოს მორგებული AR Emoji.

Loom.ai-ის ხედვა დაიწყო ფილმებით - მულტფილმებითა და სუპერგმირებით. ადრე მუშაობდნენ ვიზუალური ეფექტების პოპულარულ კომპანიებში, როგორიცაა DreamWorks და Lucasfilm, Loom.ai-ს დამფუძნებლები - Mahesh. რამასუბრამანიანი და კირან ბჰატი - დაეხმარნენ ცნობილი პერსონაჟების, როგორიცაა შრეკი და ჰალკი, დიდ სამყაროში მოყვანაში ეკრანი.

ამ პერსონაჟებში პიროვნების შეტანის მიზნით, მათ გამოიყენეს სპექტაკლის გადაღების ტექნოლოგია იმ მსახიობების ჩასართავად, რომლებიც მათ თამაშობდნენ - ჩაწერეს მსახიობის მოძრაობები და არა მათი ვიზუალური გარეგნობა. მაგრამ მას შემდეგ, რაც დაინახეს, თუ როგორ რეაგირებდა მაყურებელი მათ 3D შემოქმედებაზე, რამასუბრამანიანმა და ბჰატმა გადაწყვიტეს რომ ეს ტექნოლოგია უფრო შორს წავიდეს - ჰოლივუდის მიღმა - Loom.ai-ის დაწყებით, რომელიც ფოკუსირებულია სმარტფონები.

„ადამიანები მყისიერად რეაგირებენ ამ პერსონაჟების გაცოცხლებაზე, როცა მას ადამიანური მსახიობები ამოძრავებენ“, განუცხადა Digital Trends-ს რამასუბრამანიანმა, რომელიც აღმასრულებელი დირექტორი და თანადამფუძნებელია. ”ჩვენ დავიწყეთ Loom.ai იმ მიზნით, რომ ჩვენ უნდა გვეპოვა მარტივი გზა, რათა თითოეულმა ინდივიდმა შეძლოს საკუთარი თავის დანახვა 3D-ში და ამისთვის ახალი ტექნოლოგიის აგება მოგვიწია.”

მხატვრული ფილმებით, 3D ავატარის შესაქმნელად საჭიროა უამრავი აღჭურვილობა - ძვირადღირებული აპარატურა და პროგრამული უზრუნველყოფა, მაკიაჟი და სტუდიის გარემო. მაგრამ Loom.ai-მა იპოვა გზა გამარტივებულიყო პიროვნების თვისებების აღების პროცესი ჩვეულებრივი ხელსაწყოების გარეშე; ამის ნაცვლად, მისი დაპატენტებული ტექნოლოგია იყენებს ერთ ფოტოსურათს და ღრმა სწავლებას სურათის გასაანალიზებლად. თუ ფოტო არ არის სახის გამონათქვამებისგან, ღრმა სწავლის ალგორითმი უყურებს პიქსელებს და ავტომატურად აწარმოებს სახეს, რომელიც მოიცავს კუნთების სწორ მოძრაობას.

„როდესაც Samsung-ის პარტნიორობა შემოვიდა, ჩვენ გვქონდა შანსი დამენერგა ეს დახვეწილი ტექნოლოგია მოწყობილობაზე, რომელიც ჩვენ ვგრძნობთ, რომ ეს უკვე საკმაოდ მყარი საინჟინრო ამოცანაა თავისთავად“, - განუცხადა ბჰატმა, Loom.ai-ს CTO-ს და თანადამფუძნებელმა Digital-ს. ტენდენციები. ”ეს არის დიდი ტექნოლოგიური ნახტომი იმაში, რომ შევძლოთ ამ იდეებისა და მისწრაფებების დიდი ეკრანიდან გადმოტანა და მობილურზე გადატანა.”

ამ ტექნოლოგიის გაერთიანება Galaxy S9-ის აპარატურაში მოითხოვდა Loom.ai-ს ალგორითმების რესტრუქტურიზაციას, რათა მოწყობილობაზე იმუშაოს. მაგრამ Loom.ai-მ არ შექმნა AR Emoji მარტო: რამასუბრამიანმაც და ბჰატმაც მიაწერეს Samsung-ს პროგრამული უზრუნველყოფის ოპტიმიზაციისთვის უზარმაზარი ძალისხმევის გამო. SDK-ის სმარტფონებში ინტეგრაციის მიწოდებით, Loom.ai-ის დამფუძნებლები ფიქრობენ, რომ სამსუნგს შეუძლია გახადოს ჩარჩო ბევრად უფრო გამდიდრებული, მომავალში მეტი კონტენტისა და კონფიგურაციის ვარიანტების დამატებით.

როგორ ქმნის Galaxy S9 ციფრულ ავატარს

ასე რომ, ზუსტად როგორ მუშაობს S9 (და S9 Plus) შექმნა AR Emojis? მიუხედავად იმისა, რომ სამსუნგმა არ გაამჟღავნა თავისი საიდუმლო სოუსი, მან Digital Trends-ს თვალი ადევნა კაპოტის ქვეშ.

Loom.ai-ის ტექნოლოგიიდან გამომდინარე, ტელეფონის კამერა იღებს და ამუშავებს 2D სურათს 3D-ში. ამის შემდგომი გასაუმჯობესებლად, S9 იყენებს დამატებით პროგრამულ უზრუნველყოფას - სახის თვალყურის დევნებას და Samsung-ის Blend Shape ტექნოლოგიას, რათა უზრუნველყოს სახის გამონათქვამები AR Emoji-სთვის.

შემდეგ თქვენ დარჩებით საკუთარი თავის მულტფილმის მსგავსი ვერსია, რომელსაც შეუძლია 18 განსხვავებული გამონათქვამის გამოხატვა - რომელიც Samsung გეგმავს ნელ-ნელა გაზარდოს 54-მდე - დაწყებული სიხარულიდან და სიამოვნებიდან, მწუხარებამდე და სიბრაზემდე. ყველა მონაცემი ასევე ლოკალურია მოწყობილობისთვის და არ ინახება სხვაგან.

ორივე ერთად მუშაობს, სახის თვალთვალის ტექნოლოგია რეალურ დროში აკონტროლებს სახის 100-ზე მეტ მახასიათებელს (როგორიცაა თვალის დახამხამება ან ღიმილი) გადასაღებად ინდივიდუალური ემოციები, ხოლო Blend Shape ეხმარება მათ უფრო დიდი დიაპაზონის მიწოდებაში - რომელიც აერთიანებს გამონათქვამებს ერთად 75 ძირითადი ადამიანის საფუძველზე სახის თვისებები. Samsung-ის თქმით, Blend Shape-ისთვის, ის ყოველკვირეულად ატარებდა მინიმუმ 100 ტესტს თავის ლაბორატორიებში, რათა დარწმუნდეს, რომ საკმარისი მონაცემებია, რაც მის მომხმარებლებს მოხიბლავდა. (Blend Shape ასევე გამოიყენება მისი Disney AR Emojis-ის შესაქმნელად, როგორიცაა Mickey and Minnie Mouse.)

ჩვენში AR Emoji ტესტი, უმეტესობამ იგრძნო, რომ ჩვენი პერსონაჟები უკიდურესად არაზუსტად გამოიყურებოდა. ერთმა მწერალმა იგრძნო, რომ კანის ტონის ვარიანტების ნაკლებობა იყო ხელმისაწვდომი, მუქი კანის ტონებიდან არჩევანის გარეშე. სხვები გრძნობდნენ, რომ მათი AR Emoji არაფრით არ ჰგავდა მათ, რამაც ავატარის რედაქტირება უფრო შრომისმოყვარეობად აჩვენა, ვიდრე სასიამოვნო ამოცანად.

Loom.ai-ს თანახმად, ზუსტი AR Emoji-ს შექმნა დიდწილად დამოკიდებულია სელფის გადაღების გზაზე. მომხმარებლებმა უნდა გადაიღონ ფოტო ისევე, როგორც პასპორტის ფოტოს გადაღება. "გინდა განათებაც კი, არაფერი დაფარავს შენს სახეს და ნეიტრალური გამომეტყველება, რათა მოგვიანებით დავამატოთ გამონათქვამები", - განმარტა რამასუბრამანიანმა. ”ეს არის საკითხი, რომ ხალხი ცოტათი მიეჩვიოს მას და შემდეგ დაინახოს მისი ანიმაციისა და გამოყენების შესაძლებლობები.”

რამასუბრამანიანმა ასევე თქვა, რომ მომხმარებლებმა მას ისე უნდა მოექცნენ, როგორც ნებისმიერი სელფის გადაღებისას - რაც იმას ნიშნავს, რომ თქვენ შეგიძლიათ გადაიღოთ უამრავი ფოტო, სანამ ფოტოთი კმაყოფილი არ იქნებით. ვინაიდან AR Emoji გაძლევთ საშუალებას შექმნათ მრავალი ავატარები, შეგიძლიათ შეადაროთ ისინი, რომ იპოვოთ ის, რომელიც ყველაზე მეტად მოგწონთ. თქვენ მიერ შექმნილი თითოეული მათგანი ასევე ინახავს თქვენს ტელეფონში, ასე რომ თქვენ შეგიძლიათ შეცვალოთ გამოყენებული ვერსია თქვენი განწყობის მიხედვით.

AR Emoji-ის უახლესი განახლება მოიცავს დამატებით ვარცხნილობებს, თავსაბურავებს, როგორიცაა ჰიჯაბი და სხვა ვარიანტებს. განახლება ამჟამად ვრცელდება განბლოკილ ვერსიებზე Samsung Galaxy S9 და S9 Plus კორეაში, ჩინეთსა და ევროპაში. ევროპული ოპერატორის მოწყობილობებსა და აშშ-ს განბლოკილ მოწყობილობებს განახლება ხელმისაწვდომი უნდა ჰქონდეთ ჩამოსატვირთად ამ კვირაში. შეერთებული შტატების ოპერატორის მოწყობილობების განახლება უახლოეს კვირებში გამოვა. სამსუნგი ამბობს, რომ AR Emoji მომავალშიც განაგრძობს განვითარებას, მაგრამ ამ დროისთვის, ზუსტ დეტალებზე ზრუნავს.

რედაქტორების რეკომენდაციები

• Samsung-მა ახლახან მოგვცა 3 დიდი Galaxy Unpacked თიზერი
• Asus-ის უახლესი Android ტელეფონი შეიძლება იყოს დიდი საფრთხე Galaxy S23 Ultra-სთვის
• აქ არის ჩვენი პირველი ნახვა Samsung Galaxy Tab S9 Plus-ზე
• Samsung-მა შესაძლოა ახლახან მოკლა Galaxy S10
• Samsung-ის Galaxy Tab S9-ს შეიძლება ჰქონდეს ფუნქცია, რომელიც iPad-ს არასდროს ჰქონია