Stanford's A.I. Παρακολουθεί το Muted Animation, Παίζει τον ήχο που θα έκανε

[SIGGRAPH 2018] [Highlights] Toward Wave-based Sound Synthesis for Computer Animation

Στις πρώτες μέρες του κινηματογράφου, οι οργανοπαίκτες πρόσθεταν ηχητικά εφέ στις βωβές ταινίες παίζοντας μαζί με οτιδήποτε συνέβαινε στην οθόνη. Μεταβείτε στο 2018 και μια παραλλαγή αυτής της ιδέας αποτελεί τη βάση της νέας εργασίας που πραγματοποιήθηκε από επιστήμονες υπολογιστών του Πανεπιστημίου Στάνφορντ. Έχουν αναπτύξει ένα τεχνητή νοημοσύνη σύστημα που είναι σε θέση να συνθέτει ρεαλιστικούς ήχους για κινούμενα σχέδια υπολογιστή βασισμένο αποκλειστικά στις εικόνες που βλέπει και στις γνώσεις του για τον φυσικό κόσμο. Τα αποτελέσματα είναι συνθετικοί ήχοι με το πάτημα ενός κουμπιού.

Προτεινόμενα βίντεο

«Έχουμε αναπτύξει το πρώτο σύστημα αυτόματης σύνθεσης ήχων που θα συνοδεύει κινούμενα σχέδια υπολογιστών που βασίζονται στη φυσική». Jui-Hsien Wang, μεταπτυχιακός φοιτητής στο Ινστιτούτο Υπολογιστικής και Μαθηματικής Μηχανικής του Στάνφορντ (ICME), δήλωσε στο Digital Trends. «Η προσέγγισή μας είναι γενική, [που σημαίνει ότι] μπορεί να υπολογίσει ρεαλιστικές πηγές ήχου για ένα ευρύ φάσμα κινούμενων εικόνων φαινόμενα — όπως στερεά σώματα όπως ένα κεραμικό μπολ ή ένα εύκαμπτο κύμβαλο, καθώς και υγρό που χύνεται μέσα ένα φλιτζάνι."

Η τεχνολογία που κάνει το σύστημα να λειτουργεί είναι αρκετά έξυπνη. Λαμβάνει υπόψη τη διαφορετική θέση των αντικειμένων στη σκηνή όπως συναρμολογούνται κατά τη διαδικασία τρισδιάστατης μοντελοποίησης. Προσδιορίζει τι είναι αυτά και στη συνέχεια προβλέπει πώς θα επηρεάσουν τους ήχους που παράγονται, είτε πρόκειται για ανάκλαση, διάχυση, r ή περίθλασή τους.

Σχετίζεται με

  • Η αστεία φόρμουλα: Γιατί το χιούμορ που δημιουργείται από μηχανή είναι το ιερό δισκοπότηρο του A.I.
  • Η νέα φωνή της Nvidia A.I. ακούγεται σαν πραγματικό άτομο
  • Μπορεί η A.I. νικήσει τους ανθρώπους μηχανικούς στο σχεδιασμό μικροτσίπ; Η Google το πιστεύει

«Το καλό με την προσέγγισή μας είναι ότι δεν απαιτούνται δεδομένα εκπαίδευσης», συνέχισε ο Wang. "Προομοιώνει τον ήχο από τις πρώτες φυσικές αρχές."

Εκτός από τη γρήγορη προσθήκη ηχητικών εφέ σε ταινίες κινουμένων σχεδίων, η τεχνολογία θα μπορούσε επίσης ημέρα να χρησιμοποιηθεί για να βοηθήσει τους σχεδιαστές να καταλάβουν πώς θα ακούγονται τα προϊόντα προτού γίνουν σωματικά που παράγονται.

Δεν υπάρχει καμία πληροφορία για το πότε αυτό το εργαλείο θα μπορούσε να δημοσιοποιηθεί, αλλά ο Wang είπε ότι η ομάδα αυτή τη στιγμή «διερευνά επιλογές για να κάνει το εργαλείο προσβάσιμο». Πριν από αυτό φτάνει σε αυτό το σημείο, ωστόσο, οι ερευνητές θέλουν να βελτιώσουν την ικανότητα του συστήματος να μοντελοποιεί πιο σύνθετα αντικείμενα, όπως οι πλούσιοι αντηχούμενοι τόνοι ενός Stradivarius βιολί.

Η έρευνα πρόκειται να παρουσιαστεί ως μέρος του ACM SIGGRAPH 2018, του κορυφαίου συνεδρίου στον κόσμο για τα γραφικά υπολογιστών και τις διαδραστικές τεχνικές. Αφιερώστε λίγο χρόνο για να λυπηθείτε για τον φτωχό καλλιτέχνη της Pixar Foley στο πίσω μέρος της αίθουσας που μόλις αγόρασε ένα νέο σπίτι!

Συστάσεις των συντακτών

  • Αναλογικό A.I.; Ακούγεται τρελό, αλλά μπορεί να είναι το μέλλον
  • Το τελευταίο A.I της Nvidia. Τα αποτελέσματα αποδεικνύουν ότι η ARM είναι έτοιμη για το κέντρο δεδομένων
  • Η Nvidia χαμηλώνει το εμπόδιο για την είσοδο στο A.I. με το Fleet Command και το LaunchPad
  • Διαβάστε την απόκοσμα όμορφη «συνθετική γραφή» ενός A.I. που νομίζει ότι είναι Θεός
  • Το LaMDA της Google είναι μια έξυπνη γλώσσα A.I. για καλύτερη κατανόηση της συζήτησης

Αναβαθμίστε τον τρόπο ζωής σαςΤο Digital Trends βοηθά τους αναγνώστες να παρακολουθούν τον γρήγορο κόσμο της τεχνολογίας με όλα τα τελευταία νέα, διασκεδαστικές κριτικές προϊόντων, διορατικά editorial και μοναδικές κρυφές ματιές.