Skip to main content
Μεταγλώττιση με AI: Το νέο εντυπωσιακό εργαλείο τεχνητής νοημοσύνης από την Deepdub
Μεταγλώττιση με AI: Το νέο εντυπωσιακό εργαλείο τεχνητής νοημοσύνης από την Deepdub
Μεταγλώττιση με AI: Το νέο εντυπωσιακό εργαλείο τεχνητής νοημοσύνης από την Deepdub
Μεταγλώττιση με AI: Το νέο εντυπωσιακό εργαλείο τεχνητής νοημοσύνης από την Deepdub
30 Μαρτίου 2024

Μεταγλώττιση με AI: Το νέο εντυπωσιακό εργαλείο τεχνητής νοημοσύνης από την Deepdub

Deepdub: Η startup εταιρία κυκλοφόρησε το Accent Control, ένα εργαλείο μεταγλώττισης AI ικανό να ταιριάζει με την προφορά του αρχικού ηθοποιού

Αν κάτι πολλοί από εμάς απολαμβάνουμε, είναι η παρακολούθηση σειρών και ταινιών, τόσο ελληνικών όσο και ξένων παραγωγών. Ορισμένοι μάλιστα είναι αρκετά εξοικειωμένοι με την αγγλική γλώσσα και δεν έχουν ανάγκη ούτε τους υπότιτλους. Κάποιοι άλλοι ωστόσο δεν τους αποχωριζόμαστε εύκολα, με αποτέλεσμα συχνά το ένα μάτι να προσπαθεί να παρακολουθήσει την ταινία και το άλλο να διαβάζει τους μεταφρασμένους διαλόγους για να καταλάβουμε τι πραγματικά συμβαίνει. Οι μεταγλωττίσεις ήταν μια λύση για το πρόβλημα αυτό, ωστόσο δεν είναι λίγες οι περιπτώσεις που το στόμα των ηθοποιών δεν συγχρονίζεται με τα λόγια – αγαπημένο παράδειγμα οι μεξικάνικες σειρές – προκαλώντας στο κοινό γέλιο, μέχρι και αμηχανία, για αυτό που βλέπει.

Σε μια εποχή που το streaming αποτελεί μέρος της καθημερινότητας πολλών, με σειρές και ταινίες να ενώνουν θεατές από όλο τον κόσμο, το ζήτημα των γλωσσικών περιορισμών δεν έχει αντιμετωπιστεί ακόμα πλήρως. Για αυτό και η startup τεχνολογίας ήχου Deepdub που ιδρύθηκε το 2019, αποφασίζει με τη βοήθεια τεχνητής νοημοσύνης να συμβάλλει σε μια πιο προσιτή ψυχαγωγία. Με χρήση συναισθηματικού μοντέλου κειμένου σε ομιλία (eTTS) 2.0 και πολυτροπικό μοντέλο Large Language που υποστηρίζει περισσότερες από 130 γλώσσες, μας παρουσιάζει το εργαλείο Accent Control. Ένα εργαλείο μεταγλώττισης AI ικανό να προσαρμόζεται με την προφορά του αρχικού ηθοποιού.

Τι είναι το συναισθηματικό και πολυτροπικό μοντέλο;
Η αλήθεια είναι πως από τότε που εμφανίστηκε η τεχνητή νοημοσύνη, ερχόμαστε αντιμέτωποι με όλο και περισσότερες άγνωστες λέξεις και έννοιες. Όσον αφορά στο συναισθηματικό μοντέλο κειμένου σε ομιλία (emotional Text-to-Speech, eTTS) 2.0 πρόκειται για μια τεχνολογία που καταφέρνει να παράγει ομιλία με εκφραστικότητα, χωρίς δηλαδή να ακούγεται ένας «τυποποιημένο» λόγος. Έτσι τα συστήματα TTS (Text-to-Speech) μεταφέρουν το περιεχόμενο του κειμένου σε συνδυασμό με την απόδοσή του, προσθέτοντας φυσικότητα στη φωνητική αναπαραγωγή. Συγκεκριμένα το eTTS 2.0, έρχεται για να βελτιώσει ακόμα περισσότερο την ποιότητα του παραγόμενου λόγου, χρησιμοποιώντας μοντέλα μηχανικής μάθησης (machine learning) για βέλτιστη κατανόηση και αποτελέσματα. Όσον αφορά στο πολυτροπικό μοντέλο Large Language (Multi-Topic Large Language Model), αποτελεί ένα μοντέλο γλωσσικής επεξεργασίας, το οποίο παράγει κείμενο και γνωρίζει πώς να ανταποκριθεί σε ερωτήσεις γύρω από διαφορετικά θέματα. Σκεφτείτε δηλαδή τον τρόπο που λειτουργεί το chatGPT.

Στούντιο Deepdub GO
Το λογισμικό φωνής και μεταγλώττισης της Deepdub το εμπιστεύεται ήδη ένα ποσοστό της βιομηχανίας του Χόλιγουντ, αλλά και οι υπηρεσίες ροής, καθώς προσφέρεται για οποιαδήποτε μορφή και πλατφόρμα εικόνας και ήχου. Από περιεχόμενο στο YouTube μέχρι βιντεοπαιχνίδια. Αυτό που παρέχει η συγκεκριμένη εταιρία είναι προσαρμοσμένα μοντέλα τεχνητής νοημοσύνης, μέσω των οποίων ελέγχονται οι τόνοι, η χροιά των ηθοποιών όταν φτάνει η στιγμή της μεταγλώττισης. Αυτή τη φορά μπορούμε να δούμε αγαπημένους ηθοποιούς να αλλάζουν εθνικότητα διατηρώντας τη φωνή τους, προσδίδοντας ένα πιο φυσικό αποτέλεσμα δίχως να στερεί από την πρωτότυπη ερμηνεία.

Η συγκεκριμένη τεχνολογία χρησιμοποιείται μέσω του Deepdub GO, του εικονικού στούντιο που έχει δημιουργήσει η εταιρία, επιτρέποντας σε συντάκτες να αξιοποιήσουν στο έπακρο τις δυνατότητες μεταγλώττισης AI. Χάρη στο Deepdub GO μεταγλωττίστηκαν εκπομπές κυρίως στα Αγγλικά, καταφέρνοντας να διατηρηθεί η εκφραστικότητα και συναισθηματική απόδοση των προσώπων. Ο ομιλητής ηχογραφεί όλα όσα θέλει να επικοινωνήσει στη μητρική του γλώσσα και έπειτα η τεχνητή νοημοσύνη κάνει τα μαγικά της. Η φωνή μένει ίδια αλλά η γλώσσα αλλάζει.

Λειτουργία Accent Control
Για την απόλυτη εμπειρία μεταγλώττισης και διατήρηση της εκφραστικότητας, η Deepdub κυκλοφόρησε πρόσφατα τη λειτουργία Accent Control. Μέχρι τώρα το λογισμικό της συγκεκριμένης εταιρίας ήξερε πώς να αλλάζει με μαεστρία τη γλώσσα του ομιλητή, τώρα όμως αλλάζει μέχρι και την προφορά, θέλοντας να πετύχει την απόλυτη γλωσσική συμφωνία. Φανταστείτε για παράδειγμα το cast του Harry Potter – γνωστό για τη Βρετανική προφορά του – ξαφνικά να αρχίσει να μιλάει με αυστραλιανή προφορά. Η νέα λειτουργία μεταγλώττισης AI με συναισθηματικό και πολυτροπικό μοντέλο, φαίνεται πολλά υποσχόμενη για το χώρο του θεάματος.

Τεχνολογία LipDub AI
Πρόσφατα μάλιστα η εταιρία του Καναδού επιχειρηματία Bronfman κινήθηκε σε παρόμοια λογική, λανσάροντας την τεχνολογία LipDub AI με στόχο τον συντονισμό χειλιών και μεταγλωττισμένων διαλόγων. Η συγκεκριμένη τεχνολογία έχει εκπαιδευτεί για να χειρίζεται της εκφράσεις των ηθοποιών και να τις προσαρμόζει σε διαφορετικές ξένες λέξεις και διαλέκτους. Είχε ήδη εμφανιστεί το 2020 μέσω μοντέλου τεχνητής νοημοσύνης ανοιχτού κώδικα (Wav2Lip) από ερευνητές του Διεθνούς Ινστιτούτου Τεχνολογίας Πληροφορικής του Χαϊντεραμπάντ, ερχόμενη σήμερα με το LipDub AI ως εξέλιξη του μοντέλου.

Κάπως έτσι Bronfman και Deepdub ενισχύουν την εργαλειοθήκη της τεχνητής νοημοσύνης και αναδιαμορφώνουν τον κόσμο της ψυχαγωγίας και της επικοινωνίας. Ίσως η τεχνολογία ΑΙ έχει να προσφέρει πολλά περισσότερα από όσα νομίζουμε, αρκεί να χρησιμοποιηθεί σωστά και κυρίως ηθικά.

Πηγή: https://www.athensvoice.gr

  • YOU
  • YOU
  • YOU
  • YOU
  • YOU
  • YOU
  • YOU
  • YOU

ΕΝΔΙΑΦΕΡΟΝΤΑ

Αποκαθίσταται ύστερα από πέντε μήνες η επικοινωνία της NASA με το Voyager 1

Το διαστημικό σκάφος απέχει περίπου 24 δισεκατομμύρια χιλιόμετρα από τη Γη NASA: Αποκαθίστατα…

Πάσχα στην Κέρκυρα: Οι λειτουργίες και τα έθιμα

Τι να δεις και τι να κάνεις τη Μεγάλη Εβδομάδα. Πάσχα στην Κέρκυρα: Οι παραδόσεις και τα μονα…

Η «Οικογένεια Τσέντσι» της Ιόλης Ανδρεάδη ταξιδεύει στη Νέα Υόρκη

Διεθνής διάκριση για το ελληνικό θέατρο που σηκώνει αυλαία τον Μάιο στο The Tank Theater Μετά…

Πηνελόπη Δέλτα: 150 χρόνια από τη γέννησή της

Πέντε σημαντικοί άνθρωποι από τον χώρο της λογοτεχνίας και του βιβλίου μιλούν στην Athens Voice …

Οδηγίες του υπουργείου Υγείας για την προστασία από την αφρικανική σκόνη

Συστάσεις για την προστασία από την αφρικανική σκόνη εξέδωσε το υπουργείο Υγείας.  Πρόκειται …

Επίδομα θέρμανσης: Πότε καταβάλλεται η τρίτη δόση

Μέχρι 30 Απριλίου αναμένεται να πραγματοποιηθούν οι πληρωμές της τρίτης δόσης για το επίδομα θέρ…
  • YOU
  • YOU
  • YOU
  • YOU

ΕΚΔΗΛΩΣΕΙΣ

23 Απριλίου 2024

Πρόσκληση για κατασκευή πασχαλινού καλαθιού

Δείτε παρακάτω την σχετική πρόσκληση από την ΚΕΘΕΑ και το Κέντρο Κοινότητας με Παράρτημα Ρομά Δή…
22 Απριλίου 2024

Επέστρεψε στην Κεφαλονιά το 2o Σχολείο Τουρισμού OnTour @Κέφαλος [22.04.2024]

Το 2o Σχολείο Τουρισμού OnTour επέστρεψε στην Κεφαλονιά, μετά από πέντε χρόνια στην προσφέροντας…
20 Απριλίου 2024

Σταύρος Νιφοράτος: Μια μαγευτική συναυλία που ενθουσίασε και μας έκανε όλους ένα.. @Κέφαλος [20.04.2024]

Πραγματοποιήθηκε με επιτυχία σήμερα το απόγευμα στο γνωστό σε όλους μας Δημοτικό Θέατρο Αργοστολ…
18 Απριλίου 2024

1η ημερίδα καλαθοσφαίρισης Κεφαλονιά 2024

Ο προπονητής της Εθνικής Ομάδας Παίδων Γιάννης Καλαμπόκης και ο προπονητής της Εθνικής Ομάδας Νέ…
  • YOU
  • YOU
  • YOU
  • YOU

ΑΦΙΕΡΩΜΑΤΑ

«Τρυπώσαμε» στις πρόβες της θεατρικής παράστασης «Η Τελετή»
20 Μαρτίου 2024

«Τρυπώσαμε» στις πρόβες της θεατρικής παράστασης «Η Τελετή»

ΘΕΑΤΡΙΚΗ ΠΑΡΑΣΤΑΣΗ «Η ΤΕΛΕΤΗ» Παρασκευή 22, Σάββατο 23 & Κυριακή 24 Μαρτίου και ώρα 21:00…
Οι πειρατές της Καραϊβικής κάνουν απόβαση στο Αργοστόλι στο κατάστημα Loukoumania
23 Φεβρουαρίου 2024

Οι πειρατές της Καραϊβικής κάνουν απόβαση στο Αργοστόλι στο κατάστημα Loukoumania

Οι πειρατές της Καραϊβικής φέτος βρέθηκαν στο Αργοστόλι …… και φυσικά μας βάζουν σε ρυθμ…
Στο κατάστημα Bio Market θα βρείτε πολλές επιλογές σε μπάρες πρωτεΐνης
23 Φεβρουαρίου 2024

Στο κατάστημα Bio Market θα βρείτε πολλές επιλογές σε μπάρες πρωτεΐνης

Στο κατάστημα Bio Market στο Αργοστόλι θα βρείτε πολλών ειδών μπάρες πρωτεΐνης σε διαφορετικές …
Eξαιρετικά δώρα για την ημέρα του Αγίου Βαλεντίνου από το κατάστημα «Scandalo»
13 Φεβρουαρίου 2024

Eξαιρετικά δώρα για την ημέρα του Αγίου Βαλεντίνου από το κατάστημα «Scandalo»

Στο κατάστημα  «Scandalo» στην πλατεία Καμπάνας θα βρείτε πολλές διαφορετικές και … ιδιαίτε…
  • YOU
  • YOU
  • YOU
  • YOU