Η Nvidia προσπαθεί να βελτιώσει τις βιντεοκλήσεις μέσω AI

[Crash24]

Η πλατφόρμα Maxine μπορεί να μειώσει σημαντικά το bandwidth και να αυξήσει την οπτικοακουστική ποιότητα - μέχρι και να εισάγει AI avatar στην κλήση.

Χρησιμοποιώντας την cloud AI streaming πλατφόρμα Nvidia Maxine, η εταιρεία στοχεύει στη βελτίωση των βιντεοκλήσεων που, ελέω Covid-19, έχουν γίνει απαραίτητες για την καθημερινότητα πολλών.

Μέσω αυτής και της σουίτας εργαλείων που παρέχει για τους developers, τα αποτελέσματα μπορούν να είναι εντυπωσιακά. Μια από τις κυριότερες βελτιώσεις που προσφέρει είναι η αύξηση της ανάλυσης και βελτίωση της ποιότητας εικόνας, ενώ εξίσου σημαντική είναι η τεχνολογία αφαίρεσης θορύβων μέσω επεξεργασίας του ήχου - με λίγα λόγια, δεν είναι απαραίτητο να υποστηρίζεται ως τεχνολογία από το μικρόφωνο του χρήστη.

Επιπροσθέτως, προσφέρει τη δυνατότητα να τοποθετήσει τον χρήστη στο κέντρο του κάδρου αν η θέση του παρεκλίνει από αυτό, όπως και να προσαρμόσει το πρόσωπο ώστε να εμφανίζεται κεντραρισμένο και προς την κάμερα σε περίπτωση που η κάμερα «βλέπει» τον χρήστη από πλάγια θέση. Αν αυτό δεν είναι αρκετό, τότε ένα AI avatar μπορεί να πάρει τη θέση του χρήστη στις κλήσεις ή να προσθέσει ψηφιακά backgrounds. Σε άλλου είδους παροχές, αυτές της προσβασιμότητας, προσφέρει κάτι ιδιαίτερα χρήσιμο: υπότιτλους και μετάφραση σε πραγματικό χρόνο, σε συνεργασία με το Nvidia Jarvis.

Τέλος, η εταιρεία αναφέρει πως μέσω της συμπίεσης βίντεο της Maxine, το bandwidth μπορεί να μειωθεί έως και 90% σε σύγκριση με την συμπίεση H.264, ώστε οι κλήσεις να καταναλώνουν αισθητά χαμηλότερα δεδομένα. Για να πετύχει όλα τα παραπάνω, η Maxine χρησιμοποιεί Nvidia Tensor Core GPU acceleration και στηρίζεται στο cloud, καταφέρνοντας να είναι διαθέσιμη για πλήθος συσκευών και να μην απαιτείται ισχυρό hardware για την υποστήριξή της.

Σε περίπτωση που κάποιος θέλει να έχει πρόωρη πρόσβαση στην Maxine ως developer, μπορεί να εκδηλώσει το ενδιαφέρον του στη σχετική σελίδα.

Διαβάστε ολόκληρο το άρθρο

[busellatos]

Κλείσε να αναψω την ,RTX3900 και σε ξαναπερνω. 

Με πήρες τηλέφωνο χθες; Οχι η ai ηταν με το avatar μου

[Pokemon640]

Ωραία, τώρα θα μπορώ να κάνω βίντεο κλήση με pstn σύνδεση αφού λέει για χαμηλό bandwidth 😂

[Vassilis_24]

Ενδιαφέρον δείχνει.
Αρκεί να μην απαιτεί πολύ δυνατά μηχανήματα, εδώ τώρα το Zoom π.χ. δεν υποστηρίζει αλλαγή Background αν δεν έχεις καλή κάρτα γραφικών.
Ξέρουμε κάποια εταιρεία που θα ξεκινήσει συνεργασία με τη Maxine;

Επεξ/σία 8 Οκτωβρίου 2020 από Vassilis_24

[pao13]

θες δεν θες εεεκεεεί   κεντραρισμένος και όμορφος όπως πρέπει 

[skiabox]

28 λεπτά πριν, Vassilis_24 είπε

Ενδιαφέρον δείχνει.
Αρκεί να μην απαιτεί πολύ δυνατά μηχανήματα, εδώ τώρα το Zoom π.χ. δεν υποστηρίζει αλλαγή Background αν δεν έχεις καλή κάρτα γραφικών.
Ξέρουμε κάποια εταιρεία που θα ξεκινήσει συνεργασία με τη Maxine;

Αν κατάλαβα καλά η επεξεργασία θα γίνεται στο cloud.

[tsarouc]

Απλά απίστευτη τεχνολογία. Η Nvidia φέρνει το μέλλον πολύ γρήγορα. Λογισμικό θέλω να δω και γρήγορα!. 

10 ώρες πριν, skiabox είπε

Αν κατάλαβα καλά η επεξεργασία θα γίνεται στο cloud.

Εγώ κατάλαβα εν μέρη θα γίνεται στο σύννεφο. Εφόσον λέει χρησιμοποιεί τένσορ πυρήνες. 

Να υποθέσω ότι instagram, TikTok, Messenger κλπ χρησιμοποιούν κάποια παρόμοια engine μην πω την συγκεκριμένη έστω και πειραματικά?

 

[Sacadmerde]

45 λεπτά πριν, tsarouc είπε

τένσορ πυρήνες

Tensor είναι κάτι πολύ συγκεκριμένο στο context του computer science/maths/physics/natural sciences εν γένει. Αυτό που (εσφαλμένα) αναφέρεις ως "tensor πυρήνες" δεν υπάρχει. Υπάρχουν όμως processors οι οποίοι έχουν σχεδιαστεί με σκοπό να επιταγχύνουν την επεξεργασία αυτών των μαθηματικών κατασκευασμάτων (ήτοι, των tensors). 

Δυστυχώς δεν γνωρίζω την ελληνική ορολογία. 

50 λεπτά πριν, tsarouc είπε

Εγώ κατάλαβα εν μέρη θα γίνεται στο σύννεφο

Ακριβώς. 

Η σύνθεση του "κανονικού" video (δηλαδή, η αποσυμπίεση) θα γίνεται τοπικά. Τα video call features θα υλοποιούνται στη πλατφόρμα της NVIDIA, ενώ δεν είναι καθαρό εάν θα στέλνεται στην πλατφόρμα το "κανονικό" video από κάποιον ή θα γίνεται η συμπίεση τοπικά επίσης. 

[KnightRider]

Αργησαν λιγο...

Καλο μεν αλλα δεν θα ειναι 100% καλο + ολα θα φαινονται καπως ψευτικα (φαινεται αν ειναι AI)

Οσο για το compression θα μπορουσαν να χρησιμοποιησουν h265 και ηχο AAC Plus (το χω παραπονο εδω και μερικα χρονια με το θεμα κλησεων που εξακολουθουν σε αρκετα προγραμματα βιντεοκλησεων να χρησιμοποιουν κατι αθλιους codecs ή ακυρα τιμες bitrate κλπ)

Επεξ/σία 9 Οκτωβρίου 2020 από KnightRider

[Dudadidos]

Γιατί άραγε όλα να γίνονται στο cloud ? Δεν ειναι λιγο ύποπτο ? Και μην αρχισετε ορισμενοι να λετε '' εχεις εσυ 500.000 RΤΧ3080Τi σπιτι σου μηπως ? κτλ κτλ...'' . Καταλαβετε επιτελους πως ό,τι υπαρχει στο cloud δεν ειναι δικό σας και μπορουν να το σταματήσουν ή να το ελέχγουν και φυσικά να το γνωρίζουν, ανά πάσα στιγμή. Σας δελεάζουν με καλουδια αλλά γιατί ? Εχετε αναρωτηθεί ποτέ ? Είναι σα να σου λένε " θα σου δώσουμε τη γυναικα των ονειρων σου αλλά θα την εχεις με συμβαση μαζί μας, θα τη μοιράζεσαι απλά με καμιά 10.000.000 ακομα λιγούρια Α και όποτε θέλουμε την αποσύρουμε." Όχι και το πιο επιτυχημενο παραδειγμα, αλλά κατι τετοιο συμβαινει. Καταλάβετέ το. Σε λίγο δεν θα μπορούμε να παιζουμε παιχνιδια μονοι μας, θα βασιζονται όλα σε καποιους σερβερς, ηδη γινεται αυτο αν δεν εχεις ιντερνετ δεν μπορεις να παιξεις, πού ακουστηκε αυτο για single mode ?? Σας αρεσει δλδ αυτη η κατάσταση ? Εμένα με τρομάζει...

 

Είστε ακομα σίγουροι πως τα θέλετε όλα κοινά ?

[Sacadmerde]

2 λεπτά πριν, Dudadidos είπε

Γιατί άραγε όλα να γίνονται στο cloud ? Δεν ειναι λιγο ύποπτο ? Και μην αρχισετε ορισμενοι να λετε '' εχεις εσυ 500.000 RΤΧ3080Τi σπιτι σου μηπως ? κτλ κτλ...'' . Καταλαβετε επιτελους πως ό,τι υπαρχει στο cloud δεν ειναι δικό σας και μπορουν να το σταματήσουν ή να το ελέχγουν και φυσικά να το γνωρίζουν, ανά πάσα στιγμή. Σας δελεάζουν με καλουδια αλλά γιατί ? Εχετε αναρωτηθεί ποτέ ? Είναι σα να σου λένε " θα σου δώσουμε τη γυναικα των ονειρων σου αλλά θα την εχεις με συμβαση μαζί μας, θα τη μοιράζεσαι απλά με καμιά 10.000.000 ακομα λιγούρια Α και όποτε θέλουμε την αποσύρουμε." Όχι και το πιο επιτυχημενο παραδειγμα, αλλά κατι τετοιο συμβαινει. Καταλάβετέ το. Σε λίγο δεν θα μπορούμε να παιζουμε παιχνιδια μονοι μας, θα βασιζονται όλα σε καποιους σερβερς, ηδη γινεται αυτο αν δεν εχεις ιντερνετ δεν μπορεις να παιξεις, πού ακουστηκε αυτο για single mode ?? Σας αρεσει δλδ αυτη η κατάσταση ? Εμένα με τρομάζει...

Είστε ακομα σίγουροι πως τα θέλετε όλα κοινά ?

Αυτό που γράφεις δεν έχει καμία σύνδεση με την πραγματικότητα και βρίθει από τεχνολογικό και επιστημονικό αναλφαβητισμό, ιδιαίτερα για το συγκεκριμένο θέμα. 

Όπως και οι ίδιοι γράφουν, στο cloud θα γίνεται η επεξεργασία των δεδομένων για να υλοποιηθούν effects και άλλα καλούδια κατά το video call. Ο λόγος που το κάνουν εκεί είναι γιατί:

α) Σιγά μην δώσουν τον αλγόριθμο στον καθένα για να τον μάθει. Επειδή, προφανέστατα, έχεις άγνοια του επιστημονικού υπόβαθρου που χρειάζεται για αυτή την υπηρεσία, ο αλγόριθμος και το σύστημα που έχουν μπορεί να αντιγραφεί εάν δώσουν την δυνατότητα να το κάνει ο καθένας στον υπολογιστή του. 

β) Ακόμα και εάν η NVIDIA αποφάσιζε να δώσει το σύστημα σε όλους (με τον κίνδυνο που αναφέρεται από πάνω), είναι αρκετά πιθανό να μην έχεις στον υπολογιστή σου τους πόρους για να κάνεις την επεξεργασία που χρειάζεται. Αυτό σημαίνει ότι υπάρχει μεγάλη πιθανότητα να μην γίνεται σωστά η διαδικασία και τύποι σαν και εσένα (με μηδενική γνώση του τι γίνεται στο υπόβαθρο) να αρχίζουν να κατηγορούν την τεχνολογία της NVIDIA. 

Τέλος, το ότι είναι στο cloud δεν είναι κοινό. Δεν ξέρω από πού το συμπέρανες αυτό, αλλά είναι εντελώς λάθος. 

46 λεπτά πριν, KnightRider είπε

Καλο μεν αλλα δεν θα ειναι 100% καλο + ολα θα φαινονται καπως ψευτικα (φαινεται αν ειναι AI)

Από πού αντλείς αυτή την σιγουριά; Το είδες και το τέσταρες; Ή βασίζεσαι σε ό,τι έχεις δει μέχρι τώρα; 

Εάν είναι το τελευταίο, πόσο στενή επαφή έχεις με την έρευνα που γίνεται σε αυτό τον τομέα και συγκεκριμένα με την έρευνα στην NVIDIA;

[Dudadidos]

18 λεπτά πριν, Sacadmerde είπε

α) Σιγά μην δώσουν τον αλγόριθμο στον καθένα για να τον μάθει. Επειδή, προφανέστατα, έχεις άγνοια του επιστημονικού υπόβαθρου που χρειάζεται για αυτή την υπηρεσία, ο αλγόριθμος και το σύστημα που έχουν μπορεί να αντιγραφεί εάν δώσουν την δυνατότητα να το κάνει ο καθένας στον υπολογιστή του.

Εσυ εχεις ακουσει για .exe αρχεια που ειναι δυαδικά , χρησιμοποιούνται εδώ και 40 χρόνια, και δεν αντιγράφονται ? Αρλούμπες λες , αυτο είναι όλο

 

20 λεπτά πριν, Sacadmerde είπε

Τέλος, το ότι είναι στο cloud δεν είναι κοινό. Δεν ξέρω από πού το συμπέρανες αυτό, αλλά είναι εντελώς λάθος. 

Τα παντα γίνονται στο cloud στις μέρες μας , ζεις σε αυτόν τον πλανήτη ή μηπως και εσύ ζεις στο cloud ?

[Sacadmerde]

19 λεπτά πριν, Dudadidos είπε

Εσυ εχεις ακουσει για .exe αρχεια που ειναι δυαδικά , χρησιμοποιούνται εδώ και 40 χρόνια, και δεν αντιγράφονται ? Αρλούμπες λες , αυτο είναι όλο

Το γεγονός ότι εγώ κάνω λόγο για αλγόριθμο και εσύ το μεταφράζεις σε αρχεία .exe, δείχνει όσο τίποτα άλλο πόσο άγνοια έχεις πάνω στο θέμα. Φυσικά και δεν θα σπαταλήσω τον χρόνο μου να σου εξηγήσω, αφενός γιατί πασιφανέστατα είσαι άσχετος με το τι τρέχει και τι γίνεται, και αφετέρου γιατί το να καταλάβει κανείς αυτά που θα σου εξηγούσα, απαιτείται και ένα εκπαιδευτικό υπόβαθρο (που φυσικά και δεν διαθέτεις). 

21 λεπτά πριν, Dudadidos είπε

Τα παντα γίνονται στο cloud στις μέρες μας , ζεις σε αυτόν τον πλανήτη ή μηπως και εσύ ζεις στο cloud ?

Πώς το "τα πάντα γίνονται στο cloud" είναι ίσο/ίδιο/συνώνυμο με το "όλα κοινά"; 

Παρόλο που το λένε cloud, δεν είναι σαν τα σύννεφα για να βλέπουν όλοι τι γίνεται μέσα τους. Μην σε μπερδεύει το ότι λέγεται cloud. Δεν είναι ούτε και μοιάζει σε σύννεφο. 

[Pokemon640]

1 ώρα πριν, KnightRider είπε

Αργησαν λιγο...

Καλο μεν αλλα δεν θα ειναι 100% καλο + ολα θα φαινονται καπως ψευτικα (φαινεται αν ειναι AI)

Οσο για το compression θα μπορουσαν να χρησιμοποιησουν h265 και ηχο AAC Plus (το χω παραπονο εδω και μερικα χρονια με το θεμα κλησεων που εξακολουθουν σε αρκετα προγραμματα βιντεοκλησεων να χρησιμοποιουν κατι αθλιους codecs ή ακυρα τιμες bitrate κλπ)

Ο h265 ειδικά έχει ακριβή άδεια χρήσης. Ότι υπάρχει δωρεάν χρησιμοποιείται (στα δωρεάν προγράμματα).

[Dudadidos]

53 λεπτά πριν, Sacadmerde είπε

Το γεγονός ότι εγώ κάνω λόγο για αλγόριθμο και εσύ το μεταφράζεις σε αρχεία .exe, δείχνει όσο τίποτα άλλο πόσο άγνοια έχεις πάνω στο θέμα. Φυσικά και δεν θα σπαταλήσω τον χρόνο μου να σου εξηγήσω, αφενός γιατί πασιφανέστατα είσαι άσχετος με το τι τρέχει και τι γίνεται, και αφετέρου γιατί το να καταλάβει κανείς αυτά που θα σου εξηγούσα, απαιτείται και ένα εκπαιδευτικό υπόβαθρο (που φυσικά και δεν διαθέτεις). 

Πώς το "τα πάντα γίνονται στο cloud" είναι ίσο/ίδιο/συνώνυμο με το "όλα κοινά"; 

Παρόλο που το λένε cloud, δεν είναι σαν τα σύννεφα για να βλέπουν όλοι τι γίνεται μέσα τους. Μην σε μπερδεύει το ότι λέγεται cloud. Δεν είναι ούτε και μοιάζει σε σύννεφο. 

Δεν θα ασχοληθω αλλο μαζι σου... μαλλον εισαι τοσο πολυ εξυπνος που δεν με καταλαβαινεις, οπότε να μη σπαταλας και συ το χρονο σου και εγω... πανε ακου καμια διαλεξη του MIT να μαθεις κατι και σημερα, να μην παει αδικα η μερα σου.