Πίσω από τις σκηνές: Οι κάμερες Pixel της Google δεν προσπαθούν καθόλου να είναι κάμερες

Συγγραφέας: Peter Berry
Ημερομηνία Δημιουργίας: 12 Αύγουστος 2021
Ημερομηνία Ενημέρωσης: 1 Ιούλιος 2024
Anonim
MJC Stream: Видишь енота? А он есть! Главное об ML и компьютерном зрении
Βίντεο: MJC Stream: Видишь енота? А он есть! Главное об ML и компьютерном зрении

Περιεχόμενο

15 Οκτωβρίου 2019


Αν ψάχνετε για ένα smartphone με μια καλή κάμερα, δεν υπάρχει αμφιβολία ότι έχετε δει τις σειρές Pixel της Google σε μια λίστα με συστάσεις. Όλο το χρόνο, η Google έχει υπολογίσει πώς να κάνει μια φωτογραφική μηχανή που προσφέρει εξαιρετικά αποτελέσματα κάθε φορά. Από τον pixel-peeping tech blogger στον καθημερινό καταναλωτή, είναι δύσκολο να βρεθεί ένα άτομο που δεν αγαπά τις φωτογραφικές μηχανές του Pixel.

Εκτός, η Google δεν προσπαθεί να κάνει κάμερες. Προσπαθεί να κάνει μαγικό.


Πρόσφατα είχα την ευκαιρία να καθίσω μαζί με τους Marc Levoy και Isaac Reynolds - τα βασικά μυαλά πίσω από την απογοητευτική καμπίνα της σειράς Pixel. Είχαμε μακρές συνομιλίες για τα νέα χαρακτηριστικά της φωτογραφικής μηχανής Pixel 4, από τη βελτιωμένη Night Sight έως το WYSIWYG (που βλέπετε τι παίρνετε) σε πραγματικό χρόνο HDR + σκόπευτρο. Υπήρξε μια πολύ τεχνική συζήτηση για το πώς η Google επιτρέπει αυτές τις δυνατότητες, αλλά ένα πράγμα έγινε κρυστάλλινο μέχρι το τέλος. Η κάμερα Pixel της Google δεν πρόκειται να προσπαθήσει να γίνει κάμερα.


"Η βασική φιλοσοφία μας είναι να οικοδομήσουμε μια φωτογραφική μηχανή που κάνει μαγεία, που είναι αυτός ο συνδυασμός απλότητας και ποιότητας εικόνας", εξήγησε ο Reynolds, "Το Night Night Sight είναι ακόμα εκεί, το προεπιλεγμένο HDR + είναι ακόμα εκεί. Όλη η επεξεργασία που εκτελείται κάτω από την κουκούλα για να πάρετε μια μεγάλη φωτογραφία από την προεπιλεγμένη λειτουργία είναι ακόμα εκεί. Και έχουμε επίσης κάνει πολύ περισσότερη απλούστευση. "

Προεπιλεγμένη λειτουργία. Απλοποίηση. Μαγεία. Αυτές είναι φράσεις που χρησιμοποιεί η Google ως μέρος της βασικής της φιλοσοφίας για τη φωτογραφική μηχανή Pixel. Στο μυαλό του Levoy και του Reynold, η σύλληψη της στιγμής δεν χρειάζεται να είναι σχετικά με τις επιλογές κλήσεων και μενού ρυθμίσεων.Η Google δεν προσπαθεί να φτιάξει μια φωτογραφική μηχανή στο τηλέφωνό της, προσπαθεί να κατασκευάσει κάτι που κάνει σταθερά υπέροχες εικόνες έξω από την πύλη, με παραδοσιακά μέσα ή με άλλο τρόπο.

Αυτό που βλέπετε είναι αυτό που παίρνετε


Μία από τις νέες δυνατότητες του Pixel 4 είναι το WYSIWYG σκόπευτρο, πράγμα που σημαίνει ότι θα δείτε τα αποτελέσματα του HDR + προτού τραβήξετε τη φωτογραφία. Αυτό μπορεί να φαίνεται σαν ένα δευτερεύον χαρακτηριστικό, αλλά επιτρέπει ορισμένα πράγματα που απλά δεν είναι δυνατά σε μη υπολογιστικές κάμερες.

Ο στόχος αυτού του σκόπευτρο WYSIWYG είναι να μειώσει όσο το δυνατόν περισσότερο την αλληλεπίδραση των χρηστών. Με την εμφάνιση της εικόνας που προκύπτει, όταν ανοίγετε τη φωτογραφική μηχανή, θα ξέρετε αν παίρνετε μια ομαλή έκθεση αμέσως και μπορείτε απλά να εστιάσετε στο να καρφώσετε τη φωτογραφία σας.

"Αν δούμε ότι ο χρήστης χτυπούσε, γνωρίζουμε ότι η κάμερα δεν τους έδωσε αυτό που ήθελαν από την αρχή", συνεχίζει ο Reynolds. "Έτσι, μια βρύση, για μένα, είναι δυνητικά μια αποτυχία που θέλουμε να βελτιώσουμε . "

Τα παραδοσιακά συστήματα κάμερας είναι αρκετά κακά για να αποκτήσετε την εικόνα που θέλετε απ 'την κάμερα. Μπορείτε είτε να εκθέσετε για τα κυριώτερα σημεία και να ανασηκώσετε τις σκιές αργότερα, είτε να εκθέσετε τις σκιές αλλά να σβήσετε τα κυριώτερα σημεία. Χάρη στην τεχνολογία, μπορούμε να κάνουμε και τα δύο, και αυτό είναι όπου η υπολογιστική φωτογραφία αρχίζει πραγματικά να κάνει αυτή τη μαγεία να συμβεί.

"Έχοντας ένα WYSIWYG σκόπευτρο τώρα σημαίνει ότι μπορούμε να ξανασκεφτούμε τον τρόπο που ελέγχετε την έκθεση στην κάμερα, αν θέλετε", λέει ο Levoy, "οπότε αν κάνετε βρύση, ενώ προτού να πάρετε ένα ρυθμιστικό αντιστάθμισης έκθεσης, τώρα έχετε δύο ολισθητήρες. Ονομάζουμε αυτό το χαρακτηριστικό Έλεγχος διπλής έκθεσης. Και θα μπορούσε να είναι τα σημεία και οι σκιές. Θα μπορούσε να είναι η φωτεινότητα και η δυναμική εμβέλεια. Υπάρχουν πολλοί τρόποι με τους οποίους θα μπορούσατε να κάνετε αυτές τις δύο μεταβλητές. Το έχουμε ρυθμίσει για να κάνουμε φωτεινότητα και σκιές. Και αυτό σας δίνει ένα είδος ελέγχου που κανείς δεν είχε ποτέ στην κάμερα πριν. "

Μπορείτε να επεξεργαστείτε τη φωτογραφία προτού τραβήξετε τη φωτογραφία.

Ο Levoy έχει δίκιο. Ο έλεγχος διπλής έκθεσης είναι κάτι που μπορεί να παραχθεί μόνο μέσω υπολογιστικής απεικόνισης. Ως βασική γραμμή, η εικόνα θα είναι ομοιόμορφη, με διατηρημένα σημεία και ορατές σκιές. Αλλά αν θέλετε, έχετε τη δύναμη να προσαρμόσετε ξεχωριστά τα σημεία και τις σκιές, προτού τραβήξετε τη φωτογραφία. Αυτό είναι κάτι που προηγουμένως θα μπορούσατε να κάνετε μόνο στο λογισμικό επεξεργασίας φωτογραφιών, αφού τραβήξετε τη φωτογραφία.

Η ομάδα του Levoy προσπαθεί να δει πέρα ​​από τους περιορισμούς της παραδοσιακής φωτογραφικής μηχανής εστιάζοντας τις προσπάθειές της στους περιορισμούς που έχουν οι παραδοσιακές κάμερες. Ενώ οι περισσότεροι κατασκευαστές εισάγουν λειτουργίες Pro για να σας δώσουν τον έλεγχο του ανοίγματος, της ταχύτητας κλείστρου και του ISO, η Google προσπαθεί αυτόματα να κάνει καλύτερη εικόνα από ό, τι θα μπορούσε, ακόμα κι αν είχατε τα σωστά αυτά κουμπιά.

Σκότωσε με μάθηση

Έτσι λοιπόν, ποιοι άλλοι τρόποι μπορούν να επεξεργαστούν υπολογιστικές απεικονίσεις εκτός των παραδοσιακών τεχνικών φωτογραφικών μηχανών; Φέτος, η ομάδα του Levoy αντιμετωπίζει το χαμηλό φωτισμό.

Το Pixel 4 εισάγει την ισορροπία λευκού με βάση τη μάθηση στο σύστημα κάμερας. Η λειτουργία αυτή βελτιώνει συνεχώς το χρώμα στις εικόνες σας, ακόμη και σε εξαιρετικά άσχημο φως. Η Google στοχεύει ειδικά στο χαμηλού φωτισμού και το κίτρινο φως και χρησιμοποιεί το φως του ατμού νατρίου ως παράδειγμα κάτι που προσπαθεί να διορθώσει, αλλά αποσκοπεί στην επίτευξη τέλειας ισορροπίας λευκού κάθε φορά.

Οι λαμπτήρες ατμού νατρίου είναι ένας τύπος λαμπτήρα αερίου που εκπέμπει σχεδόν μονόχρωμη επίδραση στα θέματα λόγω του εξαιρετικά στενού μήκους κύματος 589nm έως 589,3nm. Χρησιμοποιούνται επειδή είναι μια εξαιρετικά αποτελεσματική πηγή φωτός, έτσι θα το βλέπετε συχνά σε λαμπτήρες δρόμου ή σε άλλα φώτα που χρειάζονται για μεγάλο χρονικό διάστημα. Αυτή είναι μια από τις πιο δύσκολες καταστάσεις για να πάρετε ακριβή ισορροπία λευκού από, οπότε ο λογιστικός καθορισμός της Google είναι πραγματικά εντυπωσιακός.

"Θα ήταν κίτρινο στην περίπτωση του φωτός νατρίου και θα προσπαθήσουμε να εξουδετερώσουμε αυτόν τον κακό φωτισμό", λέει ο Levoy. "Συμβαίνει πολύ στο χαμηλότερο φως. Εάν περπατάτε σε μια ντίσκο και υπάρχουν κόκκινα φώτα νέον, θα το διατηρήσετε, αλλά θα προσπαθήσετε να εξουδετερώσετε μερικά από τα δυσμενή φωτισμό της περιοχής ».

Η ισορροπία λευκού με βάση τη μάθηση ήταν ήδη διαθέσιμη στη λειτουργία Night Sight της Google, γι 'αυτό και η τελική της εικόνα είχε πολύ καλύτερο χρώμα από κάτι σαν την αυτόματη λειτουργία στο Huawei P30 Pro. Το σύστημα μαθαίνει με βάση τις εικόνες που έχουν ληφθεί στη συσκευή που θεωρεί ισορροπημένη και χρησιμοποιεί τα δεδομένα που έχουν μάθει για να παράγει πιο ακριβείς έγχρωμες εικόνες σε κακές συνθήκες. Αυτό είναι κάτι που παραδοσιακά συστήματα φωτογραφικών μηχανών απλά δεν μπορούν να κάνουν. Μόλις ένα σκάφος φωτογραφικών μηχανών, αυτόματη ισορροπία λευκού είναι αυτόματη ισορροπία λευκού Σχετικά με το Pixel, προσπαθεί πάντα να βελτιώνεται με την πάροδο του χρόνου.

Η ισορροπία λευκού που βασίζεται στη μάθηση καθιστά ακόμη πιο εύκολη τη χρήση εικόνων χαμηλού φωτισμού, αλλά η Levoy θέλει να χρησιμοποιήσει υπολογιστές για να απλοποιήσει μια φορά δύσκολη μορφή απεικόνισης - αστροφωτογραφία.

Κοιτάξτε στα αστέρια

Πηγή: Google

Το Levoy καλεί αυτή τη νέα δυνατότητα "HDR + στα στεροειδή". Όπου το πρότυπο HDR + παίρνει μια έκρηξη 10-15 σύντομων εκθέσεων και ευθυγραμμίζει και μετρά τους για να πάρει απότομες εικόνες με χαμηλό θόρυβο, αυτή η νέα λειτουργία διαρκεί έως και 15 σειρές εκθέσεων 16 δευτερολέπτων, για να δημιουργηθεί έκθεση 4 λεπτών. Το σύστημα ευθυγραμμίζει τις εικόνες (αφού τα αστέρια μετακινούνται με την πάροδο του χρόνου) και προσαρμόζει τις κατάλληλες ρυθμίσεις μειώνοντας παράλληλα τον θόρυβο με τους μέσους όρους των pixel για να δημιουργήσουν κάποιες εκπληκτικές εικόνες.

Αυτό ήταν το Άγιο Δισκοπότηρο για μένα.

Marc Levoy

Ο Levoy μου έδειξε μερικά παραδείγματα φωτογραφιών που πήρε η ομάδα του με γαλακτώδες τρόπο και το σαγόνι μου έπεσε κυριολεκτικά. Παρόλο που είναι δυνατό να κάνετε εκτεταμένες εκθέσεις στα παραδοσιακά συστήματα κάμερας, χρειάζεστε συνήθως επιπλέον εξοπλισμό για να μετατρέψετε την κάμερά σας με την πάροδο του χρόνου, εάν θέλετε εικόνες εξαιρετικά ευκρινείς. Με Night Sight, μπορείτε απλά να στηρίξετε το τηλέφωνό σας σε ένα βράχο, να χτυπήσετε το κλείστρο και η συσκευή να κάνει τα υπόλοιπα.

Ίσως το πιο έξυπνο μέρος αυτής της νέας λειτουργίας Astro Night Sight είναι ότι δεν είναι ξεχωριστός τρόπος λειτουργίας. Όλα συμβαίνουν με το κουμπί Night Sight. Το HDR + χρησιμοποιεί ήδη το γυροσκόπιο για να ανιχνεύσει την κίνηση και να ευθυγραμμίσει εκρήξεις εικόνων και το Night Sight θα ανιχνεύσει τώρα πόσο μπορεί να πάρει εφικτά μια εικόνα ανάλογα με το πόσο σταθερή είναι η συσκευή όταν πιέζετε το κουμπί του κλείστρου μέχρι και τέσσερα λεπτά. Θα εντοπίσει επίσης τον ουρανό χρησιμοποιώντας μια μέθοδο που ονομάζεται Σημασιολογική τμηματοποίηση, η οποία επιτρέπει στο σύστημα να αντιμετωπίζει μερικές διαφορετικές περιοχές της εικόνας για το καλύτερο αποτέλεσμα.


"Θέλουμε τα πράγματα να είναι εύκολα για οποιονδήποτε να χρησιμοποιήσει", λέει ο Reynolds, "έτσι κάθε φορά που θα βρούμε κάτι στο προϊόν που δεν χρειάζεται να υπάρχει εκεί, μπορούμε να πάρουμε αυτή την ευθύνη μακριά από σας και να το λύσουμε αυτό για σας".

Η δήλωση αυτή βράζει πραγματικά τι προσπαθεί να κάνει η Google με τη φωτογραφική μηχανή του Pixel. Αντί να εξετάσουμε πώς μπορούν να λειτουργήσουν σαν μια φωτογραφική μηχανή, η Google προσπαθεί να επιλύσει ζητήματα που δεν γνωρίζατε ακόμη και υπήρχαν και να τα παρουσιάσετε με την απλούστερη δυνατή μορφή.

Φυσικά, υπάρχουν πλεονεκτήματα και στις δύο πλευρές. Μερικοί άνθρωποι ίσως θέλω μια φωτογραφική μηχανή τηλεφώνου που λειτουργεί σαν κάμερα, με χειροκίνητα χειριστήρια και πλήκτρα. Μπορεί να θέλουν μεγαλύτερους αισθητήρες και λειτουργίες Pro. Αλλά ενώ άλλα ODM επικεντρώνονται σχεδόν αποκλειστικά στο υλικό, η Google ψάχνει σε μια εντελώς διαφορετική κατεύθυνση.

Ψάχνει να κάνει μαγεία.

Θέλετε να μάθετε περισσότερα σχετικά με την υπολογιστική φωτογραφία; Ανατρέξτε στο παραπάνω βίντεο για να δείτε πώς το πεδίο αυτό θα αλλάξει τον τρόπο με τον οποίο δημιουργούμε εικόνες.

'S Pixel 4

το περιεχόμενο σας έρχεται σε επαφή με την υπόθεση MNML, κατασκευαστές της λεπτότερης τηλεφωνικής θήκης στον κόσμο. Εξοικονομήστε 25% στην περίπτωση Pixel 4 ή Pixel 4 XL χρησιμοποιώντας τον κωδικό έκπτωσης AAPixel4.

Παρόλο που το OnePlu 7 Pro κοστίζει λιγότερο από το τυπικό μοντέρνο martphone, θα πρέπει να πληρώσετε τουλάχιστον $ 669 για να το επιλέξετε. Αντί να πληρώσετε σχεδόν επτά Benjamin για να πάρετε το τελ...

Η OnePlu ξεκινά τα δύο νέα τηλέφωνα της, τα OnePlu 7 και 7 Pro, ταυτόχρονα, πράγμα που σημαίνει ότι έχετε αποφασίσει να κάνετε: Πηγαίνετε για το μοντέλο υψηλότερων τελών ή το tick με το λιγότερο ακριβ...

Σας Συμβουλεύουμε Να Δείτε