"FaceTime Attention Correction": iOS 13 sorgt für direkte Blicke in die Kamera

[Martin Wendel]

"FaceTime Attention Correction": iOS 13 sorgt für direkte Blicke in die Kamera

Eine bislang von Apple nicht dokumentierte Funktion in der aktuellen dritten Betaversion von iOS 13 macht gerade die Runde: "FaceTime Attention Correction". Hinter dem etwas sperrigen Titel steckt eine durchaus kluge Funktion, die ein wenig nach Science-Fiction klingt. Jene unter euch, die häufig Videotelefonieren, kennen das mit Sicherheit: Der eigene Blick (und auch der des Gegenübers) ist nicht direkt in die Kamera gerichtet, sondern immer ein wenig darunter – eben auf den Bildschirm. Das soll die neue iOS-13-Funktion nun ändern.

Guys - "FaceTime Attention Correction" in iOS 13 beta 3 is wild.

Here are some comparison photos featuring @flyosity: https://t.co/HxHhVONsi1 pic.twitter.com/jKK41L5ucI

— Will Sigmon (@WSig) 2. Juli 2019​

Digitale Korrektur der Blickrichtung in FaceTime


Denn mit Hilfe von ARKit wird durch die optionale "FaceTime Attention Correction", die in den Einstellungen aktiviert und auch abgeschaltet werden kann, die Blickrichtung digital korrigiert. Die Augen sind dann direkt in die Kamera gerichtet. Notwendig dafür scheint das TrueDepth-Kamerasystem zu sein, dessen Tiefeninformationen für die neue Funktion benötigt werden. Derzeit ist die Funktion allerdings nur auf den neuesten iPhone-Modellen – iPhone XS, iPhone XS Max und iPhone XR – verfügbar. Das iPad Pro 2018 und das iPhone X sind, derzeit noch, ausgenommen.

How iOS 13 FaceTime Attention Correction works: it simply uses ARKit to grab a depth map/position of your face, and adjusts the eyes accordingly.

Notice the warping of the line across both the eyes and nose. pic.twitter.com/U7PMa4oNGN

— Dave Schukin (@schukin) 3. Juli 2019​

Via MacRumors

 

[Mokotschombo]

Ganz nett, wird bestimmt anfangs viele kleine gruselige Fehler geben.

 

[giesbert]

Das nennt man dann wohl Deep Fake …

 

[Chakobo]

Das mit Deep Fake zu vergleichen halte ich für arg übertrieben. Ist eine nettes Feature welches die Videotelefonie angenehmer macht. Nicht mehr und nicht weniger.

 

[u0679]

Wenn es richtig funktioniert finde ich es klasse. Das beim Videotelefonieren der Gesprächspartner einen nie ansieht ist schon nervig.

 

[Mitglied 105235]

Wenn es richtig funktioniert finde ich es klasse. Das beim Videotelefonieren der Gesprächspartner einen nie ansieht ist schon nervig.

Naja, eigentlich sieht er einen immer an, denn er schaut ja auf das Display runter und eben nicht in die Kamera.

 

[giesbert]

"Deep Fake" ist natürilch ein Witz, aber die Richtung find ich bedenklich: Jetzt korrigieren wir den Blickwinkel, sieht doch viel freundlicher aus. Im nächsten Upate helfen wir dann mit ein paar Weichzeichnern nach, ist doch viel hübscher. Dann ändern wird den Hintergrund ... ach ne, das gibt's ja schon längst.

Ich halte davon gar nichts. Zumal man es, vermutlich, nicht wird abschalten können.

 

[giesbert]

Das beim Videotelefonieren der Gesprächspartner einen nie ansieht ist schon nervig.

Und das ist dann weniger nervig, wenn du weißt, dass er immer noch nicht in die Kamera schaut, aber jetzt sieht es wenigsten so aus? Ich weiß ja nicht.

 

[Mitglied 105235]

Und das ist dann weniger nervig, wenn du weißt, dass er immer noch nicht in die Kamera schaut, aber jetzt sieht es wenigsten so aus? Ich weiß ja nicht.

Es wissen die Leute die sich mit solchen News beschäftigen, aber die Restlichen 98% der Anwender wissen das doch nicht.

 

[Martin Wendel]

Ich halte davon gar nichts. Zumal man es, vermutlich, nicht wird abschalten können.

Es ist, zumindest so wie es jetzt in der Beta implementiert ist, ein optionales Feature.

 

[wavelow]

Ganz nett aber wie hier schon gesagt wurde: Der Anfang einer langen möglichen Manipulationskette.
Danach kommt die Lächeln Funktion die dem Gegenüber immer suggeriert man schaut freundlich. Bis irgendwann die ganze Person einfach gegen eine Beliebige getauscht werden kann.

 

[GunBound]

Das nennt man dann wohl Deep Fake …

DeepFake basiert auf conditinal GANs, das hier sind vermutlich lediglich Deformationen aufgrund Keypoints (z.B. SIFT), eventuell mit einem CNN.

 

[echo.park]

Wenn es denn funktioniert finde ich es klasse.

 

[giesbert]

DeepFake basiert auf conditinal GANs, das hier sind vermutlich lediglich Deformationen aufgrund Keypoints (z.B. SIFT), eventuell mit einem CNN.

Das ist mir schon klar, „Deep Fake“ war auch nicht ernst gemeint. Was nichts daran ändert, dass ich bei dieser Entwicklung sehr skeptisch bin. Bill Gates hat mal die Vision propagiert, dass wir uns bei Videotelefonie in einen realistischen Avatar verwandeln können und dass das doch ganz toll sei. Nein, ist es nicht, dergleichen zerstört die Grundlage jeder Kommunikation. Und nicht nur das, aber führt hier zu weit, und auf dem iPhone mag ich jetzt nicht so viel tippen .

 

[Chakobo]

DeepFake basiert auf conditinal GANs, das hier sind vermutlich lediglich Deformationen aufgrund Keypoints (z.B. SIFT), eventuell mit einem CNN.

Genial, solche Beiträge. Ein Satz mit drei technischen Abkürzungen, die 99% der Leser nicht mal ausgeschrieben verstehen. Aber wenigstens das Insider-Wissen zur Schau getragen...

 

[wavelow]

das hier sind vermutlich lediglich Deformationen aufgrund Keypoints (z.B. SIFT), eventuell mit einem CNN.

 

[GunBound]

Sorry, dass mein Post etwas provokativ herübergekommen ist – war keine Absicht. Sobald wieder Zeit da ist, werde ich die Sache versuchen zu erklären. Bis dahin helfen vllt. auch ein paar Paper dazu:

• Deep Learning (die Haupttechnologie hinter so ziemlich allem, was heutzutage “AI” ausmacht): https://creativecoding.soe.ucsc.edu/courses/cs523/slides/week3/DeepLearning_LeCun.pdf
• GANs (eine Art Deep Learning-Modell, die z.B. in DeepFake verwendet wird): http://papers.nips.cc/paper/5423-generative-adversarial-nets.pdf
• Dazu ein interessantes Video von NVIDIA, präsentiert vor ein paar Wochen in der CVPR:
  Um diese Inhalte anzuzeigen, benötigen wir die Zustimmung zum Setzen von Drittanbieter-Cookies.
  Für weitere Informationen siehe die Seite Verwendung von Cookies.

  Drittanbieter-Cookies akzeptieren
  Kleiner Hinweis: sämtliche Gesichter, die im Video gezeigt werden, sind 100% computergeneriert und basieren auf keinem echten Menschen (nur indirekt).
• Zum Thema Gesichts-Tracking und -Modifikation (eines der vielen Paper dazu): https://arxiv.org/pdf/1702.05085.pdf
• Und zu guter Letzt noch die Erklärung, was SIFT ist: http://new.csd.uwo.ca/Courses/CS9840a/PossibleStudentPapers/iccv99.pdf

 

[Chakobo]

@GunBound danke für die Literatur!
Das Video ist ja richtig verrückt. Ein wenig beängstigend ist es schon, wie weit die Technik in dem Bereich ist. SciFi in der Realität.