Mit entsprechend trainierten neuronalen Netzen wollen Forscher gefälschte Gesichter zuverlässig erkennen. Sie verwenden dazu einen eigens entwickelten Algorithmus, um Unstimmigkeiten in einem Gesicht zu erkennen.
Mit neuronalen Netzen lassen sich manipulierte Bilder erkennen. Die Illustration zeigt einen Face-Morphing-Angriff. Von links nach rechts: Originalbilder, Mitte: Morphing-Angriff.
(Bild: Fraunhofer HHI)
Mit einer automatisierten Gesichtserkennung lassen sich Smartphones entsperren oder Eingänge von sensiblen Bereichen wie Flughäfen kontrollieren. Doch wie sicher ist die Authentifizierungsmethode über das menschliche Gesicht? Denn mit genügend krimineller Energie lassen sich Gesichtserkennungssysteme austricksen, wenn zwei Personen denselben Pass verwenden. Davon berichtet Lukasz Wandzik. Er ist Wissenschaftler am Fraunhofer-Institut für Produktionsanlagen und Konstruktionstechnik IPK in Berlin. Gemeinsam mit seinen Kollegen vom Fraunhofer-Institut für Nachrichtentechnik, Heinrich-Hertz-Institut, HHI und weiteren Partnern entwickelt er Verfahren, die Bildanomalien erkennen, die bei der digitalen Bildverarbeitung in Morphing-Prozessen auftreten.
„Der Morphing-Angriff wird ausgeführt, indem zwei Gesichtsbilder zu einem synthetischen Gesichtsbild verschmolzen werden, das die Eigenschaften beider Personen enthält“, erklärt Wandzik. Mit diesem Foto im Reisepass werden beide Personen durch ein biometrisches Gesichtserkennungssystem authentifiziert. Die Attacken könnten beispielsweise vor oder beim Beantragen von Ausweisen stattfinden. Im Rahmen des Projekts ANANAS (Anomalie-Erkennung zur Verhinderung von Angriffen auf gesichtsbildbasierte Authentifikationssysteme), erforschen und analysieren die Wissenschaftler simulierte Bilddaten.
Bildverarbeitung und Maschinelles Lernen
Dabei werden moderne Methoden der Bildverarbeitung und des maschinellen Lernens angewandt, insbesondere tiefe neuronale Netze, die explizit für die Verarbeitung von Bilddaten konzipiert wurden. Diese komplexen Netze bestehen aus zahlreichen Ebenen, die in vielschichtigen Strukturen miteinander verknüpft sind. Sie beruhen auf Verbindungen zwischen mathematischen Berechnungseinheiten und bilden die Neuronenstruktur des menschlichen Gehirns nach.
Um die zu entwickelnden Verfahren und Systeme testen zu können, erzeugen die Projektpartner im ersten Schritt die Daten, mit denen die bildverarbeitenden Programme trainiert werden, um Manipulationen zu erkennen. Hierfür werden verschiedene Gesichter zu einem gemorpht. „Um zu entscheiden, ob ein Gesichtsbild authentisch ist oder durch einen Morphing-Algorithmus erstellt wurde, haben wir tiefe neuronale Netze auf gemorphte und reale Gesichtsbilder trainiert. Diese können manipulierte Bilder anhand der dadurch entstehenden Veränderungen erkennen, speziell auch in semantischen Bereichen wie in Gesichtsmerkmalen oder Glanzlichtern in den Augen“, erläutert Prof. Peter Eisert, Abteilungsleiter Vision & Imaging Technologies am Fraunhofer HHI, die Vorgehensweise.
Algorithmen identifizieren manipulierte Bilder
Die neuronalen Netze entscheiden, ob es sich um echte oder gefälschte Bilder handelt. Die Trefferquote bei den im Projekt erstellten Testdatenbanken liegt bei über 90%. Allerdings wissen die Forscher nicht, wie das Neuronale Netz die Entscheidung getroffen hat. Neben einer Entscheidung über die Echtheit eines Bildes ist auch der Entscheidungsgrund wichtig. Dazu analysieren die Forscher mit eigens entwickelten LRP-Algorithmen (Layer-Wise Relevance Propagation) die Regionen im Gesichtsbild, die für die Entscheidung relevant sind. Damit lassen sich verdächtige Bereiche in einem Gesichtsbild finden, und Artefakte zu identifizieren und zu klassifizieren, die während eines Morphing-Prozesses erzeugt wurden.
Die Algorithmen identifizieren erfolgreich gemorphte Bilder, wie erste Referenztests bestätigen. Relevante Gesichtsbereiche für eine Entscheidung kennzeichnet die LRP-Software entsprechend. Häufig geben die Augen Hinweise, ob es sich um eine Fälschung handelt. Die Forscher nutzen diese Informationen auch, um die neuronalen Netze robuster zu gestalten. Dann lassen sich unterschiedliche Angriffsmethoden erkennen. Leider greifen die Kriminellen auf immer ausgefeiltere Angriffsmethoden zurück wie auf KI-Verfahren, die komplett künstliche Gesichtsbilder erzeugen. Mit optimierten neuronalen Netze versuchen die Wissenschaftler dagegenzuhalten und den Fälschern einen Schritt voraus zu sein, damit zukünftige Attacken schnell identifiziert werden.
Datenbank mit 2000 Individuen
Für die Erstellung und Tests der Gesichtsmorphs haben die Forscher des Fraunhofer-Instituts eine Datenbank mit ungefähr 2000 Individuen und jeweils unterschiedlichen Bildern genutzt. Darin sind auch verschiedenste Ethnien enthalten. Für das Morphing der Gesichter nutzen die Forscher allerdings möglichst ähnliche Gesichter, sodass jeweils Paare mit gleichem Geschlecht, Datenbank und Ethnie erstellt werden.
Stand: 08.12.2025
Es ist für uns eine Selbstverständlichkeit, dass wir verantwortungsvoll mit Ihren personenbezogenen Daten umgehen. Sofern wir personenbezogene Daten von Ihnen erheben, verarbeiten wir diese unter Beachtung der geltenden Datenschutzvorschriften. Detaillierte Informationen finden Sie in unserer Datenschutzerklärung.
Einwilligung in die Verwendung von Daten zu Werbezwecken
Ich bin damit einverstanden, dass die Vogel Communications Group GmbH & Co. KG, Max-Planckstr. 7-9, 97082 Würzburg einschließlich aller mit ihr im Sinne der §§ 15 ff. AktG verbundenen Unternehmen (im weiteren: Vogel Communications Group) meine E-Mail-Adresse für die Zusendung von redaktionellen Newslettern nutzt. Auflistungen der jeweils zugehörigen Unternehmen können hier abgerufen werden.
Der Newsletterinhalt erstreckt sich dabei auf Produkte und Dienstleistungen aller zuvor genannten Unternehmen, darunter beispielsweise Fachzeitschriften und Fachbücher, Veranstaltungen und Messen sowie veranstaltungsbezogene Produkte und Dienstleistungen, Print- und Digital-Mediaangebote und Services wie weitere (redaktionelle) Newsletter, Gewinnspiele, Lead-Kampagnen, Marktforschung im Online- und Offline-Bereich, fachspezifische Webportale und E-Learning-Angebote. Wenn auch meine persönliche Telefonnummer erhoben wurde, darf diese für die Unterbreitung von Angeboten der vorgenannten Produkte und Dienstleistungen der vorgenannten Unternehmen und Marktforschung genutzt werden.
Meine Einwilligung umfasst zudem die Verarbeitung meiner E-Mail-Adresse und Telefonnummer für den Datenabgleich zu Marketingzwecken mit ausgewählten Werbepartnern wie z.B. LinkedIN, Google und Meta. Hierfür darf die Vogel Communications Group die genannten Daten gehasht an Werbepartner übermitteln, die diese Daten dann nutzen, um feststellen zu können, ob ich ebenfalls Mitglied auf den besagten Werbepartnerportalen bin. Die Vogel Communications Group nutzt diese Funktion zu Zwecken des Retargeting (Upselling, Crossselling und Kundenbindung), der Generierung von sog. Lookalike Audiences zur Neukundengewinnung und als Ausschlussgrundlage für laufende Werbekampagnen. Weitere Informationen kann ich dem Abschnitt „Datenabgleich zu Marketingzwecken“ in der Datenschutzerklärung entnehmen.
Falls ich im Internet auf Portalen der Vogel Communications Group einschließlich deren mit ihr im Sinne der §§ 15 ff. AktG verbundenen Unternehmen geschützte Inhalte abrufe, muss ich mich mit weiteren Daten für den Zugang zu diesen Inhalten registrieren. Im Gegenzug für diesen gebührenlosen Zugang zu redaktionellen Inhalten dürfen meine Daten im Sinne dieser Einwilligung für die hier genannten Zwecke verwendet werden. Dies gilt nicht für den Datenabgleich zu Marketingzwecken.
Recht auf Widerruf
Mir ist bewusst, dass ich diese Einwilligung jederzeit für die Zukunft widerrufen kann. Durch meinen Widerruf wird die Rechtmäßigkeit der aufgrund meiner Einwilligung bis zum Widerruf erfolgten Verarbeitung nicht berührt. Um meinen Widerruf zu erklären, kann ich als eine Möglichkeit das unter https://contact.vogel.de abrufbare Kontaktformular nutzen. Sofern ich einzelne von mir abonnierte Newsletter nicht mehr erhalten möchte, kann ich darüber hinaus auch den am Ende eines Newsletters eingebundenen Abmeldelink anklicken. Weitere Informationen zu meinem Widerrufsrecht und dessen Ausübung sowie zu den Folgen meines Widerrufs finde ich in der Datenschutzerklärung, Abschnitt Redaktionelle Newsletter.
„Allerdings beschäftigen wir uns nicht mit der Gesichtserkennung selbst, obwohl diese sehr stark von den in der Datenbank enthaltenen Gesichtern abhängig ist“, sagt Prof. Peter Eisert vom Fraunhofer HHI abschließend.