Die Maschine sieht nicht alle gleich.
Das Projekt Gender Shades testete 2018 kommerzielle Gesichtsanalyse: Bei hellhäutigen Männern lag die Fehlerquote unter einem Prozent, bei dunkelhäutigen Frauen bei bis zu 35 Prozent.
Gender Shades ↗Wer Technologie gestaltet, entscheidet mit, was sie wahrnimmt. Und was nicht. Queere Menschen tauchen in Trainingsdaten, Kategorien und Testfällen oft gar nicht oder nur als Klischee auf. Das ist kein Zufall, und es lässt sich ändern.

Frag nach den Daten, den Kategorien und den Menschen hinter dem System.
Bias verstehen & Vorfall melden ↗Welche Lebensrealitäten tauchen in Beispielen und Antworten auf — und welche fehlen?
Intime Informationen verdienen bewusste Entscheidungen darüber, wo sie landen.
Beobachtungen dokumentieren. Entscheidungen hinterfragen. Beschwerdevorlagen nutzen.
Spiele zu Bias, Suchverhalten und Selbstbild.
Das Projekt Gender Shades testete 2018 kommerzielle Gesichtsanalyse: Bei hellhäutigen Männern lag die Fehlerquote unter einem Prozent, bei dunkelhäutigen Frauen bei bis zu 35 Prozent.
Gender Shades ↗Automatische Geschlechtserkennung geht fast immer von zwei festen Geschlechtern aus, abgelesen am Aussehen. Trans und nicht-binäre Menschen werden dabei systematisch falsch zugeordnet.
Algorithmic Justice League ↗Eine Studie von InternetLab ließ ein verbreitetes Toxizitäts-Tool Tweets bewerten: Viele Tweets bekannter Drag Queens schnitten „giftiger“ ab als Tweets bekannter weißer Rassisten.
InternetLab ↗Eine Analyse von WIRED zeigte 2024, dass Bildgeneratoren queere Menschen immer wieder mit denselben Klischees darstellen, zum Beispiel bunt gefärbten Haaren und Piercings.
WIRED ↗Seit Februar 2025 verbietet der AI Act in der EU Systeme, die aus biometrischen Daten wie Gesichtern auf die sexuelle Orientierung oder das Sexualleben schließen sollen.
Mehr zum AI Act ↗Biometrische Kategorisierung nach sensiblen Merkmalen und Emotionserkennung am Arbeitsplatz oder in der Schule sind in der EU unzulässig, mit engen Ausnahmen.
Angaben zu Sexualleben und sexueller Orientierung sind besonders geschützte Daten. Sie dürfen nur unter strengen Bedingungen verarbeitet werden.
Nach dem Digital Services Act müssen Plattformen Löschungen erklären und Widerspruch ermöglichen.
Deine Rechte ↗Queere Menschen sollten nicht nur in Datensätzen vorkommen, sondern mitentscheiden, wie Systeme gebaut werden.
Vorfall melden ↗