
Auditing Algorithms: Understanding Algorithmic Systems from the Outside in
Algorithmen sind allgegenwärtige und wichtige Online-Informationsquellen und fungieren zunehmend als Torwächter für Nutzer, die auf Informationen zu praktisch jedem Thema zugreifen oder diese teilen.
Dazu gehören Informationen über ihr persönliches Leben und das von Freunden und Familie, Nachrichten und Politik, Unterhaltung und sogar Gesundheit und Wohlbefinden. Infolgedessen ziehen algorithmisch erstellte Inhalte immer mehr Aufmerksamkeit auf sich und werden von Nutzern, Medien und Gesetzgebern gleichermaßen genau unter die Lupe genommen.
Die Untersuchung solcher Inhalte stellt eine große Herausforderung dar, da sie sowohl dynamisch als auch flüchtig sind. Eine Strategie, die sich bewährt hat, ist das Algorithmus-Audit: eine Methode zur wiederholten Abfrage eines Algorithmus und zur Beobachtung seiner Ausgabe, um Rückschlüsse auf das undurchsichtige Innenleben des Algorithmus und mögliche externe Auswirkungen zu ziehen. In dieser Arbeit geben die Autoren einen Überblick über die Methodik des Algorithmus-Audits.
Sie geben einen Überblick über die Geschichte der Audit-Studien in den Sozialwissenschaften, von denen diese Methode abgeleitet ist, eine Zusammenfassung der wichtigsten Algorithmus-Audits der letzten zwei Jahrzehnte in verschiedenen Bereichen wie Gesundheit, Politik und Diskriminierung sowie eine Reihe von Best Practices für die Durchführung von Algorithmus-Audits heute. Abschließend erörtern die Autoren die sozialen, ethischen und politischen Dimensionen der Prüfung von Algorithmen und schlagen normative Standards für die Anwendung dieser Methode vor.