Ο αλγόριθμος «κροπαρίσματος» φωτογραφιών του Twitter (σ.σ αυτόματης περικοπής) , φαίνεται πως «προτιμά» να εστιάζει σε νεότερα, πιο αδύνατα και πιο ανοικτόχρωμα πρόσωπα.
Η πλατφόρμα πλήρωσε 3.500 δολάρια έναν απόφοιτο του ελβετικού πανεπιστημίου EFPL που απέδειξε τις διακρίσεις που έκανε ο αλγόριθμος, ο οποίος υποτίθεται πως εστίαζε «στο πιο ενδιαφέρον κομμάτι» των φωτογραφιών, κατά την μερική σμίκρυνση που αυτές υφίστανται στην ροή του feed, πριν πατήσει κανείς πάνω στον εκάστοτε σύνδεσμο ώστε να ανοίξουν ολόκληρες οι φωτογραφίες.
Ο Bogdan Kulynych απέδειξε την ψηφιακή προκατάληψη στο πλαίσιο ενός διαγωνισμού, στο συνέδριο ασφαλείας DEF CON στο Λας Βέγκας. Για να το επιτύχει, πρώτα δημιούργησε με τεχνητό τρόπο ψηφιακά πρόσωπα που δεν υπήρχαν στην πραγματικότητα, με διαφορετικά χαρακτηριστικά. Στη συνέχεια τα φόρτωσε στο Twitter παρατηρώντας που εστίαζε το λογισμικό.
Έχοντας τον πλήρη έλεγχο, ο Kulynych μπορούσε να δημιουργήσει ανύπαρκτα, ψηφιακά πρόσωπα σχεδόν πανομοιότυπα μεταξύ τους, με απειροελάχιστες διαφορές στον τόνο του δέρματος, το πλάτος του κεφαλιού, την φαινομενική ηλικία κ.λπ. Πολύ εύκολα, απέδειξε πως ο αλγόριθμος εστίαζε σε νεότερα, πιο λεπτά, πιο φωτεινά πρόσωπα, σε βάρος των πιο ηλικιωμένων, πλατύτερων και πιο σκουρόχρωμων.
Ο επικεφαλής του τμήματος ηθικής της τεχνητής νοημοσύνης στο Twitter, Rumman Chowdhury, σχολίασε: «Όταν σκεφτόμαστε για τις προκαταλήψεις στα μοντέλα μας, δεν είναι απλώς το ακαδημαϊκό ή το πειραματικό κομμάτι (...) αλλά επίσης το πώς δουλεύει σε σχέση με τον τρόπο που σκεφτόμαστε εντός κοινωνίας (...) χρησιμοποιώ την έκφραση «η ζωή μιμείται την τέχνη που μιμείται τη ζωή. Δημιουργούμε αυτά τα φίλτρα επειδή νομίζουμε ότι «αυτό είναι όμορφο», και αυτό καταλήγει να εκπαιδεύει τα μοντέλα μας, οδηγώντας σε αυτή τη μη ρεαλιστική ιδέα για το τι σημαίνει ελκυστικό».
Το Twitter είχε δεχτεί εντονότατη κριτική το 2020 και είχε αναγκαστεί να ζητήσει συγγνώμη για τον αλγόριθμο κροπαρίσματος φωτογραφιών, που εστίαζε σε λευκά πρόσωπα έναντι των μαύρων.
Οι χρήστες άρχισαν να παρατηρούν το πρόβλημα και μέσα σε ένα Σαββατοκύριακο το θέμα είχε λάβει τεράστιες διαστάσεις στην πλατφόρμα κοινωνικής δικτύωσης. Όπως αποκάλυψαν οι επανειλημμένες δοκιμές πολλών χρηστών, ο αλγόριθμος περικοπής φωτογραφιών στα ποστ «προτιμούσε» να κεντράρει στους λευκούς αντί για τους μαύρους σε όλες τις περιπτώσεις που δύο άτομα βρίσκονταν μέσα στο ίδιο πλάνο.
Τότε η εταιρεία είχε υποστηρίξει ότι δεν είχε αποδείξεις για κάποια ρατσιστική ή φυλετική διάκριση στον αλγόριθμό του. Ο Kulynych όμως το απέδειξε καθώς η πλατφόρμα ξεκίνησε έναν ανοικτό διαγωνισμό, προσφέροντας χιλιάδες δολάρια σε όποιον μπορούσε να επιδείξει επιβλαβή αποτελέσματα ααπό τον αλγόριθμο κροπαρίσματος.
Αν και νικητής Kulynych, αφού έλαβε το χρηματικό έπαθλο, δήλωσε πως είχε ανάμεικτα συναισθήματα για τον διαγωνισμό. «Οι βλάβες του αλγορίθμου δεν είναι μόνο bugs. Σε αρκετές περιπτώσεις, η επιβλαβής τεχνολογία δεν οφείλεται σε ατυχήματα ή ακούσια σφάλματα, αλλά στον σχεδιασμό. Αυτό προκύπτει από την μεγιστοποίηση της συγκέντρωσης ενδιαφέροντος και, εν γένει, την πολιτική του κέρδους που εξωτερικεύει το κόστος σε άλλους.»
