Joy Buolamwini e o preconceito algorítmico

Joy Buolamwini

Joy Buolamwini é uma estudante de pós-graduação no MIT (o Massachusetts Institute of Technology, uma das instituições de ensino superior mais respeitadas dos EUA). O currículo dessa mina é surreal: antes de entrar no MIT, ela se formou em Ciências da Computação no Georgia Institute of Technology e tem mestrado em Aprendizado e Tecnologia na Universidade de Oxford.

Parte de seu trabalho como pesquisadora no MIT consiste em explorar a ligação entre tecnologia de impacto social e inclusão. Nesse sentido, a Joy lidera a Algorithmic Justice League (Liga da Justiça Algorítmica), uma iniciativa para combater os preconceitos existentes nos algoritmos que regem as tecnologias que usamos.

No TEDTalk abaixo a Joy fala sobre como passou a se interessar por esse tema:

 
Lá no MIT, ela tem a oportunidade de trabalhar vários projetos bizarros, incluindo o Espelho de Desejar, um projeto que ela criou para poder projetar máscaras digitais fantásticas para o seu reflexo. Para construir o sistema do espelho, ela usou um software genérico de reconhecimento facial, mas logo descobriu que era difícil testá-lo a menos que ela usasse uma máscara branca. Ou seja, o software de reconhecimento facial não estava preparado para reconhecer pessoas negras, só pessoas brancas. Segundo a Joy, isso é bem problemático: “o preconceito algorítmico, como o preconceito humano, resulta da injustiça. Porém, os algoritmos, tal como os vírus, podem espalhar preconceitos numa grande escala num ritmo rápido. O preconceito em algoritmos também pode levar a experiências de exclusão e a práticas discriminatórias.” 

Esse tipo de desvio na tecnologia é criado da seguinte forma: cientistas criam um grupo de formação com exemplos de rostos. As pessoas que participam do estudo vão determinando o que é um rosto e não é.  Contudo, se os grupos de formação não forem diversificados, qualquer rosto que se desvie da norma estabelecida será difícil de detectar. E foi isso que aconteceu com a Joy: as máquinas não foram ensinadas a ler rostos negros, só tinham visto exemplos de rostos brancos. 

O ponto é que o preconceito algorítmico pode ser bem escroto e discriminatório, como explica Joy: “Nos meus exemplos com os robôs sociais que foi como eu descobri a exclusão com o preconceito algorítmico. Mas o preconceito algorítmico também pode levar a práticas discriminatórias. Nos Estados Unidos da América, os departamentos da polícia começam a usar o software de reconhecimento facial no seu arsenal de luta contra o crime. A Faculdade de Direito de Georgetown publicou um relatório mostrando que um em dois adultos, nos EUA — ou seja, 117 milhões de pessoas — têm os rostos em redes de reconhecimento facial. Os departamentos da polícia podem procurar nessas redes não regulamentadas, usando algoritmos que não foram auditados quanto ao seu rigor”.

A boa notícia é que esse cenário pode mudar com a criação de grupos de pesquisa mais diversos. “Há a oportunidade de criar grupos de formação com um espetro completo que reflitam um retrato mais rico da humanidade“, diz Joy. O documentário da Joy, o Coded Gaze: Unmasking Algorithmic Bias (algo como “o olhar codificado: desmascarando o preconceito algorítmico”) foi lançado no Museu de Belas Artes de Boston. O documentário mostra como a falta de diversidade na tecnologia levou à construção de algoritmos falhos e preconceituosos.

No começo deste ano, a Joy foi ganhadora do prêmio Search for Hidden Figures. Nesse link aqui ela fala um pouco mais sobre isso e no vídeo abaixo dá pra aprender um pouco sobre a trajetória dela:

Em uma entrevista para a BBC, a Joy conta que espera que a situação comece a melhorar, conforme as pessoas tomem consciência dos potenciais problemas decorrentes do preconceito algorítmico. “Qualquer tecnologia que criamos reflete tanto nossas aspirações quanto nossas limitações”, diz Joy, “se formos limitados na hora de pensar inclusão, isso vai ser refletido e incorporadona tecnologia que criamos”.

Segue a Joy no Twitter pra acompanhar os projetos dela!

 

Mais de Bárbara Paes

Hiplet: bailarinas com requebrado

O Chicago Multi-Cultural Dance Center foi criado em 1990 por Homer Hans Bryant. O objetivo de Byant era criar uma técnica de ballet neoclássica que integrasse diversos estilos de dança e honrasse a riqueza de múltiplas heranças culturais. Em 2008, Bryant mesclou ballet com street dance para criar o Hiplet, uma nova técnica que envolve passos de hiphop em sapatilhas de ponta.

O resultado é essa coisa maravilhosa aqui, ó:

 

 
Neste texto aqui falamos um pouquinho sobre a Misty Copeland e sobre como o universo da dança clássica tem sido esmagadoramente branco. Pra quem não conhece, a Misty é uma bailarina norte-americana e foi a primeira negra a ocupar o topo do American Ballet Theatre. Em 2015, a Cássia Pires, do blog Dos Passos da Bailarina, também escreveu sobre o assunto: “O racismo é estrutural, ele cresceu e criou raízes nas entranhas da sociedade. Alguém diz que não é racista, mas torce o nariz ao ver uma Giselle negra. Profere discursos sobre igualdade racial, mas em uma audição para escolher a mais nova bailarina da companhia, escolhe a branca em detrimento da negra, mesmo que as duas estejam em iguais condições artísticas. É professora de ballet e sorri docemente para todas as alunas, mas jamais coloca a melhor bailarina da turma no papel principal porque ela é negra”. (Ah, o texto de Cássia também traz uma lista bem legal de bailarinas negras que conseguiram um espaço nesse universo apesar do racismo existente).

No vídeo abaixo, a gente conhece mais a fundo a história do Chicago Multi-Cultural Dance Center e descobre que o instituto aceita todo tipo de gente. Em um dos depoimentos, uma das bailarinas explica que o que torna essa escola tão diferente é o fato de que o método usado conhece o corpo negro e desenvolve uma forma de dança que abre espaço para as bailarinas negras, o que nem sempre acontece em institutos tradicionais.

 

 
Quando o assunto é representatividade no ballet, existem muitas outras referências que me deixam super felizinha (especialmente como mulher negra que fez ballet por 8 anos e que às vezes se sentia super perdida nesse espaço). Temos o Dance Theatre of Harlem, uma escola multicultural que fornece treinamento incrível em ballet clássico e em muitas outras técnicas e estilos de dança. A instituição é conhecida como “a primeira companhia de ballet clássico negra” nos Estados Unidos. Além da escola, o Dance Theatre of Harlem tem também uma companhia de dança composta por 14 artistas de várias raças e que realizam um repertório super eclético.

 

 
Uma das bailarinas do Dance Theatre of Harlem é a brasileira Ingrid Silva, quem eu sigo no Instagram e adoro. Ela entrou na companhia depois de participar do programa de verão da Dance Theatre of Harlem. Dá pra saber mais sobre a Ingrid aqui.

 

 
Pra finalizar, outro projeto super incrível é a start-up Brown Girls Do Ballet que fornece bolsas de estudo anuais e programas comunitários para capacitar jovens de minorias que são pouco representadas no ballet!

:)
 
Imagem de capa: via
 

Leia mais
Algorithmic Justice League (Liga da Justiça Algorítmica), uma iniciativa para combater os preconceitos existentes nos algoritmos que regem as tecnologias que usamos.

No TEDTalk abaixo a Joy fala sobre como passou a se interessar por esse tema:

 
Lá no MIT, ela tem a oportunidade de trabalhar vários projetos bizarros, incluindo o Espelho de Desejar, um projeto que ela criou para poder projetar máscaras digitais fantásticas para o seu reflexo. Para construir o sistema do espelho, ela usou um software genérico de reconhecimento facial, mas logo descobriu que era difícil testá-lo a menos que ela usasse uma máscara branca. Ou seja, o software de reconhecimento facial não estava preparado para reconhecer pessoas negras, só pessoas brancas. Segundo a Joy, isso é bem problemático: “o preconceito algorítmico, como o preconceito humano, resulta da injustiça. Porém, os algoritmos, tal como os vírus, podem espalhar preconceitos numa grande escala num ritmo rápido. O preconceito em algoritmos também pode levar a experiências de exclusão e a práticas discriminatórias.” 

Esse tipo de desvio na tecnologia é criado da seguinte forma: cientistas criam um grupo de formação com exemplos de rostos. As pessoas que participam do estudo vão determinando o que é um rosto e não é.  Contudo, se os grupos de formação não forem diversificados, qualquer rosto que se desvie da norma estabelecida será difícil de detectar. E foi isso que aconteceu com a Joy: as máquinas não foram ensinadas a ler rostos negros, só tinham visto exemplos de rostos brancos. 

O ponto é que o preconceito algorítmico pode ser bem escroto e discriminatório, como explica Joy: “Nos meus exemplos com os robôs sociais que foi como eu descobri a exclusão com o preconceito algorítmico. Mas o preconceito algorítmico também pode levar a práticas discriminatórias. Nos Estados Unidos da América, os departamentos da polícia começam a usar o software de reconhecimento facial no seu arsenal de luta contra o crime. A Faculdade de Direito de Georgetown publicou um relatório mostrando que um em dois adultos, nos EUA — ou seja, 117 milhões de pessoas — têm os rostos em redes de reconhecimento facial. Os departamentos da polícia podem procurar nessas redes não regulamentadas, usando algoritmos que não foram auditados quanto ao seu rigor”.

A boa notícia é que esse cenário pode mudar com a criação de grupos de pesquisa mais diversos. “Há a oportunidade de criar grupos de formação com um espetro completo que reflitam um retrato mais rico da humanidade“, diz Joy. O documentário da Joy, o Coded Gaze: Unmasking Algorithmic Bias (algo como “o olhar codificado: desmascarando o preconceito algorítmico”) foi lançado no Museu de Belas Artes de Boston. O documentário mostra como a falta de diversidade na tecnologia levou à construção de algoritmos falhos e preconceituosos.

No começo deste ano, a Joy foi ganhadora do prêmio Search for Hidden Figures. Nesse link aqui ela fala um pouco mais sobre isso e no vídeo abaixo dá pra aprender um pouco sobre a trajetória dela:

Em uma entrevista para a BBC, a Joy conta que espera que a situação comece a melhorar, conforme as pessoas tomem consciência dos potenciais problemas decorrentes do preconceito algorítmico. “Qualquer tecnologia que criamos reflete tanto nossas aspirações quanto nossas limitações”, diz Joy, “se formos limitados na hora de pensar inclusão, isso vai ser refletido e incorporadona tecnologia que criamos”.

Segue a Joy no Twitter pra acompanhar os projetos dela!

 

" />