Detecção de irregularidades em fotos de candidatos
1. Introdução
O projeto "Detecção de irregularidades em fotos de candidatos" desenvolveu e implementou uma solução inovadora baseada em Inteligência Artificial (IA) para a análise automatizada de fotos de candidatos em processos eleitorais em São Paulo nas eleições de 2024.
A iniciativa se mostrou crucial para otimizar e agilizar o processo de avaliação de fotos de candidatos, especialmente em eleições com grande volume de inscritos. A utilização da IA permitiu identificar fotos fora do padrão, não conformes com as regras legais, repetidas ou que não representavam pessoas, liberando os cartórios eleitorais para se concentrarem em outras tarefas críticas e colaborando para agilizar o processo de julgamento de registro de candidaturas.
2. Justificativa/Problema a ser resolvido
A necessidade surgiu da dificuldade dos cartórios eleitorais em lidar com o grande volume de fotos de candidatos, especialmente em eleições como as eleições municipais de 2024, em que foram analisadas por volta de 80.000 fotos no estado de São Paulo. A avaliação manual era demorada, sujeita a erros e demandava muitos recursos humanos. Do total de fotos, para se ter uma ideia, estima-se que cerca de 15%, ou 12.000 foram identificadas para avaliação pelos cartórios.
O problema era a ineficiência e a lentidão do processo manual de avaliação, que poderia levar a atrasos e erros nos registros de candidaturas. A oportunidade era utilizar a IA para automatizar e otimizar o processo, tornando-o mais rápido, preciso, seguro e eficiente.
A relevância do projeto pode ser constatada analisando os dados abaixo:
- Solução utilizada no TRE, Central denominada de NACAN. A partir dos resultados apontados pela IA, foram distribuídos para os cartórios avaliarem a conformidade da fotografia com as regras do registro de candidaturas.
- Relatos dos cartórios eleitorais sobre a efetividade da solução.
- Capacidade da IA de identificar fotos fora do padrão, não conformes com as regras legais, repetidas ou que não representavam pessoas.
- Agilidade nas diligências e nos julgamentos dos pedidos de registro de candidaturas.
- Impossibilidade de realizar a comparação manual de todas as fotos em tempo hábil devido ao grande volume e ao curto prazo para registro, diligência e julgamento.
- A solução não foi utilizada pelos Cartórios, foi de uso interno do NACAN 2024 e todos as fotos, 100% delas, foram analisadas;
- As fotos em inconformidade foram relatadas as ZE que decidiam, ou não, pela alteração;
- Houve um caso de foto repetida não tratada a tempo, porém para candidatos que não receberam votos suficientes;
3. Objetivos
Dentre os objetivos do projeto, destacam-se:
- Desenvolver e implementar uma solução baseada em IA para a detecção automática de irregularidades em fotos de candidatos.
- Otimizar e agilizar o processo de avaliação de fotos nos cartórios eleitorais.
- Reduzir a carga de trabalho manual dos cartórios eleitorais.
- Garantir a conformidade das fotos de candidatos com as regras legais.
- Aumentar a precisão e a eficiência do processo de registro de candidaturas.
4. Metodologia
Dentre as estratégias, técnicas e ferramentas utilizadas, destacam-se:
- Desenvolvimento de um modelo de IA para análise de imagens.
- Treinamento do modelo com o conjunto de dados de fotos de candidatos disponíveis no início do projeto, incluindo exemplos de fotos regulares e irregulares.
- Implementação da solução em um sistema acessível aos cartórios eleitorais.
- Integração da solução com os sistemas de registro de candidaturas.
- Testes e validação da solução em ambiente real.
- Coleta de feedback dos usuários (cartórios eleitorais) para melhorias contínuas.
5. Resultados alcançados
É possível garantir com tranquilidade que o projeto foi um sucesso, entregou relevante valor para os cartórios eleitorais e para o TRE-SP e representou uma relevante solução inovadora.
Dentre os impactos positivos do projeto, destacam-se:
- Agilidade e eficiência no processo de avaliação de fotos de candidatos.
- Redução da carga de trabalho manual dos cartórios eleitorais.
- Aumento da precisão e da confiabilidade na identificação de fotos irregulares.
- Garantia da conformidade das fotos com as regras legais.
- Melhora na gestão do tempo e dos recursos nos cartórios eleitorais.
A solução resolveu o problema da ineficiência e da lentidão do processo manual de avaliação de fotos, permitindo que os cartórios eleitorais realizassem as diligências e os julgamentos dos pedidos de registro de candidaturas de forma mais rápida, segura e mais precisa.
6. Aplicação
Todas as aplicações possuem tela de login, no qual quem utiliza informa o título eleitoral e senha.
A aplicação apresenta, em cada uma das telas iniciais, cartões ou gráficos com um resumo dos dados apresentados. Clicando nos gráficos são mostrados detalhamentos das informações.
Esta funcionalidade envolvendo Inteligência Artificial (IA) é uma parte de uma aplicação desenvolvida para auxiliar o procedimento de julgamento de processos eleitorais.
A análise inclui a verificação das fotos.
A SeAD desenvolveu modelos de inteligência artificial (IA) para identificar alguns problemas que podem ocorrer durante o processo:
- Um modelo para identificar objetos, como berrantes, chapéus, capacetes, relógios e acessórios;
- Um modelo para identificação de textos nas fotos que tornassem possível a identificação da(o) candidata(o) ou que pudessem ter conotação de propaganda;
- Um modelo para identificação de fotos duplicadas.
Detecção de fotos fora do padrão
- Utiliza modelo pré-treinado para detecção de fotos em branco, fora do tamanho, fundo irregular.
Detecção de acessórios nas fotos
- Utiliza modelo pré-treinado para detecção de objetos em imagens, como chapéu, boné, cachecol, relógio, etc.
Detecção de fotos repetidas
- Comparação das fotos da(o)s candidata(o)s com alto grau de semelhança, utilizando biblioteca para detecção de fotos duplicadas.
Detecção de texto nas fotos
- Utiliza biblioteca aberta para a transformação de imagem em texto. Aplica-se um filtro para detecção de palavras.
Vale ressaltar que as aplicações da SeAD unem dados administrativos, do SGRH, do Cadastro de Eleitores, de Eleições, PJe, SEI entre outros.
Link para informações mais detalhadas da iniciativa:
https://docs.google.com/document/d/12D_TmjspDAZDfR2ggKQ2gdSY1ibJdURfJYVybAKX2Lg/edit?tab=t.0
- E-mail do laboratório: seinova@tre-sp.jus.br