Avaliando so avaliadores
O artigo "Avaliando os avaliadores: quão eficientes são os sistemas de correção automática de redações?" foi publicado na revista Leia Escola. O artigo consolida parte dos resultados alcançados no PIDTI desenvolvido entre setembro e maio de 2025 no âmbito do Gentil. O texto avalia eficácia dos sistemas de correção automática de redações em português do Brasil, comparando suas avaliações com as de professores experientes. Foram analisados três sistemas disponíveis no mercado brasileiro: coRedação, CRIA e Glau, utilizando um corpus de 40 redações de alunos do ensino médio. Os resultados revelaram divergências significativas entre as avaliações dos sistemas e as dos avaliadores humanos, especialmente na avaliação geral das redações. Embora os sistemas mostrem alguma convergência na avaliação isolada das competências do ENEM, o desempenho global apresentou discrepâncias consideráveis. As análises estatísticas, incluindo correlação de Pearson, erro médio absoluto e diferença média quadrática, confirmaram a variabilidade no desempenho dos sistemas. A pesquisa destaca a necessidade de aprimoramentos nos sistemas de correção automática para que possam ser utilizados de forma mais eficaz como ferramentas de apoio ao ensino.
Leia o artigo completo: https://revistas.editora.ufcg.edu.br/index.php/leia/article/view/6493
Seja bem-vinda, seja bem-vindo ao site do Gentil!
O Gentil foi formado há pouco tempo, no final de 2023, e até o momento já fizemos algumas reuniões preparatórias. Escolhemos o nome do grupo, definimos um primeiro projeto-piloto, e cadastramos o grupo no Diretório de Grupos de Pesquisa do CNPq. No entanto, para que possamos começar nossas atividades, faltava ainda uma plataforma digital para promoção, divulgação e organização do material. Ei-la aqui, ainda incompleta, em processo de construção, e por ora hospedada em servidor compartilhado. Mas é um primeiro passo, e um passo importante, principalmente em se tratando de um grupo que se propõe a trabalhar com tecnologias da informação e da linguagem.
Faça parte do Gentil!
O Gentil é recente e está ainda em formação. Se você tem interesse na pesquisa, no desenvolvimento ou na avaliação de ferramentas, recursos ou aplicações de inteligência linguística artificial, principalmente aplicada à educação, este é um espaço de interlocução, experimentação e aprendizagem. Junte-se a nós. Precisamos de ajuda. E não importa o seu perfil: professor do ensino superior, professor da educação básica, aluno de graduação ou de pós-graduação, aluno de ensino médio. Valorizamos e buscamos a diversidade. E tudo bem se você ainda não tiver nenhum conhecimento da área: estamos aqui para aprender. Para saber mais, entre em Contato.
O Gentil (Grupo de Estudos em Novas Tecnologias da Informação e da Linguagem) é um grupo de professores e estudantes, principalmente da Universidade do Distrito Federal (UnDF), voltado para a pesquisa e o desenvolvimento de soluções tecnológicas para a rede de educação da Região Integrada de Desenvolvimento do Distrito Federal (RIDE-DF).
O Gentil acredita na indissociabilidade entre ensino, pesquisa e extensão e procura atuar de forma articulada nessas três áreas. Seus principais objetivos são:
- Mapear as necessidades de superestrutura tecnológica (programas e aplicações) dos sistemas de ensino da RIDE-DF;
- Desenvolver sistemas e aplicações que possam atender ou reduzir as necessidades identificadas;
- Capacitar os profissionais de ensino para o uso das soluções desenvolvidas; e
- Avaliar os impactos, para o processo de ensino-aprendizagem, do emprego das soluções desenvolvidas.
Veja aqui as nossas atividades em: