Please use this identifier to cite or link to this item:
http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/42020
Title: | Estratégias de modelagem e características influentes na composição do risco de rescisão em contratos públicos. |
Other Titles: | Modeling strategies and influential characteristics in the composition of the risk of termination in public contracts. |
???metadata.dc.creator???: | MENEZES, Talita Lôbo. |
???metadata.dc.contributor.advisor1???: | ANDRADE, Nazareno Ferreira de. |
???metadata.dc.contributor.advisor-co1???: | MORAIS, Fábio Jorge Almeida de. |
???metadata.dc.contributor.referee1???: | MARINHO, Leandro Balby. |
???metadata.dc.contributor.referee2???: | MOURA, José Antão Beltrão. |
???metadata.dc.contributor.referee3???: | SILVA, Diego Furtado. |
???metadata.dc.contributor.referee4???: | FIGUEIREDO, Flavio Vinicius Diniz de. |
Keywords: | Engenharia de características;Aprendizagem de máquina;Contratos públicos;Estimação de risco;Feature engineering;Machine learning;Risk estimation;Public contracts;Modelagem - contratos públicos |
Issue Date: | 14-Mar-2025 |
Publisher: | Universidade Federal de Campina Grande |
Citation: | MENEZES, Talita Lôbo. Estratégias de modelagem e características influentes na composição do risco de rescisão em contratos públicos. 2025. 154 f. Tese (Doutorado em Ciência da Computação) – Programa de Pós Graduação em Ciência da Computação, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande, Paraíba, Brasil, 2025. |
???metadata.dc.description.resumo???: | Contratos públicos são instrumentos utilizados para a formalização de vínculos entre a administração pública e empresas contratadas. Com o uso desses instrumentos pelas administrações públicas federal, estaduais e municipais para a aquisição de bens e serviços, com o objetivo de suprir as demandas da população, o volume de contratos firmados representa um desafio para os órgãos públicos e a sociedade civil no pleno exercício do controle e acompanhamento da execução desses contratos. Nesse contexto, o uso da aprendizagem de máquina na seleção de casos prioritários para fiscalização tem se mostrado uma estratégia promissora. Este trabalho de tese avaliou a eficácia prática de uma ferramenta atualmente em uso para a priorização de empresas com comportamentos de risco. Nessa avaliação, os resultados mostram que a priorização realizada pela ferramenta é ineficaz, especialmente ao considerar o número de empresas falsamente classificadas como de alto risco, reforçando o enquadramento do problema da estimação de risco em nível do contrato. Em seguida, com um conjunto inédito de rótulos em nível de contrato, foi proposto e avaliado um modelo de previsão de risco de contratos municipais treinado a partir de características do próprio contrato, da empresa contratada e de seu histórico de fornecimento, além da avaliação de estratégias de mitigação do desbalanceamento entre classes de risco. O resultado da modelagem evidencia a viabilidade da estimação de risco em nível de contrato, com performance superior à de um classificador aleatório para o conjunto de dados considerado. Entretanto, não há evidências de que o uso de técnicas de balanceamento artificial de classes nesse contexto melhore a capacidade preditiva do modelo em relação ao balanceamento por pesos durante o aprendizado. A partir desse modelo base apresentado, outras características preditoras foram experimentadas: características latentes sobre o objeto do contrato e a característica econômica do PIB per capita dos municípios contratantes. Como resultado, observa-se que, ao utilizar características latentes, a performance do modelo é equivalente ou superior à do modelo base. Já com o uso do PIB per capita, é provável que o classificador obtenha vantagem em relação ao modelo base. Com base no modelo de maior AUC-PR, foi fornecida uma visão geral da influência das características preditoras utilizadas no risco de rescisão contratual e da maneira como cada característica contribui para a classificação correta dos contratos. Por fim, ao avaliar o alinhamento do aprendizado e da previsão do iv modelo de risco com os pareceres técnicos de justificativa de rescisão contratual feitos por especialistas, observou-se que as características determinantes para o risco na modelagem possuem razoável verossimilhança com as causas reais e práticas das rescisões contratuais. |
Abstract: | Public contracts are essential instruments for formalizing agreements between public administrations and contracted companies. Federal, state, and municipal governments rely on these contracts to procure goods and services that address public needs. However, the growing volume of contracts presents significant challenges for public agencies and civil society in effectively monitoring and controlling their execution. In this context, machine learning has emerged as a promising strategy for prioritizing high-risk cases for inspection. This dissertation evaluates the practical effectiveness of a tool currently in use for identifying companies with risk-prone behaviors. Initial findings reveal that the tool's prioritization is ineffective, particularly due to the high number of companies incorrectly classified as high-risk. These results highlight the need to reframe the risk estimation problem at a more actionable level: the contract level. Using a novel dataset of contract-level labels, this study proposes and evaluates a predictive model for assessing municipal contract risk. The model incorporates features derived from the contract itself, the contracted company, and its supply history, while also exploring strategies to address class imbalance in risk categories. The results demonstrate the feasibility of contract-level risk estimation, with the model outperforming a random classifier on the dataset. However, the use of artificial class balancing techniques does not significantly enhance the model's predictive performance compared to weight balancing during training. Building on this baseline model, additional predictive features were introduced, including semantically latent features related to the contract’s subject matter and the GDP per capita of the contracting municipalities. The inclusion of latent features yielded model performance equivalent to or better than the baseline, while the use of GDP per capita provided a potential advantage. Based on the model with the highest AUC-PR, the study offers insights into the influence of predictive features on contract termination risk and their contribution to accurate contract classification. Finally, the study assesses the alignment between the model’s risk predictions and expert technical opinions on contract termination justifications. The findings indicate that the key risk factors identified by the model exhibit reasonable consistency with the real-world causes of contract terminations. This alignment underscores the model’s practical relevance and its potential to support decision-making in public contract management. |
Keywords: | Engenharia de características Aprendizagem de máquina Contratos públicos Estimação de risco Feature engineering Machine learning Risk estimation Public contracts Modelagem - contratos públicos |
???metadata.dc.subject.cnpq???: | Ciência da Computação |
URI: | http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/42020 |
Appears in Collections: | Doutorado em Ciência da Computação. |
Files in This Item:
File | Description | Size | Format | |
---|---|---|---|---|
TALITA LÔBO DE MENEZES - TESE PPGCC CEEI 2025.pdf | 57.69 MB | Adobe PDF | View/Open |
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.