https://repositorio.ufba.br/handle/ri/42869| Tipo: | Tese |
| Título: | Exploiting Calibration as a Multi-Objective Recommender System. |
| Título(s) alternativo(s): | Explorando a calibração como um sistema de recomendação multiobjetivo. |
| Autor(es): | Silva, Diego Correa da |
| Primeiro Orientador: | Durão, Frederico Araújo |
| metadata.dc.contributor.referee1: | Durão, Frederico Araújo |
| metadata.dc.contributor.referee2: | Pereira, Adriano César Machado |
| metadata.dc.contributor.referee3: | Manzato, Marcelo Garcia |
| metadata.dc.contributor.referee4: | Santos, Bruno Pereira dos |
| metadata.dc.contributor.referee5: | Souza, Rodrigo Rocha Gomes e |
| Resumo: | Collaborative Recommender Systems generate personalized recommendations by analyzing users' past interactions. However, traditional approaches often prioritize relevance, leading to issues such as super-specialization, popularity bias, and class imbalance. These limitations can result in recommendation lists that fail to represent the full spectrum of a user’s interests fairly. In this sense, Calibrated Recommendations address this problem by balancing relevance with fairness (calibration), ensuring that the distribution of recommended items aligns more closely with the user’s preference distribution. For example, when the user's profile comprises 80\% Adventure and 20\% Sci-fi, the calibrated recommendation seeks to generate a list following this distribution. Relevance and calibration are two distinct goals that the system should achieve. This multi-objective is reached through a trade-off balance approach. This thesis addresses calibrated recommendations as a multi-objective recommendation system, aiming to measure and improve the calibration of the recommendation list using the user's preferences as a target. Thus, we divide the goals of this thesis into studies, and inside each study, research questions were raised and answered. In the first study, we systematically benchmark 57 fairness measures, introducing novel methods for extracting user preference distributions and refining relevance estimation. As a result, four measures achieve the same four best performances. In the second study, we explored the broader impact of calibration on key recommendation objectives, including novelty, coverage, personalization, unexpectedness, and serendipity. Our findings indicate that calibration enhances item coverage and personalization while maintaining high recommendation utility. In the third study, we investigate the structural properties of the distributions used in calibrated recommendations. Unlike traditional recommender systems that operate in a one-dimensional space, calibrated recommendations involve high-dimensional user preference distributions. Our analysis shows that calibrated recommendation lists naturally form distinct user clusters, a phenomenon best understood through outlier detection models. In the fourth study, we propose two novel approaches for modeling user preferences to enhance the accuracy and adaptability of calibration techniques. The first method incorporates time-sensitive weighting to discount outdated preference information. The second method introduces an entropy-based approach to better capture user preferences in domains where item features are set-valued, such as movies with multiple genres. Experimental evaluations confirm that these approaches effectively reduce miscalibration while maintaining recommendation accuracy. Overall, this thesis advances the field of calibrated recommendations by providing a comprehensive evaluation of fairness measures, proposing novel calibration techniques, and analyzing the structural properties of user preference distributions. |
| Abstract: | Sistemas de Recomendação Colaborativa geram recomendações personalizadas analisando as interações anteriores dos usuários. No entanto, abordagens tradicionais frequentemente priorizam a relevância, levando a problemas como superespecialização, viés de popularidade e desequilíbrio de classes. Essas limitações podem resultar em listas de recomendações que não representam de forma justa todo o espectro de interesses de um usuário. Nesse sentido, Recomendações Calibradas abordam esse problema equilibrando relevância com justiça (calibração), garantindo que a distribuição dos itens recomendados se alinhe mais estreitamente com a distribuição de preferências do usuário. Por exemplo, quando o perfil do usuário compreende 80% de Aventura e 20% de Ficção Científica, a recomendação calibrada busca gerar uma lista seguindo essa distribuição. Relevância e calibração são dois objetivos distintos que o sistema deve atingir. Esse multiobjetivo é alcançado por meio de uma abordagem de equilíbrio de compensações. Esta tese aborda as recomendações calibradas como um sistema de recomendação multiobjetivo, com o objetivo de mensurar e aprimorar a calibração da lista de recomendações usando as preferências do usuário como alvo. Assim, dividimos os objetivos desta tese em estudos e, dentro de cada estudo, questões de pesquisa foram levantadas e respondidas. No primeiro estudo, comparamos sistematicamente 57 medidas de justiça, introduzindo novos métodos para extrair distribuições de preferências do usuário e refinar a estimativa de relevância. Como resultado, quatro medidas alcançam os mesmos quatro melhores desempenhos. No segundo estudo, exploramos o impacto mais amplo da calibração nos principais objetivos de recomendação, incluindo novidade, cobertura, personalização, imprevisibilidade e serendipidade. Nossas descobertas indicam que a calibração aprimora a cobertura e a personalização dos itens, mantendo alta utilidade da recomendação. No terceiro estudo, investigamos as propriedades estruturais das distribuições usadas em recomendações calibradas. Diferentemente dos sistemas de recomendação tradicionais que operam em um espaço unidimensional, as recomendações calibradas envolvem distribuições de preferências do usuário de alta dimensão. Nossa análise mostra que listas de recomendações calibradas formam naturalmente clusters de usuários distintos, um fenômeno melhor compreendido por meio de modelos de detecção de outliers. No quarto estudo, propomos duas novas abordagens para modelar as preferências do usuário a fim de aprimorar a precisão e a adaptabilidade das técnicas de calibração. O primeiro método incorpora ponderação sensível ao tempo para descontar informações de preferências desatualizadas. O segundo método introduz uma abordagem baseada em entropia para melhor capturar as preferências do usuário em domínios onde as características dos itens são definidas por valores, como filmes com múltiplos gêneros. Avaliações experimentais confirmam que essas abordagens reduzem efetivamente a calibração incorreta, mantendo a precisão das recomendações. De modo geral, esta tese avança o campo das recomendações calibradas ao fornecer uma avaliação abrangente de medidas de justiça, propor novas técnicas de calibração e analisar as propriedades estruturais das distribuições de preferências do usuário. |
| Palavras-chave: | Recommendation system Calibration Multi-Objective Distribution |
| CNPq: | CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
| Idioma: | eng |
| País: | Brasil |
| Editora / Evento / Instituição: | Universidade Federal da Bahia |
| Sigla da Instituição: | UFBA |
| metadata.dc.publisher.department: | Instituto de Computação - IC |
| metadata.dc.publisher.program: | Programa de Pós-Graduação em Ciência da Computação (PGCOMP) |
| Citação: | SILVA, Diego Corrêa da. Exploiting Calibration as a Multi-Objective Recommender System. 2025. 167 f. Tese (Doutorado em Ciência da Computação) - Instituto de Computação, Universidade Federal da Bahia, Salvador (Bahia), 2025. |
| Tipo de Acesso: | Acesso Aberto |
| URI: | https://repositorio.ufba.br/handle/ri/42869 |
| Data do documento: | 18-Jun-2025 |
| Aparece nas coleções: | Tese (PGCOMP) |
| Arquivo | Descrição | Tamanho | Formato | |
|---|---|---|---|---|
| _PGCOMP___Thesis___Defesa___Diego___Unificada____Exploiting_Calibration_as_a_Multi_Objective_Recommender_System (1).pdf | 37,23 MB | Adobe PDF | Visualizar/Abrir |
Os itens no repositório estão protegidos por copyright, com todos os direitos reservados, salvo quando é indicado o contrário.