Solução para Gerenciamento de Largura de Banda usando Aprendizado por Reforço

Este trabalho propõe uma solução de aprendizado por reforço para automação de técnicas de coordenação de interferência entre células (ICIC) voltadas à mitigação de um dos principais desafios do projeto de redes móveis: a interferência co-canal (ICI). A solução é testada em um cenário dinâmico com a presença de hotspots, um aglomerado de usuários que pode agravar a ICI. As investigações foram efetuadas utilizando o simulador de redes ns-3. O impacto do hotspot é discutido à luz da distribuição de banda entre borda e centro da célula. Pelos resultados de caracterização do problema, é possível verificar a necessidade de, além do uso de ICIC, alocar de forma dinâmica sua distribuição de banda. Levando em consideração essa dinamicidade do ambiente, propõe-se como solução a utilização da técnica Multi Armed Bandit (MAB) para otimização do gerenciamento da largura de banda das técnicas de ICIC. Os experimentos de prova de conceito demonstram que a solução proposta supera, em termos de capacidade de transmissão, a configuração estática de distribuição de largura de banda, comprovando ganhos significativos.