Use este identificador para citar ou linkar para este item: http://repositorio.utfpr.edu.br/jspui/handle/1/4841
Registro completo de metadados
Campo DCValorIdioma
dc.creatorReis, Ana Flávia dos-
dc.date.accessioned2020-04-09T22:33:19Z-
dc.date.available2020-04-09T22:33:19Z-
dc.date.issued2020-02-21-
dc.identifier.citationREIS, Ana Flávia dos. Eficiência energética no posicionamento de estações rádio-base móveis baseadas em VANTS aplicando aprendizagem por reforço. 2020. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2020.pt_BR
dc.identifier.urihttp://repositorio.utfpr.edu.br/jspui/handle/1/4841-
dc.description.abstractTo meet users demands, 5G cellular networks require high operational efficiency, making energy efficiency one of the primary challenges and objectives of modern communication systems. In addition, the increase in the number of devices and user requirements in these networks may turn analytical solutions applied in the context of energy efficiency and optimization of communication parameters not feasible, given the complexity associated to these solutions. To overcome this problem, more robust and flexible solutions that exploit the data generated by the network and make real-time decisions are required by these future networks. In this context, the use of Machine Learning techniques, capable of analyzing a big amount of data and learning from it, is a possible solution and can be applied, for example, in different self-organizing network contexts. The aim of this work is to analyze a positioning optimization application of UAVs, Unmanned Aerial Vehicles, in a scenario of temporary events based on a Q-learning algorithm, a reinforcement learning technique in which the agents learn to act to maximize a given reward. Two different rewards are proposed and compared, with the first aiming only to minimize the number of users in outage and the second provided to maximize energy efficiency by considering the amount of energy used for UAVs movements. The Q-learning solution is responsible for determining the best three-dimensional positioning and optimal transmit power given some possible power levels. The results show that the optimization of the transmission power reduced the percentage of users in outage, since interference between UAVs was minimized by allocating adequate power. Furthermore, it is shown that the introduction of a discount factor in the algorithm reward for UAV movements has been able to considerably increase the energy efficiency of the network, with a performance penalty over the user coverage. Finally, for the two solutions considered and in accordance with their respective objectives, the Q-learning technique, based on its ability to learn from iteration with an environment and from previous experiences, proved to be able to solve the problem of self-organization of the UAV-based network in an efficient manner, presenting itself as a promising solution for future cellular networks.pt_BR
dc.description.sponsorshipCoordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)pt_BR
dc.languageporpt_BR
dc.publisherUniversidade Tecnológica Federal do Paranápt_BR
dc.rightsopenAccesspt_BR
dc.subjectEnergia - Consumopt_BR
dc.subjectSistemas de telefonia celularpt_BR
dc.subjectSistemas de informação geográficapt_BR
dc.subjectDronept_BR
dc.subjectAprendizado do computadorpt_BR
dc.subjectSistemas de comunicação sem fiopt_BR
dc.subjectSistemas de transmissão de dadospt_BR
dc.subjectProcessamento eletrônico de dados em tempo realpt_BR
dc.subjectSistemas auto-organizáveispt_BR
dc.subjectEnergy consumptionpt_BR
dc.subjectCell phone systemspt_BR
dc.subjectGeographic information systemspt_BR
dc.subjectDrone aircraftpt_BR
dc.subjectMachine learningpt_BR
dc.subjectWireless communication systemspt_BR
dc.subjectData transmission systemspt_BR
dc.subjectReal-time data processingpt_BR
dc.subjectSelf-organizing systemspt_BR
dc.titleEficiência energética no posicionamento de estações rádio-base móveis baseadas em VANTS aplicando aprendizagem por reforçopt_BR
dc.title.alternativeEnergy efficiency in positioning UAV-based mobile base stations applying reinforcement learningpt_BR
dc.typemasterThesispt_BR
dc.description.resumoPara suprir as exigências de seus usuários, as redes celulares 5G devem ser altamente eficientes, tornando a eficiência energética um dos desafios e objetivos primários dos cenários de comunicações modernos. Além disso, o aumento no número de dispositivos e requisitos dos usuários dessas redes podem tornar as soluções analíticas aplicadas no contexto da eficiência energética e otimização de parâmetros da comunicação não factíveis, dada a complexidade atrelada à essas soluções. Para superar esse problema, soluções mais robustas e flexíveis, que exploram os dados gerados pela rede e tornam decisões em tempo real são as exigidas por essas redes futuras. Nesse contexto, a utilização de técnicas de Aprendizado de Máquina, capazes de analisar uma enorme quantidade de dados e aprender com eles, é uma possível solução, podendo ser aplicadas, por exemplo, em diferentes contextos de redes auto-organizáveis. O objetivo da presente dissertação é analisar uma aplicação de otimização do posicionamento de VANTs, Veículos Aéreos Não Tripulados, em um cenário de eventos temporários baseando-se em um algoritmo Q-learning, uma técnica de aprendizado por reforço, na qual os agentes das soluções propostas aprendem a agir para maximizar uma determinada recompensa. Duas diferentes recompensas são propostas e comparadas, com a primeira visando apenas minimizar o número de usuários em indisponibilidade e a segunda buscando maximizar a eficiência energética, considerando a quantidade de energia usada para a movimentação VANTs. A solução Q-learning é responsável por determinar o melhor posicionamento no espaço tridimensional e a potência de transmissão ideal, dados alguns níveis de potência possíveis. Os resultados obtidos mostram que a otimização da potência de transmissão implementada reduziu a probabilidade de indisponibilidade dos usuários da rede, uma vez que a interferência entre os VANTs foi minimizada a partir da alocação da potência adequada e, além disso, é mostrado que a introdução de um fator de desconto na recompensa do algoritmo relacionado ao gasto de energia para as movimentações VANTs foi capaz de aumentar consideravelmente a eficiência energética da rede, com uma penalidade no desempenho em relação à cobertura de usuários. Finalmente, para as duas soluções consideradas e de acordo os seus respectivos objetivos, a técnica Q-learning, a partir da sua capacidade de aprender com a iteração com um ambiente e de experiências anteriores, mostrou-se capaz de resolver o problema de auto-organização da rede baseada em VANTs de uma maneira eficiente, apresentando-se como uma solução promissora para as futuras redes celulares.pt_BR
dc.degree.localCuritibapt_BR
dc.publisher.localCuritibapt_BR
dc.creator.Latteshttp://lattes.cnpq.br/3224578726035716pt_BR
dc.contributor.advisor1Brante, Glauber Gomes de Oliveira-
dc.contributor.advisor1Latteshttp://lattes.cnpq.br/8347190422243353pt_BR
dc.contributor.advisor-co1Souza, Richard Demo-
dc.contributor.advisor-co1Latteshttp://lattes.cnpq.br/6825512654223870pt_BR
dc.contributor.referee1Brante, Glauber Gomes de Oliveira-
dc.contributor.referee1Latteshttp://lattes.cnpq.br/8347190422243353pt_BR
dc.contributor.referee2Farhat, Jamil de Araujo-
dc.contributor.referee2Latteshttp://lattes.cnpq.br/7539776887110465pt_BR
dc.contributor.referee3Pellenz, Marcelo Eduardo-
dc.contributor.referee3Latteshttp://lattes.cnpq.br/6834497622047154pt_BR
dc.publisher.countryBrasilpt_BR
dc.publisher.programPrograma de Pós-Graduação em Engenharia Elétrica e Informática Industrialpt_BR
dc.publisher.initialsUTFPRpt_BR
dc.subject.cnpqCNPQ::ENGENHARIAS::ENGENHARIA ELETRICApt_BR
dc.subject.capesEngenharia Elétricapt_BR
Aparece nas coleções:CT - Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial

Arquivos associados a este item:
Arquivo Descrição TamanhoFormato 
CT_CPGEI_M_Reis,_Ana_Flavia_dos_2020.pdf929,62 kBAdobe PDFThumbnail
Visualizar/Abrir


Os itens no repositório estão protegidos por copyright, com todos os direitos reservados, salvo quando é indicado o contrário.