Avaliação de desempenho de aplicações hadoop em nuvens computacionais

Provedores de nuvens, tipicamente, oferecem serviços através de tecnologia de virtualização, que torna possível a criação de vários ambientes a partir de um mesmo hardware físico. A computação em nuvem torna possível, através da internet, a execução de programas e armazenamento de dados, em data centers que não estão dedicados a um único usuário. Uma das principais características da computação em nuvem é a chamada elasticidade, que é a capacidade de incrementar ou reduzir os recursos dinamicamente, durante a execução das aplicações. Neste trabalho serão abordados alguns dos serviços oferecidos pela Amazon Web Services (AWS), com foco no Amazon Elastic Map Reduce (EMR), que fornece uma estrutura gerenciada do Hadoop para processamento distribuído de grandes quantidades de dados. Além disso, será apresentada a técnica de redimensionamento horizontal de recursos, a qual utilizará um implementação que dispara automaticamente o pedido para o redimensionamento dos recursos. Serão realizados também testes de aplicações Hadoop MapReduce em clusters de máquinas virtuais para realizar uma análise dos ambientes virtuais, considerando tempos de execução e custos financeirosCloud providers typically offer services through virtualization technology, which makes it possible to create multiple environments on the same physical hardware. Cloud computing makes it possible, through the internet, to run programs and store data in data centers that are not dedicated to a single user. One of the key features of cloud computing is the so-called elasticity, which is the ability to dynamically increase or decrease resources while running applications. This work will cover some of the services offered by Amazon Web Services (AWS), focusing on the Amazon Elastic Map Reduce (EMR), which provides a managed Hadoop framework for distributed processing of large amounts of data. In addition, a horizontal resource resizing technique will be presented, which will use an implementation that automatically triggers the request for the resizing of resour- ces. Testing of Hadoop MapReduce applications in virtual machine clusters will also be performed to undertake an analysis of virtual environments, considering execution times and financial costs40 p