Analista Big Data - Hadoop

Realizar a instalação, configuração e manutenção de um cluster Hadoop com Spark.<br />Será um cluster pequeno com aproximadamente 4 máquinas (1 mestre e 3 escravos), essa instalação deverá ser feita com o Apache Ambari (ferramenta para automatização de instalação de clusters).<br />Esse cluster também pode/deve conter outras ferramentas além do Hadoop. (Isso inclui Hue, Hive, Pig, Zeppelin etc)<br /><br />Depois disso, será feito um trabalho de extração de dados do cliente, essa extração compreende aproximadamente 70 tabelas de um banco de dados Sql Server.<br />O volume de dados é entre 100gb ~ 200gb.<br />Cada tabela deve ser armazenada dentro do cluster compactada.<br />Provavelmente será um script bash que fará esse processo.<br /><br />Provavelmente haverá o esforço de gerar relatórios para efeito de prova de conceito.<br />Qualquer duvida pode me chamar.<br />