역할 및 필요기술 빅 데이터 분산 처리를 위해 Hadoop echo system의 SW를 기반으로 데이터 수집, 가공, visualization할 수 있는 플랫폼을 설계하고 개발하며, 기술을 지원함과 동시에 신기술을 선행 검증하고 적용하는 업무를 수행합니다. - Apache MapReduce , Spark , Hive, Impala, Tajo등 data 가공 및 SQL on Hadoop 기술 - Storm, Spark, Flink 등 Streaming data processing과 다양한 NoSQL DB의 적용 기술 - Message Queue 와 Oozie, Hue, Ambari 등 운영 솔루션 적용 기술 - Hadoop echo system의 component를 이용한 데이터 분산처리 프로그래밍 기술..