빅 데이터 엔지니어는 무엇을 합니까?
역사를 분석하고, 미래를 예측하고, 선택을 최적화하는 것은 대형 데이터 엔지니어가 데이터를 재생할 때 가장 중요한 세 가지 작업입니다.
대형 데이터 엔지니어는 분산 컴퓨팅 서비스를 설계하고 개발하기 위해 Hadoop 및 Spark 기반 데이터 분석 플랫폼을 구축해야 합니다. 대형 데이터 플랫폼 (Hadoop, HBase, Spark 등) 클러스터 환경의 구축, 성능 튜닝 및 일상적인 유지 관리를 담당합니다. ).