학습, 일, 생활 속에서, 우리는 종종 업무 책임을 접하게 된다. (존 F. 케네디, 공부명언) 직무 직책을 명확히 하면 직원들이 직무 책임을 이해하고 장악할 수 있고, 노동 관리를 극대화하고, 인력을 과학적으로 배치하고, 인재가 최선을 다하고, 인직이 일치하는 것을 할 수 있다. 일자리 직책을 어떻게 세워야 합니까? 다음은 내가 당신을 위해 정리한 대형 데이터 개발 엔지니어의 기본 직책인 직무 직책입니다. 참고용으로만 참고하시기 바랍니다. 읽어 주시기 바랍니다. (데이비드 아셀, Northern Exposure (미국 TV 드라마), 예술명언)
빅 데이터 개발 엔지니어의 기본 책임-직무 책임 1 책임:
1. 대규모 데이터 플랫폼 구축 및 프로젝트에 참여하는 기술 아키텍처
2, 데이터 분석, 마이닝, 모델 특정 제품;
3. 제품 수요에 따라 빅 데이터 관련 솔루션을 분석, 작성 및 개발합니다.
작업 요구 사항:
1, 컴퓨터 관련 학과 이상 학력, 탄탄한 프로그래밍 기반, 2 년 이상 빅 데이터 개발 경험.
2. Hadoop 생태와 아키텍처, Flink, Spark, Hive 등 일반적으로 사용되는 오픈 소스 도구에 익숙합니다.
3. Flume, kakfa, scribe 와 같은 로그 수집 시스템에 익숙합니다.
4. 메인스트림 데이터베이스 (Oracle, postgreSql, Mysql, SQL Server) 의 1 이상에 익숙하고 SQL 성능 튜닝 경험이 우수합니다.
데이터웨어 하우스 ETL 경험이 선호됩니다.
6. 사용자 행동 로그 수집, 대량 데이터 처리 및 데이터 모델링 경험이 선호됩니다.
지속적인 학습 능력을 갖추십시오. 오픈 소스 소프트웨어를 좋아하고, 지식을 공유하고자 합니다. 일에 대해 진지하게 책임을 지다. 큰 압력 하에서 독립적으로 일할 수 있습니다.
빅 데이터 개발 엔지니어의 기본 책임-직무 책임 2 책임:
1, 디지털 통화의 데이터 통계 분석, 디지털 통화의 양적 투자 전략 설계, 관리 및 실제 투자 운영을 담당합니다.
2. 거래인과 도킹하여 실행 가능한 전략 테스트 계획을 세우고 검증을 위한 새로운 전략 모델을 개발합니다.
3. 거래자가 거래 및 위험 관리를 수행하고 실제 거래 결과를 정량화하여 거래 자동화를 용이하게 합니다.
4, 상사가 지정한 다른 일.
요구 사항:
1, 수학/컴퓨터/금융 전공, 알고리즘 및 기계 학습 이론의 기초가 탄탄하다.
2. 양적 펌오퍼 거래 경험이 있고, 수학 모델링 경험이 풍부하며, 데이터 처리 능력이 강자가 우선이다.
3. 금융시장 가격 변동에 대한 독특한 이해와 심도 있는 수량화 분석을 통해 어느 정도의 헤지 전략 연구 경험이 있다.
디지털 통화 분야, 결과 지향에 관심이 있습니다.
웹 페이지 캡처 및 크롤러 프로그래밍 경험이 선호됩니다.
빅 데이터 개발 엔지니어의 기본 책임-직무 책임 3 가지 책임:
1. 빅 데이터 로그 분석 시스템의 설계, 선택 및 개발
2. 각 업무와 함께 데이터 지원을 제공하고 최적화 제품 및 운영 데이터를 요약합니다.
3. 사용자의 대량 데이터 처리, 사용자 속성, 동작 등의 정보 추출, 분석, 요약, 분석 결과 완료
비정상적인 데이터를 발견하고 지적하고 데이터의 합리성을 분석합니다.
5. 데이터 플랫폼 서비스의 안정성과 가용성을 보장하기 위해 회사의 대형 데이터 기반 플랫폼을 운영합니다.
6. 대규모 데이터 기반 플랫폼의 모니터링, 자원 관리 및 데이터 흐름 관리
7. 데이터 분석에 기반한 클라우드 플랫폼은 유연한 확장 솔루션을 예측할 수 있습니다.
요구 사항:
1, 로그 분석 데이터 시스템 실무 경험
2.3 년 이상의 인터넷 업계 R&D 경험은 Hadoop/hive/spark 를 사용하여 대량의 데이터를 분석할 수 있는 능력을 갖추고 있습니다.
3. Hadoop, Flume, Kafka, Zookeeper, HBase, Spark 의 설치 및 디버깅을 마스터하십시오.
4. 큰 데이터와 관련된 데이터베이스 시스템, 관계형 데이터베이스 및 NoSQL 에 익숙합니다.
5. Linux 운영 체제의 구성, 관리 및 최적화를 숙지하여 운영 체제 계층의 다양한 문제를 독립적으로 해결하고 해결할 수 있습니다.
6. 좋은 의사소통 능력, 우수한 계획과 집행 능력, 책임감이 강하고 학습능력이 우수하다.
빅 데이터 개발 엔지니어의 기본 책임-직무 책임 4 가지 책임:
1, 데이터 분석, 처리, 청소, 가공 프로그램 개발 담당
데이터 관련 플랫폼의 구축, 유지 보수 및 최적화를 담당합니다.
3. Hadoop/Spark/Hive/kafka 와 같은 분산 컴퓨팅 플랫폼을 기반으로 오프라인 분석 및 실시간 분석을 위한 컴퓨팅 프레임워크 개발을 담당합니다.
작업 요구 사항:
1, 학부는 2 1 1, 석사 이상 무제한 대학, 컴퓨터 소프트웨어 및 관련 전공이어야 합니다.
2. Java 와 Scala 언어, 공통 디자인 패턴, 코드 리팩토링에 익숙합니다.
Hadoop, hbase, Kafka, hive, spark, presto 를 능숙하게 사용하고 기본 프레임 워크와 구현 원리에 익숙합니다.
4. Spark Streaming 및 SPARK SQL 을 사용한 데이터 처리, Spark SQL 튜닝 경험;
5. 2 년 이상의 개발 경험을 요구하고, flink 개발자 경험이 선호됩니다.
6. 학습능력이 강하고, 신기술을 연구하는 것을 좋아하고, 팀관념이 있고, 독립적으로 문제를 해결할 수 있는 능력이 있다.
빅 데이터 개발 엔지니어의 기본 책임-직무 책임 5 책임:
1, 대규모 데이터 플랫폼의 인프라 및 성능 최적화, 플랫폼 구축 및 유지 관리 완료, 실시간 스트리밍 컴퓨팅 플랫폼, 분산 스케줄링, 시각화 보고서 등의 플랫폼 아키텍처 및 연구 개발을 담당합니다.
2. 다양한 오픈 소스 프레임 워크에 대한 심층적 인 코드 분석 및 최적화
빅 데이터 기술 솔루션 검토에 참여하십시오.
1 차 및 2 차 대형 데이터 엔지니어의 업무를 안내합니다.
작업 요구 사항:
1, 컴퓨터 관련 전문 전일제 대학 학위 이상, 분산 컴퓨팅 플랫폼 개발 경험 3 년 이상
2. Hadoop, Spark, Hbase, Hive, Flink, Kafka, Flume 등 대용량 데이터 관련 구성 요소에 대해 자세히 알아보십시오. , 적절한 사용자 정의 및 R&D 기능, 특히 Flink 프레임워크에 정통해야 합니다.
3. 데이터 수집, 데이터 청소, 데이터 웨어하우스 구축, 실시간 트래픽 계산 등의 시스템 개발 경험을 갖춘 안정적인 대규모 데이터 기반 플랫폼을 구축할 수 있습니다.
4. 기술에 대한 열정, 좋은 데이터 사고와 민감성, 어느 정도의 데이터 분석 능력자가 우선이며, 심도 있는 학습과 기계 학습에 대해 어느 정도 아는 사람이 우선이다.
5. 업무에는 계획성, 책임감과 집행 능력, 책임감이 높고, 업무 태도가 성실하며, 우수한 의사소통 능력과 팀워크가 있다.
을 눌러 섹션을 인쇄할 수도 있습니다