Bigdata 는 일반적으로 한 회사가 만든 대량의 비정형 및 반정형 데이터를 설명하는 데 사용되며 분석을 위해 관계형 데이터베이스로 다운로드하는 데 많은 시간과 비용이 소요됩니다. 대용량 데이터 세트의 실시간 분석에는 MapReduce 와 같은 프레임워크가 수십 대, 수백 대, 심지어 수천 대의 컴퓨터에 작업을 할당해야 하기 때문에 대용량 데이터 분석은 클라우드 컴퓨팅과 연결되는 경우가 많습니다.
큰 데이터의 특징
데이터 양, 데이터 종류, 실시간 요구 사항, 데이터 함축 가치가 크다. 각 업종마다 큰 데이터가 있지만 대량의 정보와 컨설팅은 복잡하기 때문에 검색, 처리, 분석, 요약, 요약이 필요합니다.
빅 데이터 시대의 영향
점점 더 많은 정부, 기업 등 기관들이 데이터가 조직의 가장 중요한 자산이 되고 있고, 데이터 분석 능력이 조직의 핵심 경쟁력이 되고 있다는 것을 깨닫기 시작했다. 예를 들어 20 12 년 3 월 22 일 오바마 정부는 2 억 달러를 투자하여 빅 데이터 관련 산업의 발전을 촉진하고' 빅 데이터 전략' 을 국가적 의지로 끌어올렸다고 발표했다. 20 12 년 동안 유엔은' 빅 데이터 정부 백서' 를 발표해 빅 데이터가 유엔과 세계 각국 정부의 역사적 기회라고 지적했다. 사람들은 이제 매우 풍부한 데이터 자원을 활용하여 사회 경제에 대한 전례 없는 실시간 분석을 통해 정부가 사회 경제 운영에 더 잘 대처할 수 있도록 도울 수 있습니다.
빅 데이터의 의미와 전망
빅데이터는 새로운 시스템, 새로운 도구, 새로운 모델을 이용하여 발굴하여 통찰력과 새로운 가치를 지닌 거대한 역동적이고 지속 가능한 데이터입니다. 이전에는 방대한 데이터에 직면하여 우리는 맹목적으로 볼 수 있었기 때문에 사물의 진정한 본질을 이해할 수 없었기 때문에 과학 업무에서 잘못된 추론이 나올 수 있었다. (데이비드 아셀, Northern Exposure (미국 TV 드라마), 과학명언) 빅 데이터 시대가 도래함에 따라 모든 진실이 여러분 앞에 드러날 것입니다.
빅 데이터 분석의 목적
빅 데이터 분석의 핵심 목적은 대용량 데이터를 기반으로 기계 학습과 관련된 다양한 기술 및 수학적 모델링을 통해 발생 가능성을 예측하고 적절한 조치를 취하는 것입니다. 주가 예측, 항공권 가격 예측, 독감 예측 등.
만약 우리가 일이 발생할 가능성을 예측한다면, 적절한 개입을 통해 일을 예상 방향으로 이끌 수 있다. 예를 들어 아마존과 모든 전자상들처럼 사용자 선호도와 소비능력에 대한 분석에 따라 상품을 추천하여 사용자가 소비금액을 늘리도록 유도한다. 구글 등 인터넷 거물들도 각종 기술 수단을 통해 서로 다른 광고를 다른 사용자에게 선보이려고 시도하며 정밀 마케팅이라고 부르며 조회수 (회사 수익) 를 높인다. 온라인 게임 회사도 운영 프로젝트의 플레이어 행동 데이터 분석을 통해 게임 수준과 유료점 디자인을 적시에 조정할 수 있다.