빅 데이터 분석은 일반적으로 어떤 도구를 사용하여 _ 빅 데이터를 분석하는 분석 도구는 주로 무엇입니까?

대용량 데이터 처리 분석 과정에서 일반적으로 사용되는 6 가지 주요 도구인

1, Hadoop

Hadoop 은 대량의 데이터를 분산 처리할 수 있는 소프트웨어 프레임워크입니다. 그러나 Hadoop 은 안정적이고 효율적이며 확장 가능한 방식으로 처리됩니다. Hadoop 은 컴퓨팅 요소 및 스토리지가 실패한다고 가정하므로 여러 작업 데이터 사본을 유지 관리하여 실패한 노드에 대해 처리를 재분배할 수 있도록 합니다. Hadoop 은 병렬 처리를 통해 처리 속도를 높이기 때문에 효율적입니다. Hadoop 은 여전히 확장 가능하며 페타바이트급 데이터를 처리할 수 있습니다. 또한 Hadoop 은 커뮤니티 서버에 의존하므로 비용이 적게 들고 누구나 사용할 수 있습니다.

2, HPCC

HPCC, HighPerformanceComputingand 의 약어입니다. 1993 년 미국 과학, 엔지니어링, 기술연방조정위원회가 국회에' 주요 도전 프로젝트: 고성능 컴퓨팅 및 통신' 보고서, 즉 HPCC 프로그램이라는 보고서, 즉 미국 대통령 과학 전략 프로젝트를 제출하여 연구와 개발을 강화함으로써 중요한 과학 및 기술 과제 문제를 해결하기 위한 것이다. HPCC 는 미국의 정보 고속도로 상향 구현 계획으로, 이를 구현하는 데 수십억 달러가 소요되며, 확장 가능한 컴퓨팅 시스템 및 관련 소프트웨어를 개발하여 태비트 네트워크 전송 성능 지원, 기가비트 네트워크 기술 개발, 연구 및 교육 기관 및 네트워크 접속 기능 확장 등의 주요 목표를 달성해야 합니다.

3, Storm

Storm 은 분산되고 내결함성이 있는 실시간 컴퓨팅 시스템인 무료 오픈 소스 소프트웨어입니다. Storm 은 Hadoop 의 대량 데이터를 처리하기 위해 방대한 데이터 스트림을 매우 안정적으로 처리할 수 있습니다. Storm 은 간단하고 다양한 프로그래밍 언어를 지원하며 매우 흥미롭게 사용합니다.

4, ApacheDrill

기업 사용자가 보다 효과적이고 빠른 Hadoop 데이터 조회 방법을 찾을 수 있도록 Apache 소프트웨어 재단은 최근' Drill' 이라는 오픈 소스 프로젝트를 시작했습니다. ApacheDrill 은 Google'sDremel.

Hadoop 공급업체 MapR 의 제품 관리자인 TomerShiran 에 따르면' Drill' 은 Apache 인큐베이터 프로젝트로 운영되어 글로벌 소프트웨어 엔지니어를 대상으로 지속적으로 홍보될 예정입니다.

5, RapidMiner

RapidMiner 는 세계 최고의 데이터 마이닝 솔루션이며, 대부분 첨단 기술을 갖추고 있습니다. 데이터 마이닝 작업은 데이터 마이닝 프로세스의 설계 및 평가를 단순화하는 다양한 데이터 예술을 포함하여 광범위한 영역을 포함합니다.

6, PentahoBI

PentahoBI 플랫폼은 기존 BI 제품과 달리 프로세스 중심의 솔루션 중심 프레임워크입니다. 그 목적은 비즈니스 인텔리전스 애플리케이션 개발을 용이하게 하기 위해 다양한 엔터프라이즈 BI 제품, 오픈 소스 소프트웨어, API 등의 구성 요소를 통합하는 것입니다. 그 출현으로 Jfree, Quartz 등과 같은 비즈니스 인텔리전스를 위한 다양한 독립 제품이 통합되어 복잡하고 완벽한 비즈니스 인텔리전스 솔루션을 구성할 수 있게 되었습니다.

1, 대용량 데이터는 특히 설계된 하드웨어 및 소프트웨어 도구가 필요한 데이터 세트를 가리키는 광범위한 용어입니다. 이 데이터 세트는 일반적으로 1 조 또는 EB 크기입니다.

2, 이 데이터 세트는

a, 센서, 기후 정보, 잡지, 신문, 문장 등 다양한 출처에서 수집됩니다.

b, 대용량 데이터 생성의 다른 예로는 구매 거래 기록, 네트워크 로그, 의료 기록, 이벤트 모니터링, 비디오 및 이미지 아카이브, 대형 전자 상거래 등이 있습니다.

c, 빅 데이터 분석은 대량의 데이터를 연구하는 과정에서 패턴, 관련성 및 기타 유용한 정보를 찾는 것으로 기업이 변화에 더 잘 적응하고 보다 현명한 결정을 내리는 데 도움이 됩니다.