Apache HBase란 무엇인가요?

HBase는 많은 빅 데이터 사용 사례에서 일반적인 희소 데이터 세트를 내결함성 방식으로 저장할 수 있도록 지원합니다. HBase는 대용량 데이터에 대한 실시간 데이터 처리 또는 임의 읽기/쓰기 액세스에 적합합니다.

관계형 데이터베이스 시스템과 달리 HBase는 SQL과 같은 구조화된 쿼리 언어를 지원하지 않으며, 실제로 관계형 데이터 저장소가 아닙니다. HBase 애플리케이션은 일반적인 Apache MapReduce 애플리케이션처럼 Java™로 작성됩니다 HBase는 Apache Avro, REST 및 Thrift로 애플리케이션을 작성하는 것도 지원합니다.

HBase 시스템은 선형 확장이 가능하도록 설계되었습니다. HBase는 전통적인 데이터베이스처럼 행과 열로 구성된 표준 테이블 집합으로 구성됩니다. 각 테이블에는 기본 키로 정의된 요소가 있어야 하며, HBase 테이블에 대한 모든 액세스는 이 기본 키를 사용해야 합니다.

구성 요소로서 Avro는 숫자형, 바이너리 데이터 및 문자열을 포함한 다양한 기본 데이터 유형과 배열, 맵, 열거형 및 레코드를 포함한 여러 복합 데이터 유형을 지원합니다. 데이터에 대한 정렬 순서를 정의할 수도 있습니다.

HBase는 고성능 조정을 위해 ZooKeeper에 의존합니다. ZooKeeper는 HBase에 내장되어 있지만, 프로덕션 클러스터를 운영하는 경우에는 HBase 클러스터와 통합된 전용 ZooKeeper 클러스터를 구성하는 것이 권장됩니다.

HBase는 빅 데이터의 일괄 처리를 위한 쿼리 엔진인 Hive와 잘 작동하여 내결함성 빅 데이터 애플리케이션을 지원합니다.

HBase의 열은 객체의 속성을 나타냅니다. 예를 들어 테이블에 환경 내 서버에서 발생한 진단 로그가 저장되는 경우, 각 행은 하나의 로그 레코드가 될 수 있으며, 일반적인 열로는 로그 레코드가 작성된 타임스탬프나 해당 레코드가 생성된 서버 이름 등이 있을 수 있습니다.

HBase를 사용하면 많은 속성을 컬럼 패밀리로 그룹화하여 컬럼 패밀리의 요소가 모두 함께 저장되도록 할 수 있습니다. 이는 지정된 행의 모든 열이 함께 저장되는 행 기반 관계형 데이터베이스와 다릅니다. HBase를 사용하면 테이블 스키마를 미리 정의하고 컬럼 패밀리를 지정해야 합니다. 그러나 언제든지 새 열을 패밀리에 추가할 수 있으므로 스키마를 유연하게 만들고 변화하는 애플리케이션 요구 사항에 적응할 수 있습니다.

HDFS에 NameNode와 슬레이브 노드가 있고 MapReduce에 JobTracker 및 TaskTracker 슬레이브가 있는 것처럼 HBase도 비슷한 개념을 기반으로 구축되었습니다. HBase에서 마스터 노드는 클러스터를 관리하고 지역 서버는 테이블의 일부를 저장하고 데이터에 대한 작업을 수행합니다. HDFS는 NameNode의 가용성으로 인해 몇 가지 엔터프라이즈 문제가 있는 것처럼, HBase도 마스터 노드의 손실에 민감합니다.