빅데이타의 핵심기술과 공통된 특징
- KEY&VALUE로 저장
- 분산환경지원
- CALL LEVEL INTERFACE지원(DBMS에 접근하는 표준)
- 막대한 양의 데이터를 처리할 수 있는 대용량 데이터의 빠른 인덱싱
- 클러스터나 그리드에서의 구동을 위해 다양한 테이블로 데이터베이스를 나눠야 하는 복잡한 작업과 '샤딩(sharding)없이 손쉽고 저렴하게 여러 서버들의 수평적 확장(horizontal scaling)됨
빅데이타 용어 약술
PB(Peta byte) : 디지털 신호의 처리 속도 또는 용량을 표시하는 단위로 1015이다. 1PB는 1,024TB이다.
ERP(Enterprise Resources Planning) : 전사적 자원관리, 기업활동을 위해 사용되는 기업 내의 모든 인적, 물적 자원을 효율적으로 관리하여 궁극적으로 기업의 경쟁력을 강화시켜 주는 역할을 하는 통합정보시스템이다.
SCM(Supply Chain Management)은 기업에서 생산, 유통 등 모든 공급망 단계를 최적화해 수요자가 원하는 제품을 원하는 시간과 장소에 제공하는 '공급망관리'를 뜻한다.
CRM(Customer relationship management) : 고객관계관리는 기업이 고객관계를 관리해 나가기 위해 필요한 방법론이나 소프트웨어 등을 가리키는 용어이다. 기업들이 고객들의 성향과 욕구를 미리 파악해 이를 충족시켜 주고 기업들이 목표로 하는 수익이나 광고효과 등 원하는 바를 얻어내는 기법을 말한다.
BI(Business Intelligence) : 데이타를 정보화시키고 이를 이용하여 회사 경영에 도움을 주는 정보를 추출하는 기법
DW(Data Warehouse) : 기존 시스템의 데이터베이스에 축적된 데이터를 추출하여 공통 형식으로 변환, 일원화시켜 새롭게 생성된 데이터베이스로 다양한 형태의 데이터에 대해 사용자 분석이 용이하도록 주제지향적, 비휘발적으로 구성한 통합자료 저장소이다.
- 운영데이타의 추출, 변환, 적재된 데이타들의 모임으로 큰 DB라고 생각하면 됨
DM(Data Mining) : 많은 데이터 가운데 숨겨져 있는 유용한 상관관계를 발견하여 미래에 실행 가능한 정보를 추출해 내고 의사 결정에 이용하는 과정을 말한다.
NoSQL(Not Only SQL)은 오픈 소스 기반의 고성능의 분산 데이터 저장 시스템으로 관계형 데이터베이스의 한계를 극복하기 위한 데이터 저장소의 새로운 형태의 수평적 확장을 특징으로 한다. 관계형이 아니기 때문에 join이 없고 고정된 스키마를 갖지 않는다.
* 샤딩(sharding)은 여러 노드에서 테이블 구조를 복제하지만, 이러한 노드 사이에서 데이터를 논리적으로 나누는 파티셔닝의 한 양식
* DB2(Database 2) 1983년에 발표된 미국 IBM의 관계형 데이터베이스 관리 시스템이다. 여러 사용자들이 여러 개의 데이터베이스에 동시에 접근할 수 있는 대형데이터베이스를 위한 시스템
