EMR 스파크 스트리밍을 통해 실시간으로 Tablestore 데이터 읽기

E-맵리 듀스의 데이터가 Tablestore의 과정을 스트리밍 라이브 방법이 문서에 대해 설명합니다.

장면 디자인

인터넷의 발전과 함께, 기업은 더 많은 데이터를 축적는 2-11 같은 휴일에 큰 가치 뒤에 숨겨진 데이터는 전자 상거래 사업 수주로, 큰 화면에서 실시간으로 주문의 총 금액이 표시됩니다 엄청난 양, 그것은 불가능 초마다 통계가 흐름을 계산하기 위해이 시간을 사용해야하고, 통상적 인 방법에 의해 스트리밍 카프카 계산 메시지 큐를 수행하는 데 필요한 SQL 데이터베이스를 수행, 데이터 라인을 작성해야 카프카는 데이터베이스에, 카프카의 주문 정보에서 소비를 스트리밍 스파크.
직접 스파크 서비스 기능이 추가로 소모 스트리밍 스트리밍 및 채널 Tablestore 데이터베이스 및 본원에 사용될 수는, 전체 프로세스가도 4에 도시 된 바와 같이 특히., 간략화 돈 주문 수를 계산
1

나란히 간단한 데모 설명 흐름 표시 테이블 필드 통계 자료 Tablestore 번호.

전제 조건

따로 확인

추천

출처yq.aliyun.com/articles/719370