Databend Open Source 주간호 136

Databend는 최신 클라우드 데이터 웨어하우스입니다. 대규모 분석 요구 사항을 지원하기 위한 유연성과 효율성을 고려하여 설계되었습니다. 무료이며 오픈 소스입니다. 지금 클라우드 서비스를 경험해보세요: https://app.databend.cn .

Databend에 무슨 일이 일어나고 있나요?

이번 주 Databend의 새로운 개발을 살펴보고 마음에 더 가까운 Databend를 만나보세요.

Databend의 작업 및 알림 이해

Databend는 이제 완전한 작업 및 알림 메커니즘을 지원합니다.

작업은 계획 또는 DAG 기반 작업 그래프에 따라 지정된 SQL 문을 실행합니다. 알림 통합을 사용하면 외부 메시징 서비스에 알림을 보낼 수 있습니다.

CREATE TASK IF NOT EXISTS mytask
 WAREHOUSE = 'mywh'
 SCHEDULE = 30 SECOND
 ERROR_INTEGRATION = 'myerror'
AS
BEGIN
    BEGIN;
    INSERT INTO mytable(ts) VALUES(CURRENT_TIMESTAMP);
    DELETE FROM mytable WHERE ts < DATEADD(MINUTE, -5, CURRENT_TIMESTAMP());
    COMMIT;
END;

위의 예에서는 mytask라는 작업을 정의합니다. mywh컴퓨팅 클러스터에서 30초마다 실행 됩니다 . 작업은 INSERT 문과 DELETE 문을 포함하는 다중 문 트랜잭션을 실행합니다. 작업이 실패하면 myerror라는 오류 통합이 트리거됩니다.

작업 및 알림 관련 메커니즘은 Databend Cloud에서 즉시 사용할 수 있습니다. 자세한 내용을 알고 싶으면 Databend 팀에 문의 하거나 아래 나열된 리소스를 확인하세요.

코드코너

Databend 및 주변 생태계의 코드 조각이나 프로젝트를 살펴보겠습니다.

Databend와 Snowflake 비교: 데이터 수집 벤치마크

최근 Databend와 Snowflake는 성능 및 비용과 같은 측면을 다루는 데이터 수집 벤치마크 테스트를 수행했으며, 여기에는 주로 다음 네 가지 기본 테스트가 포함되었습니다.

TPC-H SF100 데이터 세트 로딩, 대규모 데이터 지향, 약 6억 행.
ClickBench 히트 데이터 세트 로드는 약 1억 행의 대규모 와이드 테이블 데이터를 지향합니다.
1초 신선도: 1초 신선도 제한 하에서 플랫폼의 데이터 수집 기능을 비교합니다.
5초 신선도: 5초 신선도 제한 하에서 플랫폼의 데이터 수집 기능을 비교합니다.

데이터세트 로딩 비교

데이터 최신성 비교

관심 있는 분은 다음 문서를 읽고 Databend Cloud의 저비용, 고성능 데이터 수집에 대해 알아보세요.

문서 | Databend와 Snowflake 비교: 데이터 수집 벤치마크

하이라이트

다음은 몇 가지 주목할만한 이벤트입니다. 아마도 흥미로운 것을 찾을 수 있을 것입니다.

CROSS JOIN은 오버플로를 지원합니다.
집계 해시 테이블은 오버플로를 지원합니다.
반전된 인덱스 새로 고침을 지원합니다.
더 많은 데이터 분석 도구를 지원하려면 시간 및 날짜 관련 함수에 대한 더 많은 함수 별칭을 추가하세요.

다음은 무슨 일이야?

우리는 항상 최첨단 기술과 혁신적인 아이디어에 열려 있으며 커뮤니티에 참여하여 Databend에 활력을 불어넣는 것을 환영합니다.

TOP K 구문 지원

Databend 계획은 SELECT TOP결과 집합의 상위 K개 항목을 선택하는 데 사용되는 문을 지원합니다.

다음 SELECT TOP문은 정렬된 결과 집합의 처음 4개 항목을 선택하는 데 사용됩니다.

select TOP 4 c1 from testable ORDER BY c1;

다음 SELECT ... LIMIT명령문과 동일합니다.

select c1 from testable order by c1 limit 4;

이것은 Rust와 Databend에 관심이 있는 학생들의 참여를 안내하기 위해 고안된 좋은 첫 번째 이슈(초보자 친화적인 이슈)입니다.

문제 #14972 | 기능: 상위 k 구문 지원

이 주제에 관심이 있다면 일부 문제를 해결해 보거나 토론 및 PR 리뷰에 참여할 수 있습니다. 또는 https://link.databend.rs/im-feeling-lucky 를 클릭하여 무작위 질문을 선택할 수도 있습니다. 행운을 빕니다!

새로운 기여자

커뮤니티에서 새로운 사람들을 만나보세요. Databend는 여러분 덕분에 더 나은 곳이 되었습니다.

@suimenno3002는 히스토그램 집계 함수 #14839 에 대한 지원을 구현했습니다 .

변경 로그

최신 개발에 대한 최신 정보를 얻으려면 Databend의 일일 빌드에 대한 변경 로그를 확인하세요.

주소: https://github.com/datafuselabs/databend/releases

기여자

이번주에도 훌륭한 작업을 해주신 기고자들에게 깊은 감사를 드립니다.

우리와 접촉

Databend는 실시간 분석도 수행할 수 있는 개체 스토리지 기반의 유연하고 저렴한 오픈 소스 새로운 데이터 웨어하우스입니다. 차세대 오픈 소스 데이터 클라우드를 만들기 위해 여러분의 관심과 클라우드 네이티브 데이터 웨어하우스 솔루션을 함께 탐색해 보시기를 기대합니다.