저자 : 펭 징 더 자세한 데이터 세트 공식 웹 사이트 https://dp.alibaba.com
부품 : Dataphin · 일반 R & D - 도입 실시간 및 오프라인 기술
비즈니스 기업의 지속적인 확장과를, 프로그래머 GG 누가 자주 만남 - 보스의 다양한 요구를 발표
, "이 가장 높은 우선 순위를 선정이 작업은 더 복잡한 계산 논리,하지만 난 빠르게 결과를 얻을 싶어요."• 보스 a를
• 보스 B : "당신의 작업은 매우 중요하다 "! 첫 번째 테스트 라인 전에 라인에 작업이 절대적으로 잘 수 있도록,보고 문서를 작성
• 보스 C :"정기적으로 완성 된 운영 및 유지 보수 아에 스크립트가 여전히 오전 9시에 I 내일 주기적으로 트리거를 수행해야합니다 시간의 데이터를 볼 수 있습니다! "
또한 개발과 운영 및 유지 보수 요구 사항 고통의 다양한? 학생들은 더 나은 일! Dataphin · 범용 전력 효율적인 사업 R & D R & D, 개발, 테스트, 운영 및 유지 보수 스톱 쇼핑을 받으실 수 있습니다!
----------------------------------------------
Dataphin 풍부한 지원 스크립트 형성
복잡한 작업이 다층 비즈니스 로직과 관련이있을 수 있습니다뿐만 아니라 다른 기능, 패키지 및 기타 리소스, 코드, 모두 단순화 Dataphin에서 수천 줄의 네이티브 SQL 모드 기능의 이전!
우리는 여러 자원 패킷 유형 항아리, Py를, 파일, 등, GG 프로그래머가 쉽게 자원 관리 기능, 다중화, 참고 문헌, 그래서 단순화 복잡한 작업을 얻을 수에 대한 사용자 정의 함수 UDX 기능, 지원의 도입을 지원! 우리 오프라인 지원의 형태로 스크립트는 다음과 같습니다 : SQL, MR, 스파크, 쉘, 파이썬, 버추어을 우리는 또한 실시간 스크립트 Flink_SQL 및 Flink_Template_SQL를 지원
예 1 : 방법에 우아한 패키지 Dataphin 파이썬 함수를 호출하는 방법?
1, 새로운 리소스 파일
새 리소스의 자원 관리는, 해당 자원 번들을 업로드, 파이썬의 이름을 입력, 설명의 유형을 선택 디렉토리를 선택, 클릭 해주세요. "test.py"로 새 리소스 파일 이름 여기.
2, 파이썬 파일 구문 사양
파이썬 UDF 때문에이 주석으로 사용하기 전에 지정된 기능을 체결해야하며,이 방법을 평가하고 구현해야합니다. 다음과 같은 새로운 파이썬에서 자원 고정 구문은 다음과 같습니다
문, "MyPlus"사용자 정의 이름을 고정 처음 세 역할을합니다. 방법 이름 MyPlus 클래스 정의는 "평가"해야합니다. 기능 문자열 담당자 @annotate 데이터 유형을 가득 정의 출력값 나타내는 데이터 타입 BIGINT (응용 프로그램, 입출력 데이터 영역의 다른 유형은, 그렇지 않으면 오류, 파일로 변환 문을 증가시킬 필요가있다).
3, 새로운 함수 참조 새 리소스
새로운 기능의 자원 관리 기능은 이름에서 채우기 제출을 클릭, 디렉토리를 선택, 문서를 사용하여 형식을 이름, 클래스 이름, 유형에 해당하는 (여기에 test.py), 채우기를 선택합니다. "test_function"로 새 리소스 파일 이름 여기.
, 기능을 적용하고 기대를 충족하는 것입니다 여부를 확인 4, 새 SQL 작업을 만들 수 있으며, 기능은 검색이 실행됩니다. 다음 예는 다음과 같다 :
예 2 : 적절한 자원의 보호 우선 순위가 높은 작업에 Dataphin에서 작업의 우선 순위를 어떻게 영향을받지 않습니다?
1, 쉘 작업, 사용자 지정 리소스 할당, CPU, 메모리의 일정, 자신을 작성하고 보증 안정적이고 효율적인 작업 일정에 노력하고 있습니다에 대한 지원!
2, 같은 시간에, 당신은 우선 순위가 높은 작업 일정이 영향을받지 않습니다 보장하기 위해 작업 일정에 우선 순위를 설정할 수 있습니다.
어떻게 종류! GM R & D 기능 Dataphin도 매우 매력적입니다! 이 단지의 전력의 작은 부분, 그것은 경험을 제공, 당신의 상상을 넘어서는 효과!
--------------------
알리바바 데이터 테이블 팀 전용 출력 알리 클라우드 지능형 모범 사례, 도움이 자신의 데이터 세트를 구축하기 위해 각 기업, 다음 함께 새로운 시대에 스마트 사업을 달성하기 위해!
: 알리바바 데이터 데스크 솔루션의 핵심 제품
커널 드라이버 · Dataphin, 알리바바 대용량 데이터 OneData 핵심 방법론 및 원 스톱 데이터 관리 기능 구축,
· 빠른 BI, 데이터 분석 경험 강수량 알리바바 세트 제공을 역 데이터 분석 및 프리젠 테이션 기능,
· 빠른 관객, 군중, 통찰력과 마케팅 능력을 돌고 원 스톱을 제공하는 소비자 통찰력과 마케팅 경험의 알리바바 세트 - 가입자 성장을 달성하기 위해 알리바바 사업을 연결되어 있습니다.
에 오신 것을 환영합니다 같은 생각을 가진 성장한다에 함께! 더 자세한 데이터 세트 공식 웹 사이트 https://dp.alibaba.com