亚洲第一天堂无码专区_一区二区欧美久久_精品剧情v国产在线观看在线_久久久精品综合

首頁 > 技術(shù) > 正文

【全球聚看點】火山引擎DataLeap引入任務(wù)模板,助力數(shù)據(jù)研發(fā)提效

2023-04-24 19:42:11來源:中關(guān)村在線  

在數(shù)倉及中臺研發(fā)過程中,研發(fā)人員經(jīng)常需要在不同任務(wù)中維護(hù)相同或類似代碼,不僅費時費力,并且代碼迭代后也面臨不同業(yè)務(wù)單元邏輯性不一致的問題,對運維管理形成挑戰(zhàn)。

一般來說,研發(fā)人員往往通過代碼模板來解決這一問題。具體而言,在核心數(shù)據(jù)處理邏輯相同的情況下,研發(fā)人員通過代碼模版?zhèn)魅氩煌娜蝿?wù)參數(shù),解決核心數(shù)據(jù)處理邏輯復(fù)用的問題,使得后續(xù)任務(wù)可以批量化,滿足實時調(diào)用需求。

目前,任務(wù)模板已是火山引擎DataLeap研發(fā)治理能力之一,主要用于管理常用的任務(wù)邏輯,以此降低常用代碼的運維成本。在產(chǎn)品功能上,DataLeap任務(wù)模板支持豐富的引擎能力,包括LAS/EMR HSQL 、LAS/EMR Java Flink、LAS/EMR Flink SQL、shell任務(wù),滿足離線實時任務(wù)的不同需求。此外,DataLeap還支持歷史版本管理,即保存或更新模板后,記錄各個版本更新情況,方便查看代碼設(shè)置及參數(shù)。


(資料圖)

在使用層面上,研發(fā)人員只需要三步驟即可完成任務(wù)模板創(chuàng)建,便捷復(fù)用核心數(shù)據(jù)處理邏輯。

第一步:選中支持的任務(wù)類型

· 在模板列表右側(cè)的“+”(更多)按鈕中,新建子目錄或新建任務(wù)模板。

· 在新建任務(wù)模板窗口中,輸入以下參數(shù),并新建模板。

第二步:代碼編寫參數(shù)設(shè)置

· 在任務(wù)模板的代碼開發(fā)編輯界面,通過 DDL 和 DML 編寫通用 SQL。

· 表名、字段名分別可以用參數(shù)表示,以下以 LAS Flink SQL的邏輯處理,保存為test02模板。

第三步:在任務(wù)開發(fā)中引用

研發(fā)人員可以通過以下2種方式引用test02模板:

· 方法1:在模板列表中,選擇模板并點擊后即可快速引用。

· 方法2:在代碼編輯界面右上角選擇任務(wù)模板,選擇模板后,按需選擇是否最新版本的模板,在對參數(shù)設(shè)置之后,預(yù)覽代碼最終生成效果(如圖)。

火山引擎DataLeap任務(wù)模板能力可應(yīng)用于以下場景:

· 場景1:將預(yù)先設(shè)計好的離線、實時任務(wù)模板保存后,即可在多個任務(wù)中引用此類型模板,快速實現(xiàn)代碼復(fù)用。

· 場景2:將shell任務(wù)代碼制作為前置判斷條件,在數(shù)據(jù)分析前的觸發(fā)檢測運行條件是否滿足。

除了任務(wù)模板之外,作為大數(shù)據(jù)研發(fā)治理套件,火山引擎DataLeap還可以提供數(shù)據(jù)集成、開發(fā)、運維、治理、資產(chǎn)、安全等能力,幫助用戶提升數(shù)據(jù)研發(fā)效率、降低管理成本,加速推動企業(yè)的數(shù)字化轉(zhuǎn)型。(作者:宋巖)

標(biāo)簽:

相關(guān)閱讀

精彩推薦

相關(guān)詞

推薦閱讀

主站蜘蛛池模板: 国内自拍中文字幕| 99色精品视频| 欧美日韩成人精品| 国产精品成人久久久久| 久久99国产综合精品女同| 欧美大片欧美激情性色a∨久久| 国产日韩专区在线| 国产精品国内视频| 亚洲精品日韩激情在线电影| 国产日韩在线播放| 91免费欧美精品| 久久av喷吹av高潮av| 免费99精品国产自在在线| 久久韩国免费视频| 水蜜桃亚洲精品| 日产日韩在线亚洲欧美| 久久久国产精品免费| 久久久久久成人| 久久99九九| 国产精品久久久久久久久免费看| 一区二区不卡在线| 亚洲一区二区三区av无码| 久久国产精品久久久久久久久久 | 午夜久久资源| 日本视频一区二区在线观看| 黄色国产精品一区二区三区| 国产精品一区专区欧美日韩| 99久久伊人精品影院 | 久久久久99精品久久久久| 国产欧美自拍视频| 国产成人精品久久| 日本一区二区高清视频| www国产无套内射com| 久久久免费精品| 日本一区二区久久精品| 国产三区在线视频| 日韩av综合在线观看| 人妻少妇精品久久| 国产精品亚洲a| 久久精品国产91精品亚洲| 国产精品入口免费视频一|