數(shù)據(jù)集成服務(wù)

產(chǎn)品描述

數(shù)據(jù)集成服務(wù)提供在線設(shè)置ETL作業(yè)、轉(zhuǎn)換任務(wù)的定時(shí)運(yùn)行策略，監(jiān)控任務(wù)的執(zhí)行情況，查看任務(wù)執(zhí)行日志的功能。保障多種數(shù)據(jù)格式、源頭的數(shù)據(jù)經(jīng)過(guò)清洗轉(zhuǎn)換后及時(shí)有效地送達(dá)組織的數(shù)據(jù)倉(cāng)庫(kù)，強(qiáng)有力地支撐后續(xù)的數(shù)據(jù)開發(fā)、數(shù)據(jù)挖掘

#針對(duì)人群

• 數(shù)據(jù)維護(hù)人員

• 數(shù)據(jù)開發(fā)人員

• 項(xiàng)目經(jīng)理

• 產(chǎn)品經(jīng)理

• 技術(shù)經(jīng)理

#業(yè)務(wù)架構(gòu)圖

架構(gòu)描述：

• 根據(jù)業(yè)務(wù)需求開發(fā)作業(yè)任務(wù)、轉(zhuǎn)換任務(wù)

• 上傳轉(zhuǎn)換任務(wù)、作業(yè)任務(wù)并設(shè)置定時(shí)調(diào)度策略

• 數(shù)據(jù)集成服務(wù)定時(shí)運(yùn)行任務(wù)，從來(lái)源數(shù)據(jù)庫(kù)抽取數(shù)據(jù)并導(dǎo)入數(shù)據(jù)倉(cāng)庫(kù)

#產(chǎn)品優(yōu)勢(shì)

#在線管理ETL任務(wù)

提供B/S模式的web界面，使有瀏覽器的地方即可管理、監(jiān)控?cái)?shù)據(jù)集成任務(wù)的需求成為并提供了統(tǒng)一管理ETL作業(yè)任務(wù)、轉(zhuǎn)換的入口

#在線調(diào)度ETL任務(wù)

提供在線設(shè)置任務(wù)定時(shí)運(yùn)行的功能，降低了調(diào)度ETL任務(wù)的難度，是調(diào)度ETL任務(wù)的好幫手

#日志級(jí)別

通過(guò)設(shè)置任務(wù)的日志級(jí)別(最小日志、行級(jí)日志、基本日志、詳細(xì)日志、調(diào)試日志)，開發(fā)者和維護(hù)者可從日志中捕獲有用信息，進(jìn)行錯(cuò)誤定位及任務(wù)優(yōu)化

#任務(wù)監(jiān)控

通過(guò)列表呈現(xiàn)任務(wù)的運(yùn)行狀態(tài)、下次調(diào)度時(shí)間，讓系統(tǒng)管理員一目了然地掌控集成任務(wù)

#任務(wù)統(tǒng)計(jì)

從多種維度統(tǒng)計(jì)任務(wù)的運(yùn)行情況，保障數(shù)據(jù)集成任務(wù)穩(wěn)定、有效地運(yùn)行，提高數(shù)據(jù)集成的質(zhì)量

#任務(wù)失敗通知

利用平臺(tái)提供的通知管理服務(wù)，用戶可定制通過(guò)短信、郵件、釘釘、微信、騰訊短信，阿里云短信，阿里云電話，華為短信等渠道接收告警信息的功能

#任務(wù)存儲(chǔ)

利用平臺(tái)提供的存儲(chǔ)管理服務(wù)，用戶可將任務(wù)上傳到多個(gè)存儲(chǔ)渠道進(jìn)行備災(zāi)存儲(chǔ)及享受到優(yōu)質(zhì)的上傳、下載功能

#功能列表

• 儀表盤：呈現(xiàn)作業(yè)、轉(zhuǎn)換的運(yùn)行信息。如總作業(yè)數(shù)、成功次數(shù)、失敗次數(shù)等

• 定時(shí)策略：管理定時(shí)任務(wù)策略配置。用于系統(tǒng)自動(dòng)掃描定時(shí)任務(wù)，按時(shí)、周期性的執(zhí)行任務(wù)

• 任務(wù)分類：管理作業(yè)、轉(zhuǎn)換的維度

• 作業(yè)管理：管理作業(yè)任務(wù)清單及執(zhí)行的定時(shí)策略

• 轉(zhuǎn)換管理：管理轉(zhuǎn)換任務(wù)清單及執(zhí)行的定時(shí)策略

• 作業(yè)日志：呈現(xiàn)作業(yè)任務(wù)的執(zhí)行開始、結(jié)束時(shí)間、時(shí)長(zhǎng)、運(yùn)行結(jié)果及日志詳情

• 轉(zhuǎn)換日志：呈現(xiàn)轉(zhuǎn)換任務(wù)的執(zhí)行開始、結(jié)束時(shí)間、時(shí)長(zhǎng)、運(yùn)行結(jié)果及日志詳情

• 作業(yè)監(jiān)控：統(tǒng)計(jì)作業(yè)任務(wù)執(zhí)行的成功次數(shù)、失敗次數(shù)、運(yùn)行狀態(tài)、最近調(diào)度及完成時(shí)間、下次調(diào)度時(shí)間

• 轉(zhuǎn)換監(jiān)控：統(tǒng)計(jì)轉(zhuǎn)換任務(wù)執(zhí)行的成功次數(shù)、失敗次數(shù)、運(yùn)行狀態(tài)、最近調(diào)度及完成時(shí)間、下次調(diào)度時(shí)間