您的位置：首頁 >觀察 >

干貨｜三個(gè)維度詳解 Taier 本地調(diào)試原理和實(shí)踐世界熱文

來源：嗶哩嗶哩時(shí)間：2023-06-30 13:49:54

在平時(shí)和開發(fā)者們交流的過程中，發(fā)現(xiàn)許多開發(fā)朋友尤其是新入門 Taier 的開發(fā)者，對于本地調(diào)試都有著諸多的不理解和問題。本文就大家平時(shí)問的最多的三個(gè)問題，服務(wù)編譯，配置&本地運(yùn)行，如何在 Taier 運(yùn)行 Flink-standalone，進(jìn)行簡單的介紹，希望和大家共同交流學(xué)習(xí)。

服務(wù)編譯

在本章將介紹服務(wù)編譯中的兩大插件 WorkerPlugins 及 DataSourcePlugin，以及 Taier 的前后端 UI & datadevelop 的作用。

【資料圖】

WorkerPlugins 的作用

平臺通過在 Taier-UI 運(yùn)行任務(wù)之后，在 Taier-data-develop 中通過集群綁定到租戶，再通過當(dāng)前租戶綁定集群中的組件類型以及版本號獲取到不同的 WorkerPlugin，通過不同組件類型以及版本號進(jìn)行提交任務(wù)。下圖為整體的運(yùn)行架構(gòu)圖：

WorkerPlugins 的編譯

運(yùn)行任務(wù)時(shí)這是一個(gè)必要的選項(xiàng)，當(dāng)我們需要本地調(diào)試或者部署運(yùn)行時(shí)，WorkerPlugins 的編譯是必須進(jìn)行的，在編譯之后會(huì)獲取到一個(gè) WorkerPlugins 的目錄，具體的編譯過程請看文末視頻鏈接中的演示講解。

DataSourcePlugin 的作用

介紹完 WorkerPlugins 這個(gè)插件之后，來介紹一下另一個(gè)插件 DataSourcePlugin。

在 Taier-UI 中我們可以配置諸多不同類型的數(shù)據(jù)源，如 MySQL，Doris，Oracle 等，這些功能都是依賴著強(qiáng)大的 DataSourcePlugin 來進(jìn)行實(shí)現(xiàn)。同時(shí)在使用離線同步中的 GUI 任務(wù)配置相關(guān)功能時(shí)，獲取數(shù)據(jù)庫信息也都是依賴 DataSourcePlugin 來完成的。

DataSourcePlugin 的編譯

運(yùn)行任務(wù)時(shí)這是一個(gè)必要的選項(xiàng)，當(dāng)我們需要本地調(diào)試或者部署運(yùn)行時(shí)，DataSourcePlugin 的編譯是必須進(jìn)行的，在編譯之后會(huì)獲取到一個(gè) DataSourcePlugin 的目錄，具體的編譯過程請看文末視頻鏈接中的演示講解。

Taier-UI 的作用

在 Taier-UI 中我們可以進(jìn)行配置不同類型的數(shù)據(jù)源、創(chuàng)建任務(wù)、任務(wù)運(yùn)維、提交調(diào)度、集群配置、集群綁定等各種操作。

TaierDataDevelop 的作用

在 Taier- UI 中進(jìn)行操作的所有后端服務(wù) API 的支持都是來自于 TaierDataDevelop 的支持，該服務(wù)主要是與前后端交互。

配置&本地運(yùn)行

該節(jié)內(nèi)容主要介紹 TaierDataDevelop 的配置，在此進(jìn)行后端服務(wù)的端口 ZK、WorkerPlugins、DataSourcePlugin 數(shù)據(jù)庫等相關(guān)配置，前后端的啟動(dòng)，以及集群配置(Flink-standalone)和綁定。

具體的代碼流程請看文末視頻鏈接中的演示講解。