軟件介紹
Linkis是一個非常好用的計算中間件架構(gòu)軟件，軟件提供了Spark、Python、TiSpark、Hive和Shell等計算引擎，同時支持SparkSQL、Spark Scala、Pyspark、R、Python、HQL和Shell等的腳本語言。用戶使用該軟件可以管理該系統(tǒng)所有用戶的應(yīng)用，進(jìn)行一站式管理。
軟件特色
1、統(tǒng)一作業(yè)執(zhí)行服務(wù)：一個分布式的REST/WebSocket服務(wù)，用于接收用戶提交的各種腳本請求。
目前支持的計算引擎有：Spark、Python、TiSpark、Hive和Shell等。
支持的腳本語言有：SparkSQL、Spark Scala、Pyspark、R、Python、HQL和Shell等。
2、資源管理服務(wù)： 支持實時管控每個系統(tǒng)和用戶的資源使用情況，限制系統(tǒng)和用戶的資源使用量和并發(fā)數(shù)，并提供實時的資源動態(tài)圖表，方便查看和管理系統(tǒng)和用戶的資源。
目前已支持的資源類型：Yarn隊列資源、服務(wù)器（CPU和內(nèi)存）、用戶并發(fā)個數(shù)等。
3、應(yīng)用管理服務(wù)：管理所有系統(tǒng)的所有用戶應(yīng)用，包括離線批量應(yīng)用、交互式查詢應(yīng)用和實時流式應(yīng)用，為離線和交互式應(yīng)用提供強(qiáng)大的復(fù)用能力，并提供應(yīng)用全生命周期管理，自動釋放用戶多余的空閑應(yīng)用。
4、統(tǒng)一存儲服務(wù)：通用的IO架構(gòu)，能快速對接各種存儲系統(tǒng)，提供統(tǒng)一調(diào)用入口，支持所有常用格式數(shù)據(jù)，集成度高，簡單易用。
5、統(tǒng)一上下文服務(wù)：統(tǒng)一用戶和系統(tǒng)資源文件（JAR、ZIP、Properties等），用戶、系統(tǒng)、計算引擎的參數(shù)和變量統(tǒng)一管理，一處設(shè)置，處處自動引用。
6、物料庫：系統(tǒng)和用戶級物料管理，可分享和流轉(zhuǎn)，支持全生命周期自動管理。
7、元數(shù)據(jù)服務(wù)：實時的庫表結(jié)構(gòu)和分區(qū)情況展示。
軟件功能
1、Linkis管理臺
用戶可以查看和管理自己的Job。
用戶可以查看和管理自己的引擎。
用戶可以查看Yarn的資源使用情況和用戶資源使用排名。
用戶可以配置引擎的啟動參數(shù)。
用戶可以設(shè)置變量。
2、支持標(biāo)簽功能
支持給EngineManager打標(biāo)簽。
啟動引擎時，支持為引擎打標(biāo)簽。
支持通過標(biāo)簽訪問目標(biāo)引擎。
3、AppGovernance應(yīng)用治理實現(xiàn)
系統(tǒng)級、用戶級應(yīng)用全生命周期管理，包括離線批量、交互式查詢和實時流式應(yīng)用。
為離線和交互式應(yīng)用提供復(fù)用能力和智能切換能力。
智能限流、應(yīng)用智能保護(hù)。
4、支持Flink和Spark Structured Streaming
百度_baidu.com
百家號_baijiahao.baidu.com
