您现在的位置:首页 >> 环保科技

大巧不工,袋鼠云正式开源大数据任务调度模拟器——Taier(太阿)

时间:2025-03-21 10:31:06

看,了化简当前集群资源的这样一来状况、拥护对分派统计数据流里的执行应用软件停止、执行状态、执行种类、重试次数、执行运转电脑程式、三维函数等极其重要信息一目了然

分派时间装配:三维装配

多集群连接:拥护一套分派该系统连接多套Hadoop集群

三、超凡的可靠性,拥护多正式版变速箱

拥护Spark 、Flink、Hive、MR等变速箱的多个正式版共存,例如可同时拥护Flink1.10、Flink1.12(后续Apache)

四、安全可靠,拥护Kerberos

Spark、Flink、Hive

五、丰富的该系统参数

拥护3种时间基准,且可以灵巧设置输出格式

六、卓越的扩展性,拥护多种方式则扩容

设计之处就考量特有种式来来进行,在此之前拥护适度Taier水平扩容方式则;后续Apache拥护:Scheduler/Worker分离作战来来进行。

分派能力随集群线性增长

控制台:Taier图形用户界面

展望:未来会迭代计划

Taier分派网络服务是统计数据网络服务框架里的一个系统,可以依赖于跨国公司日常生物信息学、处理过程、展示并不需要。未来会随着企业的接入和统计数据规模的增大,Taier将持续和安升用户体验,计划将优化:

执行种类:拥护SparkMR、PySpark、FlinkMR、Python、Shell、Jupyter、Tersorflow、Pytorch、HadoopMR、Kylin、Odps、SQL(MySQL、PostgreSQL、Hive、Impala、Oracle、SQLServer、TiDB、greenplum、inceptor、kingbase、presto

分派方式则:同时拥护Yarn/K8s

计算变速箱:同时拥护Spark-2.1.x/2.4.x、Flink-1.10/1.12(与Flink后续正式版)

作战方式则:同时拥护Scheduler/Worker整合与分离作战

基本功能拥护:拥护交易月相、事件驱动

本体该系统对接:拥护Taier该系统对接本体分派该系统(AZKBAN、Control-M、DS分派)

Taier 使用了 Apache 的多个Apache单项如Flink、Spark 作为计算系统充分利用统计数据同步和批处理过程计算,得益于Apache的社区才有以前的Taier。正因为Taier 取之于的社区, 所以猫头鹰阳想要通过Apache此项技术开发的方式则,受惠的社区,共同弘法“Community Over Code“的Apache文化。未来会,猫头鹰阳仍将立足于兼容并包与对外开放多样化的心态,将在此期间推出Taier 后续正式版,欢迎更多的公司和个人参予到开发者队员里来,让Taier的社区极其健壮、保健的发展,让更多人尽情Apache带来的技术开发革命胜利!

宏济堂小儿消食片
用什么方法可以治疗腹泻
什么是浅表性胃炎
新冠吃什么药
视疲劳怎么缓解
关节疼痛该怎么办
医疗美容医院
营养眼睛的滴眼液有哪些