Linkis(微服务架构)V0.11.0官方版

Linkis是一个连通了好几个测算储存引擎，如Spark、TiSpark、Hive、Python和HBase等，Linkis根据分布式架构，出示了金融业级多租户防护、资源监管、管理权限防护等公司级特点，支持统一自变量、UDF、涵数、用户资源文档管理，具有分布式系统、性能卓越、高可用性的互联网大数据工作/要求项目生命周期管理方法能力。 【软件特点】 　　1、统一工作实行服务项目：一个分布式系统的REST/WebSocket服务项目，用以接受用户递交的各种各样脚本制作要求。 　　现阶段支持的测算引擎有：Spark、Python、TiSpark、Hive和Shell等。 　　支持的开发语言有：SparkSQL、Spark Scala、Pyspark、R、Python、HQL和Shell等； 　　2、资源管理服务： 支持即时监管每一个系统软件和用户的资源应用状况，限定系统软件和用户的资源消耗量和并发数，并出示即时的资源动态图表，便捷查询和智能管理系统和用户的资源； 　　现阶段已支持的资源种类：Yarn序列资源、网络服务器（CPU和运行内存）、用户高并发数量等。 　　3、程序管理服务项目：管理方法全部系统软件的全部用户运用，包含线下大批量运用、互动式查看运用和即时流式的运用，为线下和互动式运用出示强劲的多路复用能力，并出示运用项目生命周期管理方法，全自动释放出来用户不必要的空余运用； 　　4、统一储存服务项目：通用性的IO构架，能迅速连接各种各样分布式存储，出示统一启用通道，支持全部常见文件格式数据信息，处理速度高，简易实用； 　　5、统一前后文服务项目：统一用户和系统软件资源文档（JAR、ZIP、Properties等），用户、系统软件、测算引擎的主要参数和自变量统一管理方法，一处设定，随处全自动引入； 　　6、原材料库：系统软件和用户级仓库管理，可共享和运转，支持项目生命周期全自动管理方法； 　　7、元网络服务：即时的库表结构和系统分区状况展现。 【功能介绍】 　　1. Linkis管理方法台 　　用户能够查询和控制自己的Job 　　用户能够查询和控制自己的引擎 　　用户能够查询Yarn的资源应用状况和用户资源应用排行 　　用户能够配备引擎的运行主要参数 　　用户能够设定自变量 　　2. 支持标识作用 　　支持给EngineManager打标识 　　运行引擎时，支持为引擎打标识 　　支持根据标识浏览总体目标引擎 　　3. AppGovernance运用整治完成 　　系统软件级、用户级运用项目生命周期管理方法，包含线下大批量、互动式查看和即时流式的运用 　　为线下和互动式运用出示多路复用能力和智能化转换能力 　　智能化过流保护、运用智能化维护 　　4. 支持Flink和Spark Structured Streaming