Linkis是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算中间件。
Linkis 0.9.4发布,新增统一上下文服务模块以及基于统一上下文服务模块对其他Linkis模块如执行服务、gateway、存储服务等进行改造;新增统一数据源服务模块,为上层接入Linkis的应用提供统一的数据源服务,现在已经有社区伙伴开始基于Linkis统一数据源进行服务开发;对Linkis公共包的依赖以及启动脚本进行了优化,同时修复了若干社区用户提出的bug。
特性增强
- [Linkis-371] 添加上下文服务的客户端模块。
- [Linkis-372] 支持上下文服务的搜索功能。
- [Linkis-376] 添加上下文的服务端模块。
- [Linkis-375] 支持上下文服务的持久化。
- [Linkis-368] 添加上下文服务的缓存机制和数据结构模块。
- [Linkis-428] Linkis执行模块基于上下文服务进行改造。
- [Linkis-432] 添加上下文服务公共模块。
- [Linkis-434] Linkis-gateway模块基于上下文服务进行改造,支持上下文服务器的HA。
- [Linkis-388] http依赖模块的优化,去除dispatch依赖,并优化Linkis底层包的依赖。
- [Linkis-395] 将ListenerBus的queue默认改为ArrayBlockingQueue的实现。
- [Linkis-297] 添加数据源管理的公共模块。
- [Linkis-298] 添加mysql数据库数据源管理模块。
- [Linkis-299] 添加数据源管理服务端模块。
- [Linkis-300] 添加Hive数据源服务模块。
- [Linkis-301] 添加ElasticSearch数据源服务模块。
- [Linkis-302] 添加数据源管理公共模块。
- [Linkis-303] 添加数据源管理服务端模块。
Bug修复
- [Linkis-406] 修改数据源模块的目录结构,优化编译。
- [Linkis-407] 修复向导性建表中ds字段重复的bug。
- [Linkis-383] 修改Linkis ujes client的测试类适配Linkis的更新。
- [Linkis-438] Linkis0.9.4编译问题修复。
· 新贡献者
· Linkis0.9.4的发布,离不开WeDataSphere社区的贡献者,他们无私地贡献自己的代码,积极地与社区伙伴进行技术交流,有了他们的助力,Linkis0.9.4才能顺利地发布,在此感谢各位社区的贡献者! 排名不分先后:
liangqilang:贡献了httpclient替换dispatch的代码
Davidhua1996: 贡献了数据源管理的基础模块和功能实现.
zhengfan199525:添加了hive的数据源管理模块.
alexzyWu: 贡献了数据源管理的服务端模块.
jaminlu:优化了数据源管理的目录结构和编译.
bleachzk: 贡献了数据源管理的公共模块.
liaoyt:添加数据源管理的rest接口.
SelfImpr001: 贡献了数据源管理的部分内容.
Linkis开源项目地址如下,欢迎大家提交issue及star:
gitee地址:https://gitee.com/WeBank/Linkis
Github地址:https://github.com/WeBankFinTech/Linkis
转自 https://www.oschina.net/news/116477/linkis-0-9-4-released