一款流式应用开发管理系统,低成本完成流式应用的研发管理

B站影视 欧美电影 2025-04-18 07:53 1

摘要:一飞开源,介绍创意、新奇、有趣、实用的开源应用、系统、软件、硬件及技术,一个探索、发现、分享、使用与互动交流的开源技术社区平台。致力于打造活力开源社区,共建开源新生态!

一飞开源,介绍创意、新奇、有趣、实用的开源应用、系统、软件、硬件及技术,一个探索、发现、分享、使用与互动交流的开源技术社区平台。致力于打造活力开源社区,共建开源新生态!

Streamis 是 微众银行 联合 天翼云仙翁科技萨摩耶云 联合共建的流式应用开发管理系统。

基于 DataSphere Studio 的框架化能力,以及底层对接 Linkis 的 Flink 引擎,让用户低成本完成流式应用的开发、调试、发布和生产管理。

未来还规划将以工作流式的图形化拖拽开发体验,将流式应用以Source节点、 Dimension节点、Transform节点、Sink节点 和 Visualis 节点串连成一条流式工作流,让用户以更低的学习成本完成流式应用的开发、调试和发布。

使用Apache-2.0开源协议

基于 DSS-Scriptis 提供流式应用的开发和调试功能,支持对 FlinkSQL 进行实时调试和结果集展示。

支持流式作业的多版本管理、全生命周期管理、监控告警、checkpoint 和 savepoint 管理能力。

流式应用运行情况:

流式应用参数配置:

以 Flink 为底层计算引擎,基于开发中心和生产中心隔离的架构设计模式,完全隔离开发权限与发布权限,隔离开发环境与生产环境,保证业务应用的高稳定性和高安全性。

应用开发层与 DSS 的数据应用开发流程有机整合,提供极简的用户使用体验。

应用执行层集成 Linkis 计算中间件,打造金融级具备高并发、高可用、多租户隔离和资源管控等能力的流式应用管理能力。

更多功能,请参考:Streamis 用户手册。

功能模组描述Streamis安装部署部署难易程度和第三方依赖一键部署,依赖Linkis Flink引擎开发中心FlinkSQL 流式应用实时开发、调试支持,需集成DSS生产中心流式应用管理运维能力支持
复用 Linkis 计算治理能力支持
支持 FlinkSQL 和 FlinkJar 包等方式发布支持
流式应用的多版本管理能力支持
流式应用的参数配置和告警能力支持服务高可用应用高可用,服务多点,状态快照实现容错处理,故障不影响使用支持系统管理节点、资源管理支持权限管理任务的操作权限控制支持依赖的应用工具描述Streamis 兼容版本DataSphereStudio数据应用开发管理集成框架。以工作流式的图形化拖拽开发体验,将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出应用等,数据应用开发全流程场景需求。>= DSS1.1.0(已发布)

计算中间件 Apache Linkis,通过提供 REST/WebSocket/JDBC/SDK 等标准接口,上层应用可以方便地连接访问 MySQL/Spark/Hive/Presto/Flink 等底层引擎。

>= Linkis1.1.1(已发布),部分功能需要Linkis 1.1.2支持

请前往 Streamis releases 页面下载 Streamis 的已编译版本或源码包。

编译和安装部署

请参考 Streamis 安装部署文档 ,用于安装部署 Streamis 及其依赖环境。

请到 用户使用文档 ,了解如何快速使用 Streamis。

来源:一飞开源

相关推荐