超轻量级大数据计算平台,一款spark原生超轻量级、企业级大数据计算产品,一键部署,开箱即用
一款超轻量级、企业级大数据计算产品,围绕Spark生态打造的数据计算平台。一键部署,开箱即用。可快速实现Spark计算、大数据离线ETL、实时计算、作业定时调度等功能。
功能特点- 超轻量级: 无需预装任何组件,一键部署,开箱即用。
- 私有化部署: 兼容云原生架构,支持多节点安装,高可用集群部署。
- 可视化操作: 基于Spark原生打造,快速执行Spark计算。
快速部署访问地址:http://localhost:8080
管理员账号:admin
管理员密码:admin123
界面展示
能写代码?不单单只有Sql
支持超多作业类型,包括SparkSql、SparkJar、数据同步、JdbcSql、Prql、Excel导入、Python脚本、Bash脚本、Curl脚本、接口调用等。 作业调度,横竖都能拖拽
支持全量的作业生命周期指令,包括运行、中止、中断、下线、发布、重跑、重跑下游、重跑当前、外部调用等。 实时计算,让数据更高效
支持实时计算和数据库实时同步功能,利用Kafka和Debezium高效处理数据流,确保数据的快速传输和更新。 多平台部署,从不娇生惯养
支持多种资源调度平台,如Kubernetes、Yarn、CDH、Apache Hadoop、Spark Standalone、Spark Cluster等。 数据大屏,展示大数据
强大的数据处理和可视化技术,将复杂数据转化为直观图表,支持实时监控和分析,助力企业决策,灵活适应行业内需求。 四、功能概述 一款超轻量级、企业级大数据计算平台。一键部署,开箱即用。可快速实现大数据ETL、实时计算、可视化调度、自定义接口、数据大屏、分享表单等场景。助力企业处理海量数据,获得更多商业价值。 产品特点
▪ 私有化部署一键docker部署,无须额外安装大数据组件,快速拥有大数据计算能力。 ▪ spark原生将Spark完全与项目融合,天生集成Spark特性,更好的发挥Spark能力。 ▪ 丰富作业类型支持SparkSql、sparkJar、Bash、Python、数据同步、实时计算等10多种作业类型。 ▪ 可视化调度支持作业的单个调度,作业流整体调度,corn表达式调度等功能。 ▪ 多租户支持多租户构建,租户间数据隔离功能。 ▪ 优秀的生态至轻云将与至爻系列产品,打造企业级开源全家桶解决方案。 五、技术选型编译环境▪ java-1.8
▪ nodejs-18.14.2 源码下载附件下载源码
依赖下载
cd spark-yun./gradlew install
代码编译
cd spark-yun./gradlew clean package
打包路径
spark-yun/spark-yun-dist/build/distributions/zhiqingyun.tar.gz
解压部署
tar -vzxf zhiqingyun.tar.gzbash zhiqingyun/bin/start.sh
以下内容需要积分高于 2 才可浏览
链接:https://pan.baidu.com/s/1HkZApKTDxxvkF5323iFQag
提取码下载:
|