LarkMidTable 一站式开源的数据中台
资源文件介绍
文件名称: LarkMidTable 一站式开源的数据中台.rar
文件描述: Lark中文名称 云雀,云代表大数据,雀代表平凡和自由。LarkMidTable 是一站式开源的数据中台,实现元数据管理,数据仓库开发,数据质量管理,数据的可视化,实现高效赋能数据前台并提供数据服务的产品。
产品愿景
- 满足许多的小企业,提供一站式的解决方案。
- 做出世界级别,能够媲美BAT大厂的产品。
- 创造价值,产生价值,让世界变得更加美好。
技术选型
框架名称 | 框架用途 | 主要功能 |
---|---|---|
Dolphin | 任务调度 | 以DAG形式关联,实时监控任务的状态,支持Shell、MR、Spark、SQL、依赖等10多种任务类型,支持每日十万数据量级任务稳定运行 |
Flink | 离线和实时计算框架 | Flink实现流批一体化、机器学习(FlinkML)、图分析(Gelly)、复杂事件处理(CEP)、关系数据处理(Table) |
Hive | 数据仓库 | 将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句语句转变成MapReduce任务来执行 |
Kylin | 分析数据库 | Kylin 支持 SQL,Kylin 的 SQL on Hbase |
Kafka | 消息中间件 | 应用解耦 |
使用说明
- 下载资源文件: 下载
LarkMidTable 一站式开源的数据中台.rar
文件。 - 解压文件: 解压下载的压缩包,获取相关资源文件。
- 部署与配置: 根据提供的文档进行部署和配置,确保系统正常运行。
- 开始使用: 启动系统,开始使用 LarkMidTable 进行数据中台的开发与管理。
注意事项
- 请确保系统环境符合技术选型中的要求。
- 在部署过程中,如有任何问题,请参考相关文档或联系技术支持。
通过 LarkMidTable,您可以轻松实现数据中台的构建与管理,赋能数据前台,提供高效的数据服务。希望 LarkMidTable 能够帮助您的企业实现数据价值最大化。