企业级Core Data & Core AI 统一分析平台, JDP全称JDataFlow Platform
,分析流动中的数据。JDP并不是一个框架,而是一套完整的解决方案。
核心功能:JDP
核心Core Data & Core AI:
Core Data提供高度易用的统一数据分析体验,真正的统一 Batch & Streaming 计算模型。
Core AI提供分布式系统上的AI能力,帮助企业智能化转型,提供低 TCO、全自动化、智能化AI应用。
今天介绍 JDP 3.2.0 核心的设计与驱动力以及我们要做的事情,欢迎大家积极参与社区,我们一起为努力,为打造统一数据分析数据平台而努力。
[1] 快速入门JDP:http://www.fusionlab.cn/zh-cn/docs/intro/quickstart.html
[2] 快速入门 FusionDB: http://www.fusionlab.cn/zh-cn/fdb/index.html
早期,不少人吐槽 JDP 太重,不是一般社区能够维护的产品,共涉及 12 个大型项目,多语言 Scala/Python/Java/Shell/C++/C 等,集成测试都要花费大量的时间与经历,好在我们仅适配 centos 7.x ,不然确实工作量非常巨大,除了集成相关项目保障稳定性以及企业级可用性,我们还需要做大量原创的功能特性,比如: FusionDB、CoreAI、jdp-package、Ambari stacks、复杂的大型项目打通融合bugfix等。其中 jdp-package 使我们用来做持续集成的项目,包括:获取源码、构建、单元测试、二进制包、特定系统的版本:RPM/DEB/Docker Image、集成测试、场景测试,产出报告,邮件通知。中间任意环节失败,保留现场,排错,接着持续构建。全部成功后,发包到准生产环境,模拟实际生产环境:安装、部署、测试等,部分需人工介入,整个一系列都是非常复杂的环节,除了热爱,我找不出理由,为何还要继续,为了未来能持续不断的构建,提升效率,个人DIY了一台工作站,效率真的一下子就指数级提升,好设备果然不省。
吐槽一段,未来我们会更多焦距于跨多云分布式数据引擎的构建工作,为大家提供低门槛、易于使用的统一数据分析平台。
注意,请在有 WIFI 的情况下打开,一大波 PPT 高清图片来袭。









































































文末,Next 在 PPT 已经有所体现,相信不久的将来 Roadmap 中的功能就能问世,希望更多的人来参与社区贡献,并且把 JDP 推入更多生产环境,也希望大家来吐槽,我们慢慢会逐步完善官方文档以及搭建社区交流平台,研发节奏都在官方文档与Github的流程中体现,功能特性的设计与研发计划会更加透明方式在官方网站进行同步。
下载 PDF 原件,请访问 JDP 官网获取:
http://www.fusionlab.cn/zh-cn/docs/advanced/architecture.html
注:存放于 Google Driver 中, 提供在线预览。
附录:
[1] 欢迎Star并参与贡献:https://github.com/fuslab/jdp/
[2] JDP 官网:http://www.fusionlab.cn/zh-cn/




