https://github.com/datasophon/datasophon/tree/dev/datasophon-ui 前端使用了后台管理平台框架vue-antd-admin进行开发,具有功能强大、易于开发、操作流畅等特点,希望更多的朋友可以为DataSophon贡献自己的力量。 普通开发者如果想要快速掌握DataSophon的代码,可以参考之前的文章:国产自研开源大数据管理平台DataSophon Manage...
之前就一直有源回馈社的计划,但是因为之前Kurn对于大数据组件的支持还不够成熟,我们也一直在迭代与Kurn的适配。现在我们的企业版已在很多头部客户落地并且在生环境下高效运行,觉得这个版本已可以达到大部生级项目的需求,集成度以及可用性是能够帮到有类似需求的用户的,希望这次源能够降低在Kurn上集成大数据组件的门槛,让...
Marquez 是一款WeWork发布并开源的元数据服务,用于数据生态系统元数据的收集、汇总及可视化。它维护着数据集的消费和生产,为作业运行时和数据集访问频率提供全局可见性,提供集中的数据集生命周期管理等。 主要编程语言:Java / TypeScript 社区活跃度 Commits
目前DataSophon官方提供的安装包版本为DDP-1.0.0(关注公众号:浮世Talk,回复DDP获取安装包),各组件的版本如下所示: 可以看到每个组件的版本都很新,适合勇于尝试新功能的朋友们。另外看到列表中暂时还没有大数据调度框架,希望以后更多大佬加入开源去完善其功能。 本文使用四台虚拟机进行集群搭建演示,由于虚拟机资源有限,...
Apache Bigtop 是一个开源项目,旨在提供一套完整的开源软件栈,用于构建、测试和部署大数据应用程序。该项目的主要目标是让用户可以轻松地构建、测试和部署 Apache Hadoop 生态系统中的各种组件和工具。 Apache Bigtop 提供了一套工具和框架,可以自动化地构建和测试大数据组件,包括 Hadoo...
DataGear是一款开源的数据可视化分析平台,可自由制作任何您想要的数据可视化看板,支持接入SQL、CSV、Excel、HTTP接口、JSON等多种数据源。系统主要功能包括:数据管理、SQL工作台、数据导入/导出、数据集管理、图表管理、看板管理等。 支持多种格式的数据集 支持创建SQL、CSV、Excel、HTTP接口、JSON数据集,可将数据集定义...
产品简介 网易云 Redis服务为兼容开源Redis 协议的 Key-Value 类型在线存储服务,目前提供主从版和集群版,支持主从热备自动容灾。 功能特点 * 兼容开源Redis 协议 * 支持开源Redis 协议中 String(字符串)、List(链表)、Set(集合)、Sorted Set(有序集合)、Hash(哈希表)等多种数据类型,以及 Key(键)、HyperLogLog ...
在各自实现分析模型之后,是否可以通过一个统一的平台来实现对这些开源平台、模型做统一的管理,统一的监控、甚至可以很好地协作,实现1+1大于2呢? IBM在这方面从去年开始就做了尝试,推出Data Science Experience on Cloud(云版本,按月收费),而今年4月份,发布 了Data Science Experience Local版本(本地版本,一次性收费...
1. Apache Ambari + Bigtop Apache Ambari是一个大数据平台集成运维管理工具,提供可视化集群管理,简化大数据平台的安装和使用。Bigtop是一个开源项目,提供一套完整的开源软件栈,用于构建、测试和部署大数据应用程序。2. CDAP CDAP是Hadoop生态系统中的集成开源应用程序开发平台,为开发人员提供数据和应用程序...
开源大数据管理平台,顾名思义,是指其源代码公开,允许用户自由使用、修改和分发的大数据处理软件。这类平台的杰出代表有Apache Hadoop、Apache Spark等。它们基于分布式计算原理,能够高效地处理PB级别的数据集,支持多种编程语言,并提供了丰富的工具集来满足不同的数据处理需求。以Apache Hadoop为例,它由HDFS(Hadoop ...