登录 注册
开源 企业版 高校版 私有云 模力方舟 模力方舟
服务器应用
开源许可
MulanPSL-2.0 0BSD AFL-3.0 AGPL-3.0 Apache-2.0 Artistic-2.0 BSD-2-Clause BSD-3-Clause BSD-3-Clause-Clear BSD-4-Clause BSL-1.0 CC-BY-4.0 CC-BY-SA-4.0 CC0-1.0 CECILL-2.1 CERN-OHL-P-2.0 CERN-OHL-S-2.0 CERN-OHL-W-2.0 ECL-2.0 EPL-1.0 EPL-2.0 EUPL-1.1 EUPL-1.2 GFDL-1.3 GPL-2.0 GPL-3.0 ISC LGPL-2.1 LGPL-3.0 LPPL-1.3c MIT MIT-0 MPL-2.0 MS-PL MS-RL MulanPSL-1.0 MulanPubL-1.0 MulanPubL-2.0 NCSA ODbL-1.0 OFL-1.1 OSL-3.0 PostgreSQL UPL-1.0 Unlicense Vim WTFPL Zlib
Scala
全部语言 Java JavaScript HTML CSS Python C Shell C++ TypeScript PHP C# Go Objective-C Kotlin Android Ruby Assembly Swift NodeJS Dart Perl Lua Rust Matlab 其他 PowerShell HTML/CSS 微信 Groovy C/C++ Verilog XSLT R QML Pascal Docker CoffeeScript FORTRAN Erlang Emacs Lisp ActionScript SQL Smalltalk M VHDL Delphi TeX/LaTeX ASP Visual Basic Common Lisp Clojure Scheme LiveScript Awk Haskell Elixir Julia 易语言 Pawn AutoHotkey YAML OCaml Ada D Puppet Standard ML Logos XML Arduino Prolog Coq VimL 汇编 Haxe Vala ColdFusion Scilab Crystal Racket Lisp Slash Eiffel eC DOT Zephir Nemerle
Stars
Stars 最新推荐 最近更新
1039542 geekyouth 1578938931

极客青年/SZT-bigdata

1.3K
深圳地铁大数据客流分析系统🚇🚄🌟
Scala
大数据
|
接近2年前
1640228 opensci 1578990842

科学大数据开源社区/PiFlow

GVP
1.1K
混合型科学大数据流水线系统，包含丰富的处理器组件，提供Shell、DSL、Web配置界面、任务调度、任务监控等功能
Scala
大数据
|
12个月前

ApacheLinkis/linkis

GVP
968
打通了多个计算存储引擎如：Spark、TiSpark、Hive、Python和HBase等，对外提供统一REST/WebSocket/JDBC接口，提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算中间件。
Scala
分布式服务/框架
|
2年前
11439529 fire framework 1677489254

Fire Framework/fire

GVP
627
Fire框架是中通大数据自主研发并开源的大数据框架，专为Spark和Flink任务开发设计，可显著降低70%以上的代码量。该框架创新性地采用基于注解的方式进行Spark和Flink任务开发，并集成了实时血缘追踪、根因诊断、动态调优以及参数热调整等多项平台化功能。Fire框架已被数十家公司采用，累计收获了近千个Star，并拥有超过200人的社区，其中包括来自美团、阿里巴巴、作业帮等知名企业的成员。
Spark
flink
实时计算
大数据
开发框架
Scala
大数据
|
27天前

wux-labs/DataService-Framework

614
大数据平台数据服务框架。实现了Kafka实时数据过滤、清洗、转换、消费，实现了Spark SQL对Redis、MongoDB等非关系型数据库的数据的读写；集成了规则引擎，可基于规则引擎实现客户标签、画像等相关功能。
Scala
大数据
|
3年多前

hellowzk/light-spark

211
Spark快速开发框架，提高开发效率，主要针对离线任务场景
Scala
分布式服务/框架
|
10个月前

supermy/kafka-spark-redis

68
大数据实时流的计算框架
Scala
大数据
|
接近8年前
1020923 bluejoe 1578938480

白乔/πFlow

61
可配置图形化大数据流水线系统，包含丰富的处理器组件，提供Shell、DSL、Web配置界面、任务调度、任务监控等功能
Scala
大数据
|
接近8年前

meta-soul/LakeSoul

44
LakeSoul 端到端实时湖仓框架 Github 官方镜像 https://github.com/lakesoul-io/LakeSoul
Scala
大数据
|
14天前
1020923 bluejoe 1578938480

白乔/spark-http-stream

30
基于HTTP的spark streaming source和sink实现
Scala
分布式服务/框架
|
接近8年前

dff/spark-template

17
spark开发模板
模版
Scala
分布式服务/框架
|
3年前
1281 for 1988 1578913984

ForEleven/push-server

10
使用akka＋undertow搭建的简单的push服务
Scala
消息服务器/消息队列
|
接近9年前

Qinx/setl

9
A simple Spark-powered ETL framework that just works 🍺
Scala
大数据
|
4年多前
6892317 apache 1605059459

Apache/Toree

8
Apache Toree 提供了与远程 Apache Spark 进行交互和访问的机制
Scala
消息服务器/消息队列
|
4个月前
12 mirrors 1578989292

Gitee 极速下载/stream-dm

8
streamDM，是由华为诺亚方舟实验室开源的使用 Spark Streaming 挖掘大数据的开源软件
Scala
大数据
|
6天前
热门项目
今日
本周
祝威廉/byzer-lang
8
Byzer (former MLSQL) is a low-code, open-sourced and distributed programming language for data pipeline, analytics and AI in cloud native way.
许晓东/kafka-console-ui
180
一款快捷易用的轻量级kafka可视化管理平台
meta-soul/LakeSoul
44
LakeSoul 端到端实时湖仓框架 Github 官方镜像 https://github.com/lakesoul-io/LakeSoul
Fire Framework/fire
627
Fire框架是中通大数据自主研发并开源的大数据框架，专为Spark和Flink任务开发设计，可显著降低70%以上的代码量。该框架创新性地采用基于注解的方式进行Spark和Flink任务开发，并集成了实时血缘追踪、根因诊断、动态调优以及参数热调整等多项平台化功能。Fire框架已被数十家公司采用，累计收获了近千个Star，并拥有超过200人的社区，其中包括来自美团、阿里巴巴、作业帮等知名企业的成员。
WeBank/DataSphereStudio
2.4K
将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出等数据应用开发全流程场景需求。欢迎申请体验demo环境：https://sandbox.webank.com/wds/dss/#/register
WeBank/DataSphereStudio
2.4K
将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出等数据应用开发全流程场景需求。欢迎申请体验demo环境：https://sandbox.webank.com/wds/dss/#/register
第四范式/pafka
8
Pafka is originated from the OpenAIOS project to leverage an optimized tiered storage access strategy to improve overall performance for streaming/messaging system.
祝威廉/byzer-lang
8
Byzer (former MLSQL) is a low-code, open-sourced and distributed programming language for data pipeline, analytics and AI in cloud native way.
Fire Framework/fire
627
Fire框架是中通大数据自主研发并开源的大数据框架，专为Spark和Flink任务开发设计，可显著降低70%以上的代码量。该框架创新性地采用基于注解的方式进行Spark和Flink任务开发，并集成了实时血缘追踪、根因诊断、动态调优以及参数热调整等多项平台化功能。Fire框架已被数十家公司采用，累计收获了近千个Star，并拥有超过200人的社区，其中包括来自美团、阿里巴巴、作业帮等知名企业的成员。
meta-soul/LakeSoul
44
LakeSoul 端到端实时湖仓框架 Github 官方镜像 https://github.com/lakesoul-io/LakeSoul
xl-xueling/xl-lighthouse
159
新一代全景式实时业务监控系统，承载数百万个监控项，每天可高效处理1000亿条消息，XL-LightHouse是一套支持超大数据量、支持超高并发的实时业务指标监控系统【同时支持单机版】。应用场景比如：PV、UV统计；电商销售额、下单用户数统计；日志量统计；接口调用量、异常量、耗时情况统计；服务器运维监控，支持多维度统计，支持各种复杂的条件筛选和逻辑判断，帮助企业快速搭建数据监控体系。
点此查找更多帮助

搜索帮助

Git 命令在线学习 如何在 Gitee 导入 GitHub 仓库
Git 仓库基础操作
企业版和社区版功能对比
SSH 公钥设置
如何处理代码冲突
仓库体积过大，如何减小？
如何找回被删除的仓库数据
Gitee 产品配额说明
GitHub仓库快速导入Gitee及同步更新
什么是 Release（发行版）
将 PHP 项目自动发布到 packagist.org
回到顶部