B站:架构师通哥 微信:tonggedata 目标:和志同道合的小伙伴打造开源数据中台的玩具项目。 方式:站在巨人的肩膀上,整合各大开源组件,以需求为导向,以提升效率和发挥商业价值为目标,希望在集成各种工具的过程中,同学们技术能够得到提升,从而达到升职加薪的小目标。
🔥 Apache DolphinScheduler是一个新一代分布式大数据工作流任务调度系统,致力于“解决大数据任务之间错综复杂的依赖关系,整个数据处理开箱即用”。它以 DAG(有向无环图) 的方式将任务连接起来,可实时监控任务的运行状态,同时支持重试、从指定节点恢复失败、暂停及 Kill 任务等操作。目前已经有像IBM、阿里、腾讯、360 等 1000 多家公司生产上使用,下载安装包请去官网
智数通提供了元数据管理、数据标准管理、数据质量管理、主数据管理、数据集市管理、可视化图表看板、流程管理等微服务,是为数字化建设而生的企业级一站式数据治理平台。