丰富的数据处理组件
提供丰富的数据处理组件,实现数据从接入到处理的全流程,满足复杂业务场景的数据开发工作
协同开发
支持同项目下多人协同开发,代码版本管理和代码回滚
工作流调度
离线开发以工作流的维度进行调度运行,并生成工作流的运行实例,工作流内部的任务节点自动依赖
智能运维
平台提供智能依赖任务推荐、智能调度、智能运维、智能基线预警,支持任务批量补数据、重跑等
数据质量
平台集成数据质量稽核组件,对数据接入到处理的全过程进行质量监控,保证数据的准确性和一致性
数据安全
平台采用功能权限和数据权限双重控制机制,支持对接Kerberos认证,实现细粒度的权限管控
提供可视化组件创建各类型的离线开发任务,支持WEB SQL的可视化任务开发,支持在线调试和查看运行日志,支持引用自定义函数,任务配置简单灵活,降低用学习成本,提高产品易用性。
支持根据不同的业务场景创建开发流程,支持同一个工作流下任务的自动依赖,支持多种任务DAG组成形式,可实现跨工作流、跨项目的任务依赖,降低数据开发过程中业务逻辑处理的耦合性。
提供工作流的运行调试能力,以图形化的方式展示内部任务节点的运行状态,并支持工作流的周期性运行,支持查看工作流内部节点的依赖关系以及工作流实例的运行情况。
平台提供一键式发布,可将开发环境完成的任务及任务运行依赖的对象统一发布到目标环境,同时支持在任务发布的过程中进行事前任务校验,事中撤销发布、事后销毁发布。
了解更多,数据智能之旅从此刻开启