DataWorks_大数据计算引擎_大数据开发平台

DataWorks

DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎，为客户提供专业高效、安全可靠的一站式大数据开发与治理平台，自带摩杜云数据中台与数据治理最佳实践，赋能各行业数字化转型。

产品优势

全生命周期数据应用开发: 从数据开发到算法开发，从服务开发到应用开发，闭环涵盖数据业务全流程。

下一代大数据云研发平台: 提供离线、实时、机器学习Studio满足大数据全业务场景。

完美支持数据中台: 为全域数据汇聚与融合加工、数据治理与分享提供温床，
助力企业完美升级数据体系。

全智能化体验: 引入SQL智能编辑器、智能基线监控、数据质量监控、数据保护伞，赋能AI 时代必备能力。

覆盖大数据全业务场景的功能体系

展开

数据集成

提供复杂网络环境下、丰富的异构数据源之间数据高速稳定的数据移动及同步能力。

多数据源快速上云

支持多库、多表整体数据上云的快捷配置。

多种配置方式

同时兼容可视化向导模式、复杂配置的脚本模式以及API模式创建数据集成任务。

多种同步方式

支持实时、历史数据的批量、增量同步，同步速度可以打满万兆网卡。

任意数据源、任意网络环境数据抽取

支持任意结构化、非结构化、半结构化的数据传输；同时可配置Agent至自有跳板机，实现对内网环境数据源的抽取与同步。
展开

数据开发

构建项目->解决方案->业务流程三级结构，帮助用户获得更加清晰的开发逻辑。

多引擎工作流混编

以DataStudio为核心的多引擎混编工作流，串联跨引擎数据节点开发，每个类型的引擎数据节点都有对应的Studio进行开发。

SQL智能编辑器

提供SQL格式化、智能补齐、关键字高亮、错误提示、SQL内部结构等人性化功能，带来更顺滑的SQL开发体验。

科学规范的项目模式

提供开发、生产环境隔离的“标准项目模式”，将更稳定的生产环境带给用户。

业务流程与解决方案

从业务视角管理整体工作流，将同类业务组织为解决方案，实现沉浸式开发。
展开

数据治理

保障数据定时产出、有效产出，让数据满足企业“存、通、用”的高标准数据管理要求。

数据质量监控

提供对多种异构数据源的质量校验、通知、管理能力。

任务智能监控

通过简单配置赋予智能监控系统自行决策“是否报警、何时报警、如何报警、给谁报警”的能力，以实现复杂工作流的全链路监控。
展开

数据安全

提供可视化数据权限申请审批流程，并一些类诸如敏感数据分级、访问行为识别、数据脱敏、风险识别的数据审计能力。

数据权限申请与审批

开发者可在线批量发起数据权限申请，管理者酌情进行审批，实现流程可控与可视化，利于事后审计与追溯。

敏感数据智能识别

基于自学习的模型算法，自动识别企业拥有的敏感数据，并以直观的形式展示具体类型、分布、数量等信息；同时支持自定义类型的数据识别

精准的数据分级分类

支持自定义分级信息功能，满足不同企业对数据等级管理需要

灵活的数据脱敏

提供丰富多样、可配置的数据脱敏方式，无论是存储环节的静态脱敏，还是使用环节的动态脱敏

用户异常操作风险监控和审计

利用多维度关联分析及算法，主动发现异常风险操作，提供预警以及可视化一站式审计
展开

数据服务

基于Serverless为企业搭建统一的数据服务总线，帮助企业统一管理对内对外的API服务。

Serverless构建方式

告别传统构建API的开发、运维流程，仅需关注API本身逻辑即可在web页面完成配置，并支持弹性扩展，运维成本为0。

过滤器与函数

灵活变换API返回结果数据结构，适配各类业务系统要求。

服务编排

支持将多个数据服务API串联为工作流，实现复杂业务请求逻辑。

简单管理API生命周期

基于web页面可完成API发布、管理、运维、售卖的全生命周期管理，助力用户简单、快速、低成本、低风险地实现微服务聚合、前后端分离、系统集成的工作。

一键打通商业模式

支持一键将API发布至摩杜云市场进行售卖，直接将数据能力变现。
展开

应用开发

实现在线Web轻量化开发能力，提供丰富的前端组件，通过自由拖拽即可简单快速搭建前端应用。

托管Web应用开发

无需下载安装本地IDE和配置维护环境变量，只需一个浏览器，即可在办公室、家或任何可以连接网络的地方，进行您的数据开发工作。

功能完备的编辑器

提供智能提示、补全代码并提供修复建议，让您轻松地编写、运行和调试项目。

在线调试

在线调试具有本地IDE所有的断点类型和断点操作，支持线程切换、过滤，支持变量值查看、监视，支持远程调试和热部署。

协同编辑

支持多人同时在线编辑同一个工程的同一个文件，提高工作效率。

插件体系

支持业务插件、工具插件和语言插件三种插件。
展开

机器学习

摩杜云机器学习平台（PAI）集数据处理、建模、离线预测、在线预测为一体，向用户提供更简易的操作体验。

良好的交互设计

通过对底层的分布式算法封装，提供拖拉拽的可视化操作环境，让数据挖掘的创建过程像搭积木一样简单。

优质、丰富的机器学习算法

提供经过摩杜大规模业务锤炼而成的基础的聚类、回归类等算法与文本分析、特征处理等复杂算法。

规格支持主流深度学习框架

包含Tensorflow、Caffe、MXNet三款主流的机器学习框架，底层提供M40型号的GPU卡进行训练。