有奖捉虫:行业应用 & 管理与支持文档专题 HOT
WeData 数据开发为数据工程师以及数据开发相关人员提供了高效、协作、智能的数据开发平台。WeData 数据开发模块面向各类引擎(EMR数据湖计算DLC腾讯云数据仓库?TCHouse-P 等),通过提供脚本开发、可视化开发、任务编排、任务发布以及任务运维等能力,帮助组织和企业高效构建数据仓库。

使用限制

1. WeData 数据开发中可使用的计算任务取决于项目下绑定的计算引擎类型。绑定 EMR 引擎,需要启动 Hive 和 Spark 服务,可以使用 HiveSQL、SparkSQL和 Spark 任务类型的开发。其他 WeData 中基于 EMR 引擎的任务,例如,Trino 等也需要开启对应的 EMR 服务。绑定 TCHouse-P 引擎,可使用 TCHouse-P 任务;绑定 DLC 引擎,可以使用 DLC SQL、DLC Spark 类型的任务。其他类型的关系型数据库,如果需要在 WeData 中做数据开发,需要在WeData 中创建数据源,使用 JDBC 的任务来创建 SQL 脚本,WeData 数据开发负责脚本的下发执行。
2. 每种计算引擎都有各自的数据权限管控体系,WeData 不做具体的数据权限控制,而是通过账号互通的方式来对接各个引擎的权限。例如 WeData 中关于 EMR 数据的权限是通过账号映射的方式来实现的。
?


http://www.vxiaotou.com