元数据迁移提供可视化的元数据迁移能力,可以帮您快速地将Hive Metastore的元数据迁移到数据湖构建(DLF)中。使用限制 支持的Hive版本:2.3.x,3.1.x 版本。支持的数据库类型:MySQL。创建元数据迁移任务 登录 数据湖构建控制台。在左侧...
采集任务通过采集适配器连接到指定的数据源,将源数据库中的对象元数据信息采集至Dataphin,通过内置解析器进行解析后存储并进行统一呈现。本文为您介绍如何创建及管理元数据采集任务。前提条件 需先在 管理中心 数据源管理 应用系统 创建...
SQL编辑器 HoloWeb的SQL编辑器提供标准SQL开发界面,您可以通过标准的PostgreSQL语句进行开发,同时还能查看SQL的执行计划和运行分析等,可以快速对SQL进行诊断优化,支持交互式分析,Ad Hoc分析,不支持执行时间超过60分钟的长运行SQL。...
对于对象,还支持根据元信息进行筛选。过滤选项只能在命令行中使用,不能在配置文件里指定。在测试过滤配置时,您可以通过ls命令方式验证。也可以使用-dry-run/-n选项,在不进行任何更改的情况下执行试运行。基于路径/文件名过滤 在文件名...
包括数据检索、数据预览、查看元数据详情、查看数据血缘关系、分类分组管理数据表、数据洞察等操作。本文为您介绍如何在数据地图查看和管理MaxCompute表。前提条件 创建MaxCompute数据源并 绑定至DataWorks数据开发,绑定后DataWorks会面向...
在 创建角色 页面的右上角,单击 切换编辑器。在编辑器中选择上一步创建的 SAML 身份提供商。单击 确定,输入角色名称(role1)后,再次单击 确定。返回角色页面,可查看已创建完成的角色role1。用相同的流程创建role2。三、用户组配置 在...
MaxCompute Studio提供了丰富的设置功能,您可以在编辑器页面上方的工具栏中快速设置。设置主要分为以下三种:编辑器模式:单句模式:会将提交的脚本文件按;分隔,逐条提交到MaxCompute服务端执行。脚本模式:为最新开发模式,可将整条脚本...
数据范围包含各类 表、任务节点及实例、工作空间、成员、项目、数据质量、数据资产等对象的详细元数据,助力数据治理与分析。应用场景 DataWorks开放数据(DataWorks OpenData)是原有邀测版 开放数据 的全新升级,本次提供公开使用版本。...
权限点 超级管理员 系统管理员 普通成员 查看元数据清单列表 Y Y N 查看元数据清单详情 Y Y N 数据探查配置权限列表 具有 数据探查-数据探查配置 权限的自定义全局角色支持 配置数据探查配置。权限点 超级管理员 运营管理员 普通成员 数据...
编辑器支持可视化编辑和脚本编辑两种模式,您可以任选其一。以可视化编辑模式为例,您需要在 主体 中指定从 步骤四:在阿里云创建SAML身份提供商 中创建的身份提供商(shibboleth-provider),身份提供商类型 选择 SAML。在编辑器中设置...
权限点 超级管理员 系统管理员 普通成员 查看元数据清单列表 Y Y N 查看元数据清单详情 Y Y N 数据探查配置权限列表 具有 数据探查-数据探查配置 权限的自定义全局角色支持 配置数据探查配置。权限点 超级管理员 运营管理员 普通成员 数据...
用文本编辑器打开下载的元数据文件,并复制 Location 的值(不含双引号),后续步骤将用到该值。登录 飞书集成平台单点登录管理 页面,单击 新建SSO应用。在弹出的对话框中搜索无影,然后单击 阿里云无影 卡片。在 基本配置 页签上输入飞书...
在云SSO的单点登录配置中下载旧的元数据文件,在元数据文件中的 KeyDescriptor 的部分,复制 X509Certificate 原证书信息,粘贴到新的元数据文件中相同位置,然后保存。云SSO的单点登录配置中上传新的元数据文件。在IdP单点登录配置中激活...
元数据 API 标题 API概述 目录 目录 CreateCatalog 创建数据湖数据目录 创建数据湖数据目录。DeleteCatalog 删除数据湖数据目录 删除数据目录。UpdateCatalog 更新目录 更新数据目录内容。ListCatalogs 获取数据目录列表 分页查询,获取...
编辑指定guid的元数据业务知识 接口说明 编辑指定 guid 代表的元数据的业务知识。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API...
数据目录(Catalog)是数据湖构建(Data Lake Formation)的元数据最上层实体,它可以包含多个数据库。本文为您介绍数据目录(Catalog)的基本操作。适用场景 主要适用于元数据隔离的场景,比如多个E-MapReduce集群,每个集群绑定不同的...
问题描述 用户使用资产治理数据是,编辑治理项规则可以使用自定义SQL模式,想要了解怎么书写SQL。解决方案 1.示例中的select字段不是必填的,但是需要和自己新建的元数据表的字段对应,并且select来源表需要为自己新建的元数据表(SQL编辑...
通过浏览器访问OSS时涉及跨域请求,如果未设置跨域规则,浏览器会拒绝跨域访问请求。如果您希望通过浏览器可以正常访问OSS,需要通过OSS设置跨域规则。具体操作,请参见 准备工作。由于Browser.js SDK通常在浏览器环境下使用,为避免暴露...
单击 备注 右侧的 编辑,修改备注。单击 元数据文档 右侧的 替换元数据,重新上传元数据文档。警告 请上传从企业IdP获取的正确的元数据文档。否则,会导致单点登录失败。删除SAML身份提供商 使用RAM管理员登录 RAM控制台。在左侧导航栏,...
数据湖构建 DLF(Data Lake Formation)提供了统一的元数据管理、统一的权限与安全管理、便捷的数据入湖能力以及一键式数据探索能力,您可以在 云原生数据仓库 AnalyticDB MySQL 版 中通过Spark SQL访问DLF中的元数据。前提条件 AnalyticDB...
云原生数据仓库 AnalyticDB MySQL 版 元数据发现任务支持自动映射OSS路径、智能分组文件、动态探索字段及变化感知,实现数据湖元数据的自动创建与更新。您可通过创建OSS元数据发现任务,自动发现同地域下OSS的Bucket和数据文件,并将OSS中...
nil { log.Fatalf("failed to copy object:%v",err)} log.Printf("copy object result versionId:%v",copyResult)} 使用拷贝管理器 Copier.Copy 方法修改对象元数据 您可以通过以下代码使用拷贝管理器 Copier.Copy 方法拷贝源对象时设置...
数据运维:提供即开即用的数据管理能力,例如可视化SQL编辑器、导入任务、慢查询、数据审计、元数据管理以及权限配置等能力。基于以上产品能力,您可以更加高效地聚焦于自己的业务应用,例如运营分析、用户画像、自助报表、订单分析以及...
当您在Hologres需要加速查询MaxCompute数据时,可以使用元数据映射至Hologres节点,将MaxCompute表元数据映射至Hologres,通过Hologres外表实现对MaxCompute数据的加速查询。前提条件 已创建需要映射元数据的 MaxCompute项目。已 创建...
EMR Doctor的基本配置在安装过程中已设置,主要控制集群元数据和任务元数据的采集行为,通常情况下不需要修改和下发配置。本文为您介绍EMR Doctor的基本配置信息以及如何修改基本配置。重要 本文为您列出了EMR Doctor中可以修改的配置。...
在RAM的SSO配置中下载旧的元数据文件,在元数据文件中的 KeyDescriptor 部分,复制 X509Certificate 原证书信息,粘贴到新的元数据文件中相同位置,然后保存。RAM的SSO配置中上传新的元数据文件。在IdP单点登录配置中激活新的证书,禁用老...
编辑器支持可视化编辑和脚本编辑两种模式,您可以任选其一。以可视化编辑模式为例,您需要在 主体 中选择 身份提供商 类型,点击 编辑。然后指定AAD为身份提供商,身份提供商类型 选择 SAML。在 创建角色 对话框,输入 角色名称(AADrole)...
[/参数列表 {"name":"AdditionalAttributes",/参数名称"position":"Query",/参数传输位置"type":"RepeatList",/数据类型"required":false/是否必填 }]} 云产品元数据文件示例(部分截取){"products":[/产品列表 {"code":"ECS",/云产品Code...
在 编辑企业身份源 面板的 应用元数据 下方单击 下载文件。在企业IdP中创建一个SAML服务提供商,并使用上述元数据文件将 无影云电脑 配置为可信的SAML SP。步骤三:创建与企业IdP相匹配的用户 在 无影云电脑 侧创建与企业IdP匹配的用户。...
您还可以通过设置用户自定义元数据来标识Object的用途或属性等。注意事项 本文以华东1(杭州)外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS,请使用内网Endpoint。关于OSS支持的Region与Endpoint的对应关系,请...
Y N Y N Y 我的治理移入回收站 Y N Y N Y 查看项目治理列表 Y Y Y Y Y 删除项目治理 Y N Y N Y 暂停项目治理 Y N Y N Y 项目治理移入回收站 Y N Y N Y 治理项管理 查看元数据列表 Y Y Y Y Y 新建元数据-Y Y Y 编辑&删除元数据 Y N Y N Y ...
Metastore 定时更新 配置数据源元数据定时拉取,或选择启用,则有以下两种定时方式:每天:定时器每天运行一次,运行时刻为选定的24小时内的某一时间(精确到分钟)。每小时:定时器每小时运行一次,运行时刻为选定的60分钟内的某一分钟。...
Y N Y N Y 我的治理移入回收站 Y N Y N Y 查看项目治理列表 Y Y Y Y Y 删除项目治理 Y N Y N Y 暂停项目治理 Y N Y N Y 项目治理移入回收站 Y N Y N Y 治理项管理 查看元数据列表 Y Y Y Y Y 新建元数据-Y Y Y 编辑&删除元数据 Y N Y N Y ...
Spark Jar开发编辑器"key":"value""spark.sql.hive.metastore.version":"adb"Notebook开发编辑器"key":"value""spark.sql.hive.metastore.version":"adb"spark-submit命令行工具 key=value spark.sql.hive.metastore.version=adb 指定...
关于阿里云ECS开放出方向权限的方法,请参见《云服务器ECS用户指南》的添加安全组规则章节。查看服务列表 登录 EDAS控制台。在左侧导航栏,选择 流量管理 微服务治理 Dubbo。在 Dubbo 左侧导航栏单击 服务查询。在 服务查询 页面选择 地域 ...
管理服务提供商(SP)信息 获取服务提供商(SP)元数据 您在外部IdP中配置单点登录时需要使用SP元数据文档,您可以在 服务提供商(SP)信息 区域,下载SP元数据文档。同时,您也可以查看或复制 ACS URL、Entity ID,直接用于外部IdP的手动...
上传文件时设置元数据 上传文件时设置元数据 以下代码使用上传文件(PutObject)为例设置元数据,包括设置文件过期时间、设置文件为公共读、设置自定义元数据来标识文件的用途或属性等。其他上传类对象接口都支持设置元数据,且设置方式与...
本文介绍如何使用OSS Python SDK设置和获取文件元数据。注意事项 本文示例代码以华东1(杭州)的地域ID cn-hangzhou 为例,默认使用外网Endpoint,如果您希望通过与OSS同地域的其他阿里云产品访问OSS,请使用内网Endpoint。关于OSS支持的...
支持通过Tool Window同步模型到本地(新增类、字段、方法),支持通过Project ToolWindow Action、编辑器中邮件菜单和Generator菜单同步模型到本地(新增字段、方法)。支持扫描结果通过选择右击部分上报到建模平台。支持继承自Set、...
Spark开发的相关操作,请参见 Spark开发编辑器 和 Spark离线应用开发。在左侧导航栏,单击 作业开发 Spark Jar 开发。在默认模板中输入示例语句,并单击 立即执行。Here is just an example of SparkSQL.Modify the content and run your ...