资源包是群空间下从数据源到数据门户的元数据信息,本文为您介绍如何使用资源包进行资源的快速复制、分发。适用场景 企业版本管理。同一环境下,区分A空间和B空间。每个版本由A空间导入B空间,实现版本发布和隔离管理。不同环境下,区分开A...
编辑器 脚本首行 需要是正常参与运行的脚本。当一个.sql 文件有多个SQL脚本的情况下,如果有Flag(SET语句)需要统一放在头部,且Flag会作用于该文件下所有SQL。支持全屏模式打开输入、执行并查看结果。运行参数配置区 模块 说明 项目 选择...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、物化视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持...
创建完独立的Trino集群后,您需要进行以下配置:配置连接器 可选:配置数据湖元数据 如果数据集群的元数据选择的不是 数据湖元数据,则可以忽略此配置。配置连接器 在待使用的连接器中配置查询对象。本文以Hive连接器为例介绍。进入集群...
说明 使用Superuser在 SQL编辑器-HoloWeb 中执行上述语句创建Extension,该操作针对整个DB生效,一个DB只需执行一次。关于Hologres账号授权详情,请参见 授权服务账号。执行以下语句,创建 dlf_server 外部服务器并配置Endpoint信息,确保...
通过数据迁移服务MMS(MaxCompute Migration Service)迁移数据前,需新增并启动BigQuery数据源,确保数据源与MMS服务网络连通,并将BigQuery的元数据同步至MMS服务,以便配置后续的迁移作业。适用范围 当前 仅新加坡、印度尼西亚(雅加达...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、物化视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持...
本文将详细阐述如何将您已有的旧版数据湖集群(Hadoop),高效地迁移至数据湖集群(DataLake),以下分别简称“旧集群”和“新集群”。迁移过程将充分考虑旧集群的版本、元数据类型以及存储方式,并针对这些因素,提供适应新集群的迁移策略...
通过数据迁移服务MMS(MaxCompute Migration Service)迁移数据前,需新增并启动数据源,确保数据源与MMS服务网络连通,并将数据源的元数据同步至MMS服务,以便配置后续的迁移作业。迁移模式介绍 MaxCompute数据迁移到MaxCompute场景,迁移...
使用DLF元数据 如果数据表的元数据使用了 DLF统一元数据,则还需为Hive、Iceberg和Hudi等连接器进行额外的配置。此时查询不再依赖数据集群,hive.metastore.uri 可以任意填写,Trino能够直接访问到同一个账号下的DLF元数据。数据湖元数据...
在 数据源视角 的 Lindorm 采集器中配置元数据采集计划,即可采集Lindorm表的元数据信息,详情请参见 元数据采集。查找表 等待Lindorm元数据采集计划执行成功后,您可通过以下步骤查看所采集的Lindorm表元数据信息。单击左侧的菜单栏的 ...
本文为您介绍不同数据源的元数据执行不同操作是否会生成新版本以及不同元数据类型的对象获取的信息。元数据版本 通用说明 修改如下信息,元数据不会生成新版本。分区定义变更:分区个数变更、分区字段的分区类型和分区表达式发生变更。属性...
编辑成员角色 登录 数据资源平台控制台。在页面右上角,单击 图标,选择 系统设置。在左侧导航栏,单击 工作组管理。在 工作组管理 页面,选择目标工作组,单击 操作 列中 成员管理。在成员列表 角色 列中,对目标成员的角色进行添加、删除...
数据问答(基于数据库对接):支持添加近似查询的误差范围 功能入口:登录智能对话机器人产品控制台,选择知识中心 数据问答 元数据管理,单击有关元数据表格右侧“编辑”按钮后,再单击有关字段右侧“编辑”按钮即可进行对应字段相似查询...
本文为您介绍如何使用HoloWeb新建、登录、编辑或删除数据库。前提条件 存在已登录实例,请参见 登录实例。新建数据库 登录 Hologres管理控制台。在顶部菜单栏左侧,选择相应的地域。单击 前往HoloWeb,进入HoloWeb开发页面。在HoloWeb开发...
单击 云服务器ECS 名称下方的 获取元数据。方式二:获取某个API的元数据。访问 API文档,选择对应的云产品,本文以云服务器ECS为例。选择将要调用的API,单击页面右上角 获取元数据。方式三:调用元数据API获取元数据。元数据API无需进行...
步骤一 配置 SAML 连接 为了建立云效 SP(Service Provider,服务提供方)对企业 IdP(Identity Provider,SAML身份源)的连接,需要配置以下信息:SAML 元数据文档地址:企业 IdP 元数据地址。公钥:云效 SP 的自签名证书,public.crt 的...
元数据管理是构建数据湖重要一环,通过有效的集中式元数据管理,可以提升数据资产价值。本文为您介绍数据湖构建中数据库、数据表及函数的相关操作。数据库 创建数据库 登录 数据湖管理控制台。在左侧菜单栏,选择 元数据 元数据管理。单击 ...
元仓简介 Dataphin元数据仓库,简称元仓,是统一管理Dataphin内部业务元数据和相应计算引擎元数据的数据仓库,存在于Dataphin元仓租户中(OPS租户)的一个Dataphin项目空间,由一系列周期性的数据集成节点、SQL脚本节点、Shell节点组成。...
本文为您介绍不同数据源的元数据执行不同操作是否会生成新版本以及不同元数据类型的对象获取的信息。元数据版本 通用说明 修改如下信息,元数据不会生成新版本。分区定义变更:分区个数变更、分区字段的分区类型和分区表达式发生变更。属性...
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求,表格存储 推出了一站式物联网存储IoTstore解决方案,为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
成功连接Hologres实例后,您可以在 SQL编辑器 模块,使用标准的PostgreSQL语言进行开发。在 SQL编辑器 页面,单击 图标。您也可以在左侧导航栏,鼠标右键单击 我的SQL查询,选择 新建SQL查询。具体操作请参见 SQL窗口。在新增的 临时Query...
当您需要全面了解并高效地使用表数据,您可在 数据管理DMS 的SQL窗口查看表的详细信息,包含表所属库、字段、索引、行数等技术元数据,类目、表描述等业务元数据,以及表权限、表Owner等管理元数据。背景信息 DMS在表详情中引入表的元数据...
miniOrange SAML 2.0 SSO,单击该菜单,即可进入编辑页面,如下图所示:在 Service Provider Setup 页签内,搜索 Custom IDP,如下图所示:在搜索结果中,单击 Custom IDP,打开下图所示界面,可以通过 上传IDP元数据 和 手动填写IDP元数据...
数据目录是您在数据分析时统一的元数据工作台。它整合了MaxCompute、Hologres、DLF等多种数据源的元数据,让您无需离开DataWorks即可完成建表、视图管理等所有准备工作,从而专注核心分析。功能入口 登录 DataWorks数据分析,切换至目标...
编辑服务版本 登录 MSE网关管理控制台,并在顶部菜单栏选择地域。在左侧导航栏,选择 云原生网关 网关列表,单击目标网关名称。在左侧导航栏,选择 路由管理,然后选择 服务 页签。单击需要变更的服务名称,然后在 服务版本 区域,单击 ...
Dataphin支持配置租户级别的告警消息模板,您可根据不同的模块查看并编辑告警消息模板的内容,包括离线计算、实时计算、实时集成、基线监控、数据质量、数据服务。本文为您介绍如何查看及修改消息模板。背景信息 Dataphin中阿里云短信服务...
2.配置SSO 启用插件之后,Bitbucket将在左侧导航栏中增加菜单 SAML Single Sign On,单击该菜单,即可进入编辑页面,如下图所示:在 Identity Providers 页签内,单击 Add new Idp,如下图所示: 单击Add new Idp图标后,弹框,选择您的...
Read Bytes Per Minute(每分钟数据读取量)表示选中的缓存系统统计的每分钟数据读取量,包括缓存命中时数据读取的总量(Cache Hit)和缓存未命中时触发回源数据读取的总量(From Backend)。Cache System Aggregated Bandwidth(缓存系统...
Last-Modified 由OSS自动更新,用于缓存控制、同步和数据管理,以UTC格式表示,不可手动更改。更多信息,请参见 哪些操作会更新Object的LastModified?说明 OSS控制台在展示文件更新时间时,会将其从UTC时间格式转换为本地时间格式,从而...
DataWorks的表管理模块,可按照表所属主题、表所在引擎维度展示表,并通过引擎类型、表所在环境、表名称等信息进行过滤,快速查找目标表并编辑表信息。同时,也可新建表并导入表数据。本文为您介绍表管理的相关功能。前提条件 已定义表主题...
实例快速恢复逻辑说明 Hologres在 V2.0版本之前,Hologres计算节点均为容器调度(即下图中的Worker Node),资源管理器(Resource Manager)负责周期性健康检查。当出现1分钟容器响应超时(可能是内存溢出、硬件故障、软件Bug等原因导致)...
在新的浏览器窗口中打开复制的链接,将元数据XML文件另存到本地。打开XML文件,查找并记录 entityID 和 Location:entityID:位于元素 md:EntityDescriptor 的 entityID 属性中。示例值:https://signin-intl.aliyun.com/57*81/saml/SSO。...
标量检索是OSS提供的基于Object元数据的索引功能,允许您自定义条件,快速筛选并获取Object列表。可以帮助您更好地管理与了解数据结构,方便您后续查询、统计和管理Object。注意事项 本文示例代码以华东1(杭州)的地域ID cn-hangzhou 为例...
在新的浏览器窗口中打开复制的链接,将元数据XML文件另存到本地。说明 元数据XML文件保存了阿里云作为一个SAML服务提供商的访问信息。您需要记录XML文件中 EntityDescriptor 元素的 entityID 属性值和 AssertionConsumerService 元素的 ...
数据湖存储与管理 对象存储OSS 数据湖构建DLF 将在线数据库中的源数据引入数据湖时,OSS会作为数据湖的统一存储,存储机制包含Delta Lake和Hudi两种。同时,DLF采用元数据管理功能管理元数据库和元数据表。数据湖探索与分析 MaxCompute ...
EMR 3.32之后版本、EMR...重要 请谨慎编辑和删除默认角色AliyunECSInstanceForEMRRole,否则会造成集群创建失败或作业运行失败。使用ECS应用角色获取临时凭证 基于STS临时凭证可以获取本账号下其他云资源的访问权限,详情请参见 实例RAM角色。
在新的浏览器窗口中打开复制的链接,将元数据XML文件另存到本地。说明 元数据XML文件保存了阿里云作为一个SAML服务提供商的访问信息。您需要记录该文件中的 entityID 和 Location 的值,以便后续在Microsoft Entra ID的配置中使用。步骤二...
Kudu是一个分布式的,具有可扩展性的列式存储管理器,可以对快速变化的数据进行快速分析。使用场景 典型的应用场景如下:近实时计算场景 时间序列数据的场景 预测建模 与存量数据共存 通常生产环境中会有大量的存量数据,数据可能存储在...
如果您的企业使用AD(Active Directory)域服务来管理用户账号信息,则可以将 无影云电脑 作为服务提供商SP,将AD FS(Active Directory Federation Services)作为身份提供商IdP,让两者基于SAML协议互相交换元数据文件来实现SSO。...