大数据中台实施搭建

_相关内容

无感数据集成(Zero-ETL)

方案概述 在大数据时代,企业面临着大量分散在不同的系统和平台上的业务数据,为了有效地管理和利用这些数据,企业往往需要依赖于ETL工具对数据进行集中式管理。ETL是将上层业务系统的数据经过提取(Extract)、转换清洗(Transform)、...

方案背景

基于表格存储搭建的店铺搜索系统页面一览,样例内嵌在表格存储控制台中,用户可登录控制体验系统(若为表格存储的新用户,需要单击开通服务后体验,开通免费,订单数据存储在公共实例,体验不消耗用户存储、流量、CU)。表格存储方案 ...

Spark Connector

为了更好地融入大数据生态,MaxCompute开放了存储组件(Storage API),通过调用Storage API直接访问MaxCompute底层存储,有助于提高第三方引擎访问MaxCompute数据的速度与效率。本文为您介绍如何使用第三方计算引擎Spark通过Spark ...

无感集成(Zero-ETL)

云原生数据仓库 AnalyticDB PostgreSQL 版 提供无感集成(Zero-ETL)功能,可以帮助您一站式完成数据同步和管理,实现事务处理和数据分析一体化,专注于数据分析业务。公测时间 2024年4月1日至6月30日。公测地域 华北2(北京)、华东1...

功能介绍

4 我的看板 当前区域为可视化应用中心中数据看板的展示页面,当可视化工作台中数据看板发布后,此处即展示已发布的数据看板。可视化演播厅 序号 区域名称 说明 1 工作空间 当前区域为可视化演播厅工作空间的管理部分,通过切换工作空间...

BigQuery数据迁移至MaxCompute

本文为您介绍如何通过公网环境将谷歌云GCP(Google Cloud Platform)的BigQuery数据集迁移至阿里云MaxCompute。前提条件 类别 平台 要求 参考文档 环境及数据 谷歌云GCP 已开通谷歌BigQuery服务,并准备好环境及待迁移的数据集。已开通谷歌...

产品系列

大中型企业的生产环境。车联网、物联网、IoT工业互联网、风控、账单、广告、Feeds流、数据大屏等。Lindorm轻量版 Lindorm轻量版是更轻量、更灵活的实例规格系列,购买时选择一个引擎和一个节点即可快速使用。起步门槛价格相比集群版降低80%...

产品概述

DataV数据可视化应用搭建平台以丰富的图表组件和二三维时空地理组件为特色,搭配强大的低代码可视化搭建编排能力,可以高效、低成本地完成可视化大屏、PC数据看板、移动端报表等各类数据可视化应用的搭建,并集成到您的业务系统。...

RDS术语

本文介绍云数据库RDS的相关名词和术语。A AliSQL 阿里云深度定制的独立MySQL分支,除了社区版的所有功能外,AliSQL提供了类似于MySQL企业版的诸多功能,如企业级备份恢复、线程池、并行查询等,并且AliSQL还提供兼容Oracle的能力,如...

RDS术语

本文介绍云数据库RDS的相关名词和术语。A AliSQL 阿里云深度定制的独立MySQL分支,除了社区版的所有功能外,AliSQL提供了类似于MySQL企业版的诸多功能,如企业级备份恢复、线程池、并行查询等,并且AliSQL还提供兼容Oracle的能力,如...

使用流程

云原生数据湖分析DLA(Data Lake Analytics)是无服务器(Serverless)化的云上交互式查询分析服务,支持通过Presto和Spark引擎分析多种数据数据。快速入门旨在介绍如何开通DLA、构建数据湖、调用Presto和Spark引擎进行数据分析与...

常见问题

支持的数据库部署位置(接入方式)阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...

表结构发布流程化

搭建示例的测试环境 创建3个RDS MySQL数据库实例,分别为:Schema_Design-dev、Schema_Design-test、Schema_Design-product,操作详情请参见 快速创建RDS MySQL实例。将3个数据库实例录入至DMS,将 管控模式 均设置为 安全协同,并分别将...

2019年

概述 通过Tunnel迁移日志数据至MaxCompute 通过DataHub迁移日志数据至MaxCompute 通过DataWorks数据集成迁移日志数据至MaxCompute 通过日志服务迁移日志数据至MaxCompute 2019-12-25 新增开源地理空间UDF。新功能 您可以将开源地理空间UDF...

实时消费Kafka数据

当您需要将Kafka数据写入 云原生数据仓库AnalyticDB PostgreSQL版,且不希望使用其他数据集成工具时,可以通过实时数据消费功能直接消费Kafka数据,减少实时处理组件依赖,提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-...

RDS MySQL同步至MaxCompute

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 RDS MySQL 的数据同步至MaxCompute,帮助您快速搭建数据实时分析系统。前提条件 已开通MaxCompute并创建MaxCompute项目。更多信息,请参见 开通MaxCompute和DataWorks ...

采集数据

本文为您介绍如何新建HttpFile和MySQL数据源来访问本教程所提供的用户信息与网站日志数据,配置数据同步链路至私有OSS数据源,并通过EMR Hive节点建表去查询同步后的数据,完成数据同步的操作过程。前提条件 开始本文的操作前,请准备好...

2022年

利用MaxCompute湖仓一体在MaxCompute创建与EMR、Hadoop、DLF等外部数据表结构相同的表,利用 Create table like 语法将外部数据的表结构迁移至MaxCompute内,以获取更好的数据治理能力和访问性能。2022-09-23 全部地域 使用SQL...

方案概述

逻辑迁移(DTS数据同步)通过数据传输服务DTS,创建数据同步任务,将源RDS PostgreSQL实例的库表结构和全量数据同步至创建的 PolarDB PostgreSQL版 集群,然后保持增量数据同步。升级方案优势 一键升级功能具有如下优势:可保留数据库原...

新功能发布记录

可视应用搭建器 新功能:全新可视化应用中心 可视化演播厅 我的看板 产品UI与控制全新升级 全面优化UI视觉语言 产品控制界面全新升级 新增浅色模式 画布编辑器 编辑器界面视觉升级 组件样式快速配置 数据配置简化 新增全局搜索功能 ...

2021年

在很多应用场景需要把HBase增强版或者Lindorm的数据导入到MaxCompute做数据加工、数据分析和联邦查询,同时MaxCompute数据也需要写入HBase增强版或者Lindorm。现在可以在MaxCompute建立HBase增强版或者Linorm的外表,对HBase增强...

搭建场景

创建场景完成后,您可根据业务模型搭建3D业务场景,展示孪生模型的实时数据、状态及告警信息等。本文介绍搭建场景的具体操作。前提条件 已完成创建场景。具体操作,请参见 创建场景。添加模型 在场景编辑工作的顶部操作栏,默认选中 ...

步骤一:搭建云上专有网络

混合云容灾服务本质上就是将自建主数据中心内的服务器实时复制到云上一个用户专有的、安全的网络环境。主数据中心发生重大故障时,所有的服务器可以在VPC内运行,让业务得以继续运行。考虑三个因素 搭建VPC时,您需要考虑选取哪一个阿里...

高效数据治理实施指南

背景信息 在多人协作的数据团队数据治理是重要且繁琐的工作,在解决“如何制定客观的数据治理目标”、“如何高效推动团队达成治理目标”的过程,通常包含以下挑战:问题难定位:传统数据治理方式难以快速、完整、精准地定位潜在问题...

同步 OceanBase 数据库的数据至 Kafka

背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台,数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步,扩展消息处理能力,广泛应用于实时数据仓库搭建数据查询和报表分流等业务场景。前提条件 数据...

数据安全最佳实践

针对用户重点关注的数据安全,RDS MySQL自身提供了基础的安全保障,您还可以参见本文内容进行实例的创建和设置,进一步提高数据安全级别。实例容灾 多可用区 RDS每个地域都包含多个可用区。同一个地域的可用区都被设计为相互之间网络延迟...

案例二:搭建文档检索系统

搭建流程 创建文档数据表 创建文档数据表的SQL语句如下:CREATE TABLE enterprise_context(id bigint(20)NOT NULL AUTO_INCREMENT COMMENT '主键id',content text DEFAULT NULL COMMENT '内容',PRIMARY KEY(id))ENGINE=InnoDB COMMENT='...

跑马灯

数据源 单击 配置数据源,可在 设置数据源 面板修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...

场景编辑工作

创建场景完成后,可进入场景编辑工作,进行场景模型配置。本文介绍工作的各功能区。顶部操作栏 左侧 显示当前场景的名称。中间 显示场景功能页签:场景搭建:在场景编辑区添加3D模型,进行模型大小、位置等设置,完成场景架构搭建。...

产品优势

相比自建Redis数据库、云数据库Redis版以及其他内存数据库,云原生内存数据库Tair 在数据安全、运维、高可用、内核优化等方面都有一定的优势。Tair与自建Redis对比 对比项 云原生内存数据库Tair版 自建Redis 安全防护 事前防护:VPC网络...

案例三:搭建问答机器人

搭建流程 创建问答数据表 创建问答数据表的SQL语句如下:CREATE TABLE enterprise_context(id bigint(20)NOT NULL AUTO_INCREMENT COMMENT '主键id',content text DEFAULT NULL COMMENT '内容',PRIMARY KEY(id))ENGINE=InnoDB COMMENT='...

快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...

集群性能监控概述

数据库 OceanBase 为您提供集群实例的数据库性能和主机性能监控功能,可在 OceanBase 管理控制台中查看监控数据,还支持自定义监控能力,您可按需配置常用监控指标作为自定义监控面板。查看监控数据 进入 OceanBase 管理控制。在左侧...

开发接入流程

在智能搭建控制的 页面管理 模块,创建页面,在页面搭建编辑器,使用上述步骤开发的组件和接口,进行页面搭建配置。只有通过校验的接口才会在页面搭建编辑器展示并可以被使用。完成页面配置后,将页面发布到 PC 端和手机端。

开通DataV服务

本文为您介绍开通DataV服务的方法。操作步骤 登录 DataV控制。阅读相关协议,并选中 同意使用协议,单击 立即开通。...后续步骤 购买成功后,可进入DataV数据可视化控制,使用 模板搭建数据看板 或者 空白画布搭建数据看板。

管理备份

为确保数据误操作后,AnalyticDB MySQL版 具备数据快速恢复的能力,集群创建成功后,AnalyticDB MySQL版 会自动在后台开启数据备份功能,实现集群级别的数据备份。您可以在 AnalyticDB MySQL版 控制查看集群的备份集或修改备份设置。注意...

OceanBase 数据库之间的数据迁移

背景信息 您可以在数据传输控制创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目,通过结构迁移、全量迁移和增量同步,无缝迁移源端数据的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...

热力线层

数据项配置 说明 数据源 组件的数据通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型,灵活配置组件数据数据映射 当您需要自定义图表字段配置时,可以在 数据映射 模块设置不同的字段映射内容,将这些...

添加宜搭数据

宜搭是阿里巴巴自研的低代码应用构建平台,您可以通过可视化拖拽的方式,快速完成数据应用的搭建。本文为您介绍在DataV添加和使用宜搭数据源的方法,以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制 创建一个宜搭应用数据表单...

添加宜搭数据

宜搭是阿里巴巴自研的低代码应用构建平台,您可以通过可视化拖拽的方式,快速完成数据应用的搭建。本文为您介绍在DataV添加和使用宜搭数据源的方法,以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制 创建一个宜搭应用数据表单...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用