TPC-DS官方工具只包含SQL生成器以及单机版数据生成工具，并不适合大数据场景，所以本文教程中使用的工具和集群信息如下：Hive TPC-DS Benchmark测试工具。该工具是业界最常用的测试工具，是由Hortonworks公司开发，支持使用Hive和Spark运行...
生成器 当前Datagen可以使用两种生成器生成随机数据：随机生成器（random）：生成随机值。您可以指定随机生成数据的最大值和最小值。序列生成器（sequence）：在一定范围内生成有序值，当生成序列达到结束值时结束，因此使用序列生成器将...
本文为您介绍如何使用模拟数据生成Faker连接器。背景信息 模拟数据生成Faker是系统内置的连接器，它根据表中每个字段提供的Java Faker表达式生成测试数据。当您在开发或测试时，需要使用一些测试数据来验证业务逻辑时，推荐您使用模拟数据...
使用说明 概述 本接口通过随机数生成器产生数据密钥，使用KMS密钥的初始版本对数据密钥加密，并返回数据密钥的明文和密文。您可以使用返回的数据密钥明文（Plaintext），在KMS之外对数据进行加密。请保存数据密钥密文（CiphertextBlob）、...
使用说明 概述 本接口通过随机数生成器产生数据密钥，使用KMS密钥的初始版本对数据密钥加密，并返回数据密钥的明文和密文。您可以使用返回的数据密钥明文（Plaintext），在KMS之外对数据进行加密。请保存数据密钥密文（CiphertextBlob）、...
使用说明 概述 本接口通过随机数生成器产生数据密钥，使用KMS密钥的主版本对数据密钥加密，并返回数据密钥的明文和密文。您可以使用返回的数据密钥明文（Plaintext），在KMS之外对数据进行加密。请保存数据密钥密文和认证数据（Aad)，以便...
本文以 数字翻牌器 组件展示其他两个数字翻牌器组件的实时数据相加结果为例，实现动态数据加和效果。效果展示 操作步骤 登录 DataV控制台。选择任一可视化应用，单击编辑，进入画布编辑器页面。添加3个 数字翻牌器 组件到画布中。单击任一...
层级生成器是一款用于生成自定义下钻区域树形结构数据的小工具，本文介绍层级生成器的详细功能。进入层级生成器 单击 DataV.GeoAtlas地理小工具系列，打开 层级生成器 工具页面。界面概述 层级生成器界面主要分成两大主要功能面板，分别为...
数据质量的管理流程包括业务数据资产定级、加工卡点、风险点...在业务系统的数据生成过程中进行卡点校验。详情请参见 离线数据加工卡点校验。对数据风险点进行监控，包括数据的质量风险和及时性。详情请参见：数据质量风险监控 数据及时性监控
在 规则 和 细则 列中对选择的表中的 字段名称 和 字段类型 设置模拟数据生成的规则。其中 规则 列中会根据字段类型提供一些内置的对应规则。细则 列会根据您选择的规则展示具体的规则信息，用户可以单击细则信息后的编辑图标对细则信息...
深度集成Atlas MCP工具，能够自动调用路径规划、兴趣点（POI）搜索和数据生成等功能，借助大模型智能拆解需求和组合MCP 工具，极大的节省时间、提高效率。说明 GeoAtlas智能助理在打开数据编辑器时默认开启，用户可通过AI助手开关按钮自由...
数据报告自动化 企业经常需要基于最新数据生成动态的数据分析报告，以监控业务的关键指标（KPI）。DataV-Note通过自然语言交互自动报告生成功能，能够自动将数据汇总并提取关键信息，将其转换为易于理解的图表和报告。这一过程大大减轻了...
SET sku_id=CASE FLOOR(RAND()*3)WHEN 0 THEN '绿茶' WHEN 1 THEN '红茶' WHEN 2 THEN '花茶' ELSE '数据生成错误' END;RETURN sku_id;END;每3秒执行一次生成数据的写入 DELIMITER$CREATE PROCEDURE executeStatement3000Times()BEGIN ...
SET sku_id=CASE FLOOR(RAND()*3)WHEN 0 THEN '绿茶' WHEN 1 THEN '红茶' WHEN 2 THEN '花茶' ELSE '数据生成错误' END;RETURN sku_id;END;每3秒执行一次生成数据的写入 DELIMITER$CREATE PROCEDURE executeStatement3000Times()BEGIN ...
基于JOIN等值连接的特性，MaxCompute可以通过表A的数据生成一个过滤器，在Shuffle或JOIN之前提前过滤表B的数据，甚至可以将过滤器下推到底层存储，在源头过滤数据。这种在作业运行时动态生成过滤器的功能称为 动态过滤器DF（Dynamic Filter...
基于JOIN等值连接的特性，MaxCompute可以通过表A的数据生成一个过滤器，在Shuffle或JOIN之前提前过滤表B的数据，甚至可以将过滤器下推到底层存储，在源头过滤数据。这种在作业运行时动态生成过滤器的功能称为 动态过滤器DF（Dynamic Filter...
说明 如需基于结果数据集进行智能分析，请先使用上述添加的原始数据 生成结果数据集。创建智能分析单元 进入项目编辑页面。登录 DataV-Note控制台。在 所有项目 全部 页签，鼠标悬停至目标项目，单击 编辑，进入该项目的编辑页面。在项目...
AI应用解决方案包含：ChatBI：通过NL2SQL技术支持企业通过自然语言查询数据生成报表，通过钉钉IM及PC Web实现数据触达与协同。ChatMemo：为企业提供专属安全、可扩展、易维护的企业专属知识库，提供问答式的知识检索、内容总结、内容生成等...
AI应用解决方案包含：ChatBI：通过NL2SQL技术支持企业通过自然语言查询数据生成报表，通过钉钉IM及PC Web实现数据触达与协同。ChatMemo：为企业提供专属安全、可扩展、易维护的企业专属知识库，提供问答式的知识检索、内容总结、内容生成等...
MMA利用Meta Carrier连接您的Hive Metastore服务，获取Hive Metadata，并利用这些数据生成用于创建MaxCompute表和分区的DDL语句以及用于迁移数据的Hive UDTF SQL。详细信息请参见 MMA概述。数据库数据同步 数据库的数据同步到MaxCompute...
关键配置信息如下：参数 描述 数据生成SQL 参考 动态物化视图 的命令，填写 数据生成SQL。单击 预编译 按钮，可以对输入SQL进行语法检查。重要 非分区表，必须有主键。字段详情 预编译成功后，解析的字段详情。主键字段信息 数据生成SQL预...
数据服务解决从数仓到应用的“最后一公里”，将数据源中的数据表快速生成数据API，在API网关进行统一管理和发布。实现低成本、易上手、安全稳定的数据共享与开放。背景信息 为了将最终分析的结果加速查询后开放出API接口对接三方服务，本次...
重复数据处理策略 支持以下取值：跳过重复数据 生成结构对象和数据模型时，如果编码已经存在，则结构对象和数据模型的名称、编码以及所有的字段都不做任何修改。生成应用服务时，如果服务编码已存在，服务本身信息不做修改，并继续判断方法...
重复数据处理策略 跳过重复数据 生成结构对象时，如果编码已经存在，则结构对象的名称、编码以及所有的字段都不做任何修改。生成应用服务时，如果服务编码已存在，服务本身信息不做修改，并继续判断方法是否存在，如果方法编码也相同则不再...
报表应用：基于数据应用层提供的数据生成的业务报表、仪表板大盘等高级分析可视化展示。运营人员 选择来源系统的运营人员，负责对归属于该来源系统的元数据进行常规维护。支持选择用户或用户组。用户：选择当前租户下正常使用的用户，最多...
报表应用：基于数据应用层提供的数据生成的业务报表、仪表板大盘等高级分析可视化展示。运营人员 选择来源系统的运营人员，负责对归属于该来源系统的元数据进行常规维护。支持选择用户或用户组。用户：选择当前租户下正常使用的用户，最多...
操作步骤 操作说明 创建ECS实例 登录阿里云，创建一个ECS实例，用于数据生成、向StarRocks导入数据和客户端测试。建议规格具体如下：操作系统：建议使用CentOS或Alibaba Cloud Linux。数据盘：建议使用ESSD数据盘，具体数据容量根据需要...
DataV-Board支持AI智能生成方式创建PC端数据看板，通过对话式交互即可实现数据看板的雏形创建。当您对待创建的看板有初步构思时，您可借助AI智能生成的交互式对话方式，逐步引导生成您想要的数据看板作为雏形。本文介绍如何使用AI智能生成...
可视化应用 使用DataV创建出的基于数据生成的看板，即为可视化应用。DataV能将数据由单一的数字转化为各种动态的可视化图表，从而实时地将数据展示给用户。如果您想快速创建一个可视化应用，请参见 使用模板创建PC端可视化应用。数据源 在...
应用场景 数据集成 运维：数据容灾、异地多活、数据归档、数据迁移、测试数据生成、运维指标监控、业务指标监控等。开发：实时报表、日志分析、离线宽表、T+1数据快照、数据聚合、数据清洗、数据脱敏等。数据开发 数据库开发：跨库开发、...
关闭：不对上述数据生成备份脚本。默认为开启。说明 单击 确定执行 后，系统将自动开始执行。查看任务进展并验证 以管理员账号，单击 基本信息 区域变更数据库的名称。在提示框中，单击 查询。页面将自动跳转至SQL Console页面。在SQL ...
声明 MaxCompute公开数据集中的TPC-DS的数据生成与分析基于TPC-DS的基准测试，并不能与已发布的TPC-DS基准测试结果相比较，因为通过MaxCompute公开数据集进行的测试并不符合TPC-DS基准测试的所有要求。MaxCompute提供的TPC-DS只能用于产品...
MaxCompute平台支持丰富的数据...MMA迁移工具 MMA利用Meta Carrier连接用户的Hive Metastore服务，抓取用户的Hive Metadata，并利用这些数据生成用于创建MaxCompute表和分区的DDL语句以及用于迁移数据的Hive UDTF SQL。详情请参见 MMA概述。
指定金字塔的最大层级为12级，超过12级则会实时读取数据生成mvt。SELECT ST_BuildPyramid('test','geom','id','{"maxLevel":12}');分层处理。您可以为金字塔的每个层级设置不同的处理条件，例如显示字段、过滤条件等。通过添加 buildRules ...
安装TPC-H工具 git clone https://github.com/yubinr/benchtpch.git cd benchtpch/dbgen-src make 命令执行完成后，benchtpch/dbgen-src 目录下会生成两个可执行文件：dbgen：数据生成工具。使用InfiniDB官方测试脚本进行测试时，需要使用...
操作步骤 操作说明 创建ECS实例 登录阿里云，创建一个ECS实例，用于数据生成、向StarRocks导入数据和客户端测试。建议规格具体如下：操作系统：建议使用CentOS或Alibaba Cloud Linux。数据盘：建议使用ESSD数据盘，具体数据容量根据需要...
数据看板 使用DataV-Board创建的基于数据生成的看板，即为数据看板。DataV-Board能将数据由单一的数字转化为各种动态的可视化图表，从而实时地将数据展示给用户。如果您想快速创建一个数据看板，请参见 使用模板创建PC端看板。数据源 在...
说明 您可修改案例数据生成自己的物品推荐列表。拉链表实现 DataWorks MaxCompute 数据开发 运维中心 基于DataWorks on MaxCompute实现拉链存储场景，使用DataStudio 数据开发 与 运维中心 模块，实现拉链数据加载功能，记录电商订单从开始...
基于目标数据生成副本，备份速度较慢。重要 切换至 快照备份 后，仍然可以在 手动备份 时选择 物理备份。备份优先级 集群系列实例的备份方式为 物理备份 时，支持设置备份优先级：仅从主库备份：指定备份只在主库上进行。优先从备库备份：...
模型发布生产环境成功后，DataWorks智能数据建模支持自动生成数据质量监控规则，便于后续在生产环境中通过生成的数据质量规则来约束对应表的数据质量。本文为您介绍如何在表发布成功后自动生成数据质量规则。前提条件 已将表发布至生产环境...