问题描述 Dataphin对汇总逻辑表补数据,运行日志提示“will skip and set final status to success”。问题原因 统计周期选择为自然月或季度,补数据补的不是月末或周末。解决方案 若设置统计周期为月或是周等,需要补月末或是周末的数据,...
操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中,满足实时审计、问题回溯分析等需求。操作审计记录了用户通过OpenAPI或控制台等方式操作云资源时产生的管控事件,数据管理支持在操作审计中查询的事件如下表...
问题描述 Dataphin质量规则里搜索不到汇总逻辑表,但是表是真实存在的,而且业务板块,项目,表类型这些都是选择正确,如下所示:问题原因 汇总表不属于任何的项目,逻辑概念属于业务板块。解决方案 不需要选择项目名称,只选择业务板块...
产品名称 Dataphin 产品模块 维度 概述 为您分析在新建并提交维度后仍无法关联的原因 问题描述 新建维度并提交后,想为事实逻辑表、维度逻辑表等关联新建的维度时无法找到。问题原因 因为新建维度提交后,系统会自动生成的维度逻辑表,未...
了解如下问题,可以帮助您选择更匹配业务场景的消费者类型。如何实现并发消费:消费者如何使用并发的多线程机制处理消息,以此提高消息处理效率?如何实现同步、异步消息处理:对于不同的集成场景,消费者获取消息后可能会将消息异步分发到...
在日志追踪和调试过程中,log_id可以帮助我们快速定位和追踪问题。本文档将介绍如何生成log_id的逻辑。2 log_id的含义 log_id是一个用于唯一标识和追踪日志记录的标识符,它在日志系统中起到关键的作用,帮助我们定位和解决问题,同时提供...
问题描述 Dataphin修改业务快照类事实逻辑表的过滤条件,提交发布之后,发现物化代码中之前版本的过滤条件依然存在。修改过滤条件如下:预览SQL或者在物化代码中查看SQL发现有之前版本的过滤条件:问题原因 该事实逻辑表为业务快照类事实...
说明 添加至主画布的 逻辑组合节点 与 逻辑组合 为引用关系,修改逻辑组合的名称、内容,均会影响主画布上所有相关的逻辑节点。过滤器 用于自定义过滤代码,实现数据结构转换、数据筛选、展示和简单的计算。可被画布编辑器/蓝图编辑器中的...
为提供更好的跨库查询服务,跨数据库查询DSQL将于2023年06月30日进行升级,升级后,原DSQL控制台界面将下线并统一使用DMS的逻辑数仓功能进行跨库查询,应用程序访问DSQL的功能也将迁移至DMS逻辑数仓的一键JDBC功能中。背景信息 DSQL主要...
问题现象 在使用 云消息队列 RocketMQ 版 实例时收到消息堆积告警,登录 云消息队列 RocketMQ 版 控制台 后发现了下列现象:在 Group 详情 页面,看到Group ID的 实时消息堆积量 的值高于预期。导航栏中选择 消息轨迹,单击 创建查询任务,...
手工添加逻辑表 在 自动生成逻辑表 与期望的匹配结果不符时,可以编辑逻辑表匹配规则,也可以通过 手工添加逻辑表 添加没有扫描到的逻辑表。单击 手工添加逻辑表,有几个逻辑表需要同步,就在此处添加几个。同一逻辑表的数据会同步到目标表...
问题描述 本文描述Dataphin补数据,下游汇总逻辑表丢失的原因和解决方法。在DAG图中汇总逻辑表dws_oil_sku_com_station_calyear存在上游VT_ods_start,从VT_ods_start补数据选择不到下游。问题原因 目前选择展开层数是6,当某一层之后总数...
问题描述 用户在使用资产治理功能,整治所有的资产数据时,会有存储健康分和计算健康分,用户需要知道这两个分怎么计算的。解决方案 1、计算健康分:节点初始分100分,根据通用计算治理项命中的情况进行扣分。最终汇总到个人/项目/租户粒度...
Lindorm支持查看SQL语句在数据库中的执行过程,帮助您定位和排查SQL执行问题。您可以通过 EXPLAIN 语句查看不同深度的执行计划,进一步分析优化查询逻辑,以提升查询性能。适用引擎 适用于宽表引擎和时序引擎。背景信息 查询计划(Query ...
问题描述 用户创建API,操作逻辑表数据,在使用向导模式创建,最后一步提示字段未同步。解决方案 点击同步按钮,跳转到管道任务页面,点击 创建离线单条管道任务。右侧输入这里选logicaltable就能选到对应的逻辑表。适用于 Dataphin
补充数据表描述和列schema信息后生成SQL依然不符合预期 您可以尝试添加问题中所包含的业务逻辑。日期相关查询自查 问题类型 优化指导 日期查询错误 数据库中的日期列,建议使用YYYY-MM-DD格式,并且在“列描述中填写:日期列,格式为YYYY-...
当您需要对一个特定领域的问题创建一个完整的解决方案时,您可以尝试使用自定义模块将解决方案进行封装,以便在多个项目中复用。本文介绍如何构建一个自定义模块,包括如何构建自定义模块的各个功能部件以及如何在应用中引用和使用自定义...
修复xDS协议和MCP协议单个连接有问题时,不进行数据推送的问题。2.2.3.0 同步开源2.2.3版本内核,包括关闭鉴权时,取消开源控制台登录页的变化。支持查看风险客户端版本注册的服务、订阅的服务和监听的配置。优化开源控制台关于鉴权相关的...
优化弱网下连续解析失败后的重试逻辑 3.1.4 2024-10-14 修复解析结果缓存处理过程可能因为并发冲突导致崩溃的问题 3.1.2 2024-09-09 配置持久化缓存时,允许配置丢弃过期达到一定阈值的记录 3.1.1 2024-08-15 优化域名解析接口,增强对...
概述 快速入门 逻辑数仓 逻辑数仓具有强大的数据源管理能力,可以实现将企业的异构数据源进行逻辑聚合,形成物理分散、逻辑统一的虚拟数仓,然后快速地提供数据分析和访问服务,满足业务人员、BI分析师、运营人员等各种角色的需求。逻辑数...
问题描述 用户登录Dataphin之后,在“开发”模块找不到“规范建模”的功能,没有办法创建维度逻辑表、事实逻辑表、原子指标等:问题原因 创建项目的时候没有勾选创建“维度逻辑表”、“事实逻辑表”、“原子指标”等功能项导致。...
更新说明 新建普通维度逻辑表 新建层级维度逻辑表 新建事实逻辑表 查看及管理逻辑表相关对象 数据开发-编码研发-实时任务开发 实时任务支持将数据写入OSS数据源。Flink批任务支持配置实时实例运行失败后的重试次数和时间间隔。实时任务状态...
如果您无法解决问题,请记录此 requestId 并 提交工单 或者加入钉钉群36165029092(表格存储技术交流群-3)进行咨询。异常处理的代码示例如下:client:=tablestore.NewClient(endpoint,instanceName,accessKeyId,accessKeySecret)...
本文介绍同城多活的常见问题以及解决方案。假设数据库主备,ECS双可用区部署,是否就是同城多活?和EDAS、MSE集群流量同可用区优先的差异和优势?消息是基于Shutdown机制实现多活么?数据库是两个机房各一个主备,还是主机房一主一备,备...
但是,传统单机数据库的用户使用接分布式数据库时,普遍会遇到一些共性的问题,比如:应用的数据在分布式数据库应该如何分布?哪些表需要进行水平切分?分区方案及分区列如何选择?分区数目如何确定?哪些表会落在哪些数据节点?资源不均衡...
测试结果 测试结果备注 是否转化监控 监控阈值 创建日期 创建人 所属项目名称 通过 2013/7/16 XXX 某项目 通过 2013/7/16 XXX 某项目 通过 2013/7/16 XXX 某项目 通过 是 1 2013/7/16 XXX 某项目 未通过 开发代码中存在以下两个问题:未对...
自动回收空间(Auto Vacuum)Beam使用 2024年09月 V7.1.0.1 类别 功能 功能描述 相关文档 缺陷修复 版本升级 修改小版本升级插件安装逻辑,修复小版本升级失败的问题。版本升级 扩缩容 修复扩容新增节点启动时redo xlog失败问题。实例扩缩...
问题描述 Dataphin即席查询中存在数据,但是资产地图中逻辑表预览没有数据。问题原因 数据预览只会查前一个业务日期的,因为前一个业务日期没有数据,所以预览不显示。解决方案 如果要看所有的,需要即席查询中获取。适用于 Dataphin
常见问题 Q:逻辑库进行数据归档查询时会将所有逻辑库的表合并到一个物理表中吗?A:会。逻辑库在进行数据归档时,会将所有逻辑库的表都合并到一个物理表内,因此在归档视图页面中,查询任意一个逻辑表就可以查询到逻辑库中所有表的数据。Q...
反馈质量问题:您可以通过该功能向当前质量负责人反馈在使用资产过程中遇到的质量问题(如数据产出不稳定、数据内容不准确等),以通知相关负责人及时进行整改,从而推动提升资产可用性和健康度。配置详情请参见 添加并管理问题清单。② ...
反馈质量问题:您可以通过该功能向当前质量负责人反馈在使用资产过程中遇到的质量问题(如数据产出不稳定、数据内容不准确等),以通知相关负责人及时进行整改,从而推动提升资产可用性和健康度。配置详情请参见 添加并管理问题清单。② ...
创建业务限定 创建派生指标 创建原子指标 新建普通维度逻辑表 新建层级维度逻辑表 基础运维 补数据任务定时运行时间支持选择 月末。支持配置实例及运行日志的保留时长,支持配置是否定期清除补数据工作流及手动实例。新建补数据任务 运行...
开发 查看 API-查看我开发的API列表 API-创建API API-创建API-选择服务单元下拉框 API-创建API-选择Dataphin逻辑表 API-创建API-选择Dataphin逻辑表-业务模块 API-创建API-选择Dataphin逻辑表-业务模块-逻辑表 API-编辑API API-查看API详情...
两表字段业务逻辑一致性比较 用于对不同表多个字段的复杂业务逻辑是否正确进行校验,如:销售总金额=单价*数量。跨源两表字段统计值一致性比较 用于对跨数据源的两个表两个字段的复杂业务逻辑是否正确进行校验。稳定性 表稳定性校验 用于...
两表字段业务逻辑一致性比较 用于对不同表多个字段的复杂业务逻辑是否正确进行校验,如:销售总金额=单价*数量。跨源两表字段统计值一致性比较 用于对跨数据源的两个表两个字段的复杂业务逻辑是否正确进行校验。稳定性 表稳定性校验 用于...
2023-08-30 日期 版本 修改内容 2023-08-30 6.5.0 优化播放器的onError功能,在ErrorInfo的extra字段提供更多信息,方便进行问题排查。ListPlayer支持使用vid+playauth进行播放。修复切换到后台时偶尔出现的卡顿问题。2023-08-03 日期 版本...
② 图例区 表级血缘支持的数据表,包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、物化视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图,可手动展开多级上游或下游,支持...
通过操作流程图及说明,您可以...查看物理表监控明细 通过查看物理表的质量监控报告详情的最新质量评估结果,包含表质量评分详情、字段质量详情等,方便研发运维人员第一时间发现并定位物理表质量问题。具体操作,请参见 查看物理表监控明细。
SQL语言定义函数作为一种用户自定义函数(UDF),弥补了MaxCompute只能用Java或Python创建UDF的不足,还扩展了UDF入参的参数类型,可支持函数类型的入参参数,提升表达业务逻辑的灵活性。SQL UDF支持永久UDF和临时UDF,本文为您介绍通过...
常见问题 Q:逻辑库进行数据归档查询时会将所有逻辑库的表合并到一个物理表中吗?A:会。逻辑库在进行数据归档时,会将所有逻辑库的表都合并到一个物理表内,因此在归档视图页面中,查询任意一个逻辑表就可以查询到逻辑库中所有表的数据。Q...