本文介绍如何自定义生命周期清单的数据质量评级Data quality rating(DQR)。在产品基础信息编辑页面,如果选择了“需要自定义数据质量评级DQR”,则用户可以自定义各清单项影响因子...(注:DQI评价体系为能耗宝平台内置的数据质量评价方法。
iGraph引擎的离线系统需要的权限列表:Object Action 说明 Project Read 查看项目自身(不包括项目的任何对象)的信息,例如CreateTime。Project List 查看项目所有类型的对象列表。Table Describe 读取表的元信息。Table Select 读取表的...
FG在PAI-Rec、PAI-FeatureStore、EasyRec Processor中的总览 名词解释 FeatureStore:PAI-FeatureStore是PAI平台下的特征平台管理工具,用于存储和管理离线和在线系统中的特征(详情见 FeatureStore概述)。FG:FG是 Feature Generate...
该架构带来的优势非常显著,比如,可有效解决纯离线系统处理增量数据导致的冗余计算和存储、时效低等问题,也能避免实时或流系统高昂的资源消耗成本,同时可消除Lambda架构多套系统的不一致问题和减少冗余多份存储成本以及系统间的数据迁移...
本文总结了线下系统调研常见的问题和解决方案。IDC调研 连通性测试 请在工具服务器上运行如下命令,打印远端机器的日期来尝试连通性 sshpass-p '密码' ssh-p 端口 账号@ip地址 'date' 如果出现"host key changed"报错,则表示您需要远程...
变更是指对线上系统的任何操作(如:发布、增加、修改或移除等),或其他对生产业务可能有影响的任何操作。基于阿里巴巴的历史经验,有一半以上的重大故障皆为变更触发,因此,变更过程的风险防御显得尤为重要,会直接关乎业务的稳定性。...
在线或离线分析系统:支持实时在线分析系统和类似于Hadoop的离线分析系统。数据处理 在很多领域,如股市走向分析、气象数据测控、网站用户行为分析,由于数据产生快、实时性强且量大,您很难统一采集这些数据并将其入库存储后再做处理,这...
本文为您介绍离线业务系统的数据在生成过程中进行的卡点校验。代码提交卡点校验 代码提交卡点校验主要包括您在提交代码时,手动或自动进行SQL扫描,检查您的SQL逻辑。校验规则分类如下:代码规范类规则。例如,表命名规范、生命周期设置及...
线上系统运行一段时间后,突然发生OOM或连接打满拒绝访问。性能退化最直观的影响就是用户体验,比如打开一个商品详情页面的耗时从0.5s上升至3s,那么用户继续浏览的意愿度就会大幅下降。当性能进一步退化至超时阈值(比如5s),就会导致...
由于云效流水线的系统架构模型进行了升级,飞流数据无法完全兼容,迁移后需要自行检查配置/参数,以实现期望效果。不支持数据增量升级,强烈建议升级后停止老平台的新增数据写入,前往云效平台开展工作,避免两个平台数据不一致导致的问题...
系统处理能力通过系统每秒钟能够处理的交易数量来评价,交易有两种理解:一是业务人员角度的一笔业务过程;二是系统角度的一次交易申请和响应过程。前者称为业务交易过程,后者称为事务。两种交易指标都可以评价应用系统的处理能力。一般的...
系统处理能力通过系统每秒钟能够处理的交易数量来评价,交易有两种理解:一是业务人员角度的一笔业务过程;二是系统角度的一次交易申请和响应过程。前者称为业务交易过程,后者称为事务。两种交易指标都可以评价应用系统的处理能力。一般的...
转移成功后系统有转移成功的提示,同时手机也会收到转移成功的通知。ICP备案信息转移后,原账号中上传的资料及审核信息会同步到新账号中。线下转移 使用任意一个阿里云账号登录并进入 智能在线 页面。通过智能在线联系阿里云售后,提交线下...
容量告警线是触发容量告警的阈值,当存储空间或磁盘容量的已用占比达到设置的阈值,系统将自动发送消息知会告警消息接收人当前已用容量的百分比。本文介绍通过Lindorm管理控制台修改容量告警线的方法。前提条件 购买实例时,商品类型 选择...
本文介绍微服务治理的流量治理,包含流量防护、无损伤下线、系统防护,消息灰度等。...服务实例隔离与诊断 服务实例隔离与诊断可以有效地应对线上故障(例如内存泄露),提升微服务系统整体稳定性。详情可参见 服务实例隔离与诊断。
常见问题 通过Webhook触发流水线失败,提示:权限不足 当使用 Webhook 触发流水线时,系统会默认以最近一次启用 Webhook 触发功能的用户身份执行流水线,继承该用户的权限上下文。如果该用户权限不足或已被移除权限,将导致触发失败。请按...
本文介绍如何在 云消息队列 MQTT 版 控制...开启自动订阅关系清理 设置为 否:订阅者客户端离线期间,系统不会清理订阅者与该Topic的订阅关系,订阅关系持续生效。配置完成后,您可以在Topic列表的 订阅关系清理周期 列查看Topic的清理周期。
经过绿盟的渗透测试,最终Dataphin系统的安全评价为:安全系统。代码漏洞扫描 Dataphin通过安全团队提供的白盒扫描工具进行产品的安全审核,安全审核包括128个大项,932个小项,已全面覆盖包括CSRF注入、config配置文件泄露、SQL注入、SSRF...
流水线配置完成后,您可以运行流水线。前提条件 已配置构建流水线。具体操作请参见 配置流水线。...说明 系统支持同时运行3条流水线,多于3条时需排队等待。在流水线概览区域,查看运行状态及进度。单击 终止,可终止运行中的流水线。
时间线元数据映射表结构 时序表创建后,系统会自动创建时间线元数据映射关系。在SQL中表名为时序表名称后拼接:meta,用于查询时间线元数据。假如时序表名称为timeseries_table,则时序元数据表的名称为 timeseries_table:meta。时间线...
离线数据包括平台系统表、时序表、快照表和自定义存储表。本文介绍不同类型存储表的基本功能和应用场景。前提条件 已备份数据,具体操作,请参见 数据备份。应用场景 除了查看数据外,数据存储中的存储表,可应用于以下功能。作为查询对象...
质检推送管理支持以技能组维度配置各个实例是否推送数据给实时质检、离线质检。本文介绍了开启云联络中心通话录音记录推送到智能对话分析的具体操作方式。...离线质检:在勾选离线质检后,系统会对录音文件进行离线质检。
高效的离线预测 PAI-EasyVision提供多机流水线的预测系统,便于将PAI-EasyVision训练的模型进行离线数据处理。每个处理过程支持多机多线程加速,且各个过程异步流水线处理,极大提高了处理效率。此外,离线预测支持用户自定义各个处理过程...
当调大TTL时,如果系统还未删除在旧的TTL之外以前的时间线元数据,且对应时间线元数据在新设的TTL中,则对应时间线元数据可以重新检索到。使用方式 创建时序表时,您可以配置数据生命周期。您也可以在创建时序表后修改数据生命周期。此处以...
审批节点 系统节点 系统初始化的动态节点不可编辑与删除,节点名称如下所示:Admin:系统管理员,若系统中有多个管理员,任意一个完成审批操作,则审批通过。DBA:实例对应的DBA,在管理员或DBA录入实例时,DBA默认是当前录入者,也可以...
参数 说明 轨迹线型 单击下拉框,选择一种轨迹线类型样式,系统默认内置四种类型轨迹线。轨迹粗细 设置轨迹线的粗细大小值,参见 尺寸映射器使用说明,配置不同轨迹线的粗细大小映射样式。轨迹颜色 数据中value字段值对应轨迹线的颜色。请...
SQL示例 查询时间线 创建时序表后,系统会自动创建时间线元数据映射表,您可以使用时间线元数据映射表查询时间线。此处以时序表名称为timeseries_table,时间线元数据映射表名称为 timeseries_table:meta,度量类型为basic_metric为例介绍...
参数 说明 轨迹线型 单击下拉框,选择一种轨迹线类型样式,系统默认内置四种类型的轨迹线。轨迹粗细 设置轨迹线的粗细大小值,参见 尺寸映射器使用说明,配置不同轨迹线的粗细大小映射样式。轨迹颜色 数据中value字段值对应轨迹线的颜色。...
参数 说明 轨迹线型 单击下拉框,选择一种轨迹线类型样式,系统默认内置四种类型的轨迹线。轨迹粗细 设置轨迹线的粗细大小值,请参见 尺寸映射器使用说明,配置不同轨迹线的粗细大小映射样式。轨迹颜色 数据中 colorField 字段值对应轨迹线...
请注意,渠道商上传线下合同后,系统将自动覆盖原线上合同,且按配置的合同生效和失效时间判断合同的有效期。合同签署信息 单击左侧菜单 合同 合同管理 合同签署信息,进入 合同签署 页面。在该页面,渠道商可查看和维护合同签署人基本信息...
限制说明 为保障数据的高可用,运行标签离线服务时,系统会将数据写入临时表({目标表}_dpfx_b);写入完成后,将原目标表进行重命名({目标表}_dpfx_tmp),目标表重命名后将临时表重命名为目标表;最后删除原目标表({目标表}_dpfx_tmp)...
限制说明 为保障数据的高可用,运行标签离线服务时,系统会将数据写入临时表({目标表}_dpfx_b);写入完成后,将原目标表进行重命名({目标表}_dpfx_tmp),目标表重命名后将临时表重命名为目标表;最后删除原目标表({目标表}_dpfx_tmp)...
在您开始创建用于研发数据的项目空间前,需要先设置Dataphin实例...租户开启 实时研发 模块后,系统将根据 离线计算引擎 选择进行推荐设置,您可以自行修改。Blink独享版 Blink是阿里云实时计算引擎。重要 该版本在公共云已停售,请谨慎选择。
限制说明 为保障数据的高可用,运行群组离线服务时,系统会将数据写入临时表({目标表}_dpfx_b);写入完成后,将原目标表进行重命名({目标表}_dpfx_tmp),目标表重命名后将临时表重命名为目标表;最后删除原目标表({目标表}_dpfx_tmp)...
限制说明 为保障数据的高可用,运行群组离线服务时,系统会将数据写入临时表({目标表}_dpfx_b);写入完成后,将原目标表进行重命名({目标表}_dpfx_tmp),目标表重命名后将临时表重命名为目标表;最后删除原目标表({目标表}_dpfx_tmp)...
二、商品评价设置优化 评价设置中增加订单状态的选择,在开启评价的状态下,通过选择订单状态来控制在哪些订单状态下允许创建评价。三、系统邮箱验证码Bug修复 以前使用更换手机的邮箱验证码可以直接用于注销账户。现在系统中每个需要安全...
超过一定时间 天猫 会系统默认好评,买家评价之后卖家可以进行解释,买家也可以追评。C店即淘宝店,淘宝有好评、中评、差评之分,自动收货十五天后默认好评。买家评价之后,淘宝的卖家可以看见买家给的好中差评,如果收到中差评,卖家可与...
系统告警规则操作说明,请见本文下方 启用告警、全局设置、设置警戒线、订阅告警、修改订阅、取消订阅。启用告警 在 系统告警 页签,打开具体告警规则对应 启用状态 列的开关,表示允许该规则产生的告警信息上报到控制台。全局设置 可对...
了解流水线变量的使用 流水线内置环境变量 说明 系统内置环境变量以“EMAS_”开头,由EMAS系统预留占用,用户不可以定义EMAS_开头的环境变量。EMAS_PIPELINE_NAME:当前运行的流水线名称 EMAS_PIPELINE_INSTANCE_ID:当前运行的流水线实例id...
进入流水线项目,单击 系统管理 插件管理,选中 Generic Webhook Trigger 并填写GitLab Token。GitLab Token可在关联GitLab操作中获取。设置GitHub触发。在目标GitHub仓库的顶部菜单栏单击 Settings,再单击左侧导航栏的 Webhooks。单击 ...