DataWorks的数据建模产品遵循Kimball维度建模理论，使用DataWorks的维度建模功能进行数据仓库模型设计时，您可根据业务情况设计并创建维度表、明细表、汇总表、应用表，并可将模型快速发布到相应的研发引擎。同时，还可以使用逆向建模，将...
例如某电商公司，希望通过分析用户行为习惯数据（例如用户登录方式、上线的时间点及时长、浏览页面、页面停留时间、平均下单时间、消费水平等）、平台稳定性、系统报错、数据安全性等信息获取平台的最佳运营方案。针对此需求，日志服务提供...
基于电商大数据，自动优化商品标题。注意事项 该接口已计划下线，不建议继续调用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否...
行为表 最近一段时间App的行为数据或场景内的行为数据，建议至少选择30~60天。为了获取用户完整的行为，尽量上报用户在全站的行为，不仅收集推荐场景（home_feed），还收集如热门场景（hot_items）和搜索场景（search）的曝光、点击等行为...
本文通过电商类数据透视示例，介绍了使用 AnalyticDB PostgreSQL 通过HLL预计算，实现毫秒级多维数据透视的方法。关于HyperLogLog的用法，请参考 使用HLL。实践总结 本文介绍的操作方法，涉及以下最佳实践。如您已了解操作方法，可以直接...
随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks智能数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。使企业中的数据产生...
随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks智能数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。使企业中的数据产生...
例如，在进行电商业务数据分析时，可用的维度及其属性有：订单维度（属性包括订单ID、订单创建时间、买家ID、卖家ID等）、用户维度（性别、出生日期等）、商品维度（包括商品ID、商品名称、商品上架时间）等，此时您就可以将这些维度和属性...
行业分析器 行业-电商通用分析 分析器介绍 行业-电商通用分析器（chn_ecommerce_general）是根据集团多年积累的电商行业数据并借助达摩院先进的智能语言处理技术，贴合行业痛点与需求，推出的适用于电商行业场景的分析器。例如：原始内容：...
或者因为技术原因无法提供行为数据，建议使用我们提供的测试数据，但是在开始一段时间（大约两周）内，模型的效果会不太理想，但随着数据的积累，会逐渐上升并最终稳定。对于这三张表的选填字段，我们建议您尽量上传。在保证选填字段有效性...
涉及到淘宝、天猫、1688、其他三大类，分为商品管理、商品数据、电商售后、电商退款、订单数据、订单信息、风险监测、客户消息、售后发货、售后退货、售后退款、数据处理、物流管理、图片处理、活动运营、alikey专区等17个小类 2....
名词解释 行为埋点逻辑：指的是采集到符合AIRec所需规范的用户行为数据，所需要符合的逻辑。AIRec推荐算法是需要用户的行为数据来学习用户的喜好。启动数据：指AIRec实例启动之前，准备好的已有的历史数据，该部分数据可以用于模型启动，让...
导出行为：数据从MaxCompute Tunnel通道导出的行为。您可以在完成敏感数据规则配置的第二天，进入 导出行为 页签，查看访问人员从MaxCompute中导出数据至外部的情况。包括查询时间段内的数据导出的总量、每天导出的数据量和数据导出总量的...
本文将通过 会员下单商品 的行为关系数据来分析如何加工行为统计标签。行为关系 本场景中 会员下单商品 行为关系，描述的是行为主体 会员 通过 下单行为 与行为对象 商品 建立的关系。具体包含的属性如下（部分示例）：参数 实体-实体ID ...
本文将通过 会员下单商品 的行为关系数据来分析如何加工行为统计标签。行为关系 本场景中 会员下单商品 行为关系，描述的是行为主体 会员 通过 下单行为 与行为对象 商品 建立的关系。具体包含的属性如下（部分示例）：参数 实体-实体ID ...
英文缩写 主题域名称 所属数据集市 备注 ec360 电商360 电商集市-open_red 开门红 电商集市-rfd 退款 电商集市-lgt 物流 电商集市-flow 流量通道 电商集市-act 活动 电商集市-byr 买家 电商集市-brand 品牌 电商集市-cate 品类 电商集市-...
本文将通过 会员下单商品 的行为关系数据来分析如何加工行为偏好标签。行为关系 本场景中 会员下单商品 行为关系，描述的是行为主体 会员 通过 下单行为 与行为对象 商品 建立的关系。具体包含的属性如下（部分示例）：参数 实体-实体ID ...
本文将通过 会员下单商品 的行为关系数据来分析如何加工行为偏好标签。行为关系 本场景中 会员下单商品 行为关系，描述的是行为主体 会员 通过 下单行为 与行为对象 商品 建立的关系。具体包含的属性如下（部分示例）：参数 实体-实体ID ...
数据库审计服务提供内置安全规则，该规则包含常见的数据库危险操作，并支持自定义安全规则。重要 数据库审计C100实例对各类规则生效的优先级为（从高到低）：过滤规则、信任规则、安全规则。数据库审计触发规则匹配的流程如下，在产生审计...
该功能详细记录用户对敏感数据的每一次访问行为，包括操作时间、操作人员、操作内容等关键信息，从而为安全管理员提供全面的审计追踪能力。通过此功能，您可以有效评估和追踪每一个访问事件，以确保数据访问活动符合组织的安全政策和合规...
数据审计 DSC提供高效日志审计能力，支持数据库、OSS 和 MaxCompute 等多种数据源，通过内置900+高危操作规则，识别异常行为、数据泄露与SQL注入等风险。支持自定义规则、多维度日志筛选及实时告警功能。检测响应 检测响应服务专注于数据...
离线数据集成节点赋予任务流进行数据传输的能力，帮助您实现数据源之间的数据同步。本文介绍配置离线数据集成节点的方法。应用场景 离线集成节点主要用于数据迁移、数据传输等场景。功能特性 不限制来源表和目标表数据库类型。支持字段映射...
适用场景 OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的运单分析 金融行业...
BST算法采用了强大的Transformer框架，用于捕获用户行为的数据中的长期时序信息。BST能够提取行为序列中的隐式特征，并对未来的目标结果进行预测，在与行为序列相关的业务场景中（例如推荐、用户生命周期价值挖掘等）发挥出明显的优势。...
后续数据检测响应服务将对异常AK访问授权Bucket的行为以及数据库实例的访问活动进行持续跟踪，检测其访问的文件和数据库信息，并提供实时告警，帮助您及时发现并处置数据泄露风险。AK泄露情报录入 若在GitHub和已授权Bucket文件中未检测到...
假设一个表的主键列为p1，p2，非主键列为c1，c2，某一行为p1=row1，p2=2023.1.28日，c1=”c1“，c2=”c2“，冷热分界线CHS=1天，当前时间为2023.1.30日，此时这一行为冷数据。如果更新这一行中的c1，c2列的值，那么这一行仍然为冷数据；...
本文介绍如何在 云原生数据仓库 AnalyticDB MySQL 版 中，利用SQL语言快速部署BST（Behavior Sequence Transformer）模型执行机器学习任务，包括从数据加工、模型创建、训练到最终的评估与预测的整个流程。使用场景 您可以通过SQL查询快速...
本文介绍如何在 云原生数据仓库 AnalyticDB MySQL 版 中，利用SQL语言快速部署BST（Behavior Sequence Transformer）模型执行机器学习任务，包括从数据加工、模型创建、训练到最终的评估与预测的整个流程。使用场景 您可以通过SQL查询快速...
场景三：按职能分类告警 数据行为风险 相关的告警发送给数据治理团队，而 数据流转风险 相关的告警则发送给架构师团队。功能作用 告警策略的核心作用是实现 安全风险的自动化、差异化通知，将正确的信息在正确的时间发送给正确的人。自定义...
TPC-H Benchmark由商业分析行为Ad-hoc查询和并发数据修改行为组成，考验数据库的事务能力和分析能力。本次测试的挑战主要有：30 TB大数据集：本次选用30 TB数据集，最大表1800亿行，对数据的导入、存储、计算性能都是巨大的挑战。复杂关联...
重要 涉及跨境操作数据迁移（例如，数据从中国境内传输至中国境外、数据在不同国家/地区间传输等）时，请提前了解相关合规声明，否则可能导致数据迁移失败并将承担相应法律责任。合规声明 数据跨境迁移会将云上业务数据传输至用户指定的...
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
Dataphin提供了下面两个功能管控数据下载行为：关闭数据结果下载：对于绝密数据，需要管控数据不能下载。这时候可以关闭整个项目的数据结果下载功能，防止敏感数据泄露。下载审批：对于保密数据，需要对下载数据、下载用户、下载场景进行...
Dataphin提供了下面两个功能管控数据下载行为：关闭数据结果下载：对于绝密数据，需要管控数据不能下载。这时候可以关闭整个项目的数据结果下载功能，防止敏感数据泄露。下载审批：对于保密数据，需要对下载数据、下载用户、下载场景进行...
背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这部分历史数据体量非常大，比如订单数据或者监控数据，降低这部分数据的存储成本将会极大的节省企业的成本。因此，如何以极简的...
此行为与使用Restful API获取查询数据的行为一致。使用InstanceTunnel下载数据时，如果数据条数超过10000，则需要对Instance上的SQL查询语句中涉及到的所有源表进行权限检查，用户需要具有所有源表的Read权限才可使用。如果用户访问的...
如果迁移的源数据库类型为MongoDB，如自建MongoDB、云数据库MongoDB，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为MongoDB的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及...
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
如果同步的源数据库类型为MongoDB，如自建MongoDB、云数据库MongoDB，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为MongoDB的同步方案概览 根据如下同步方案，查看同步任务的注意事项及...
例如：某电商企业的数据分析师每月通过订单事实表汇总销售额并配置看板，该行为符合预期。若分析师在没有特殊业务要求的情况下查看用户订单明细数据，则该行为不恰当。此类行为应该被治理。数据安全治理的目标 在2016年以前，我国对于数据...