DataWorks数据集成实时ETL支持数据过滤组件使用，可以在来源与去向组件间新增数据过滤组件按配置的过滤规则，按字段对数据进行过滤。前提条件 已完成数据集成的基本配置与网络资源配置。数据集成的同步类型为单表实时。步骤一：配置数据...
数据过滤器用于过滤出数据源中的数据。通过数据过滤器可以将接口（数据分析服务、自定义接口或服务开发工作台）返回的数据转换成您所需要的内容，并展示在Web可视化组件上。本文介绍数据过滤器的使用方法。过滤方法 过滤方法支持数据过滤...
数据过滤插件可以对数据进行规则过滤，例如过滤字段的大小等，符合规则的数据才会被保留。前提条件 配置数据过滤节点前，您需要先配置好相应的输入节点，详情请参见 实时同步支持的数据源。操作步骤 进入 数据开发 页面。登录 DataWorks...
完成数据解析的源节点配置后，您可根据源节点的数据，配置字段和表达式，添加数据过滤的筛选器。通过解析生成多样化的数据，可用于后续分析或输出。前提条件 已配置源节点，具体操作，请参见 配置源节点。背景信息 数据解析功能说明，请...
本文为您介绍Designer中视频数据过滤打标预置模板的使用说明。使用限制 视频数据过滤打标预置模板仅支持华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）地域使用。准备视频数据 上传视频文件至OSS，视频文件格式要求如下：...
本文为您介绍Designer中视频数据过滤打标预置模板的使用说明。使用限制 视频数据过滤打标预置模板仅支持华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）地域使用。准备视频数据 上传视频文件至OSS，视频文件格式要求如下：...
问题描述 用户使用MySQL5.7版本创建数据源，然后在数据集中过滤数据，发现数据条数对不上。问题原因 用户数据里面有空值，MySQL5.7过滤数据，会把空值也同时过滤掉。解决方案 把空值补全。适用于 Quick BI MySQL5.7
该技术可以在过滤数据时，提前过滤掉不需要访问的DataPack，从而减少数据访问量，提高查询效率。具体实现方式是通过访问分区信息和统计信息，结合特定的过滤条件，在查询之前就把不符合条件的数据剪去。这样就可以减少对存储的扫描次数，...
本文为您介绍创建数据迁移或数据同步任务时，选择迁移或同步对象后通过 SQL 条件过滤数据的适用场景、使用限制和操作步骤。适用场景 创建数据迁移或数据同步任务时，您可以设置 SQL 过滤条件来过滤数据。完成设置后，只有满足过滤条件的...
产品名称 Quick BI 产品模块 仪表盘 概述 本文将通过使用查询控件的方式解决过滤器过滤数据，输入枚举值过多报错“数据库访问异常”。问题描述 用户使用过滤器过滤数据，当输入过多枚举值，数据不能成功过滤，并且会报“数据库访问异常”。...
在电子表格中根据具体需求设定过滤条件，筛选出需要的数据。场景示例：比较华东、华南和华北三个地区的运输成本。本示例以company_sales_record数据集为例。前提条件 您已上传相关数据源并已创建数据集。准备电子表格 基于company_sales_...
问题描述 Quick BI跳转后使用查询控件筛选条件过滤数据返回为空。问题原因 用户报表配置了跳转，跳转后的报表又使用查询控件进行了二次过滤。例如选择东北字段跳转，跳转后又筛选了华东，这样就会导致sql去查询同时满足东北和华东的数据。...
概述 本文主要介绍数据集过滤数字字段，选取多个值过滤的方法。详细信息 数据集过滤数字字段，界面只能选取两个条件，如何选取多个值过滤呢？方法如下：将该数字字段转换为文字类型。过滤该字段，选择按枚举过滤-多选即可。适用于 Quick BI...
如果需要根据db表中的date或datetime字段进行过滤，假设db字段名为createtime，则数据源过滤条件中的时间格式必须需为：createtime '2018-03-01 00:00:00' 暂时不支持函数和表达式判断这类复杂操作，例：in(type,1,2,3)或 length(title)10 ...
如果需要根据db表中的date或datetime字段进行过滤，假设db字段名为createtime，则数据源过滤条件中的时间格式必须需为：createtime '2018-03-01 00:00:00' 暂时不支持函数和表达式判断这类复杂操作，例：in(type,1,2,3)或 length(title)10 ...
在配置任务对象时，您可以设置SQL过滤条件过滤任务数据。通过设置后，只有满足过滤条件的数据才会被同步或迁移到目标数据库。该功能可应用于数据的定期同步或迁移、拆分数据表等多种应用场景。前提条件 说明 新版控制台的操作步骤，请参见 ...
Ranger支持对Hive数据按行进行过滤（Row Level Filter），即可以对Select...可选：测试按行过滤数据。例如，testc用户使用 select*from default.test_row_filter;语句，查看表 default.test_row_filter 中的数据时，只能显示id≥10的数据。
问题描述 Quick BI图表使用日期条件过滤后数据变少。表中只有12月的数据，使用过滤器过滤12月的数据后发现数据减少。问题原因 数据集日期字段格式选择不正确，数据库表中日期存放格式为2022-12-01，查看图表SQL发现携带的过滤条件日期格式...
问题描述 Quick BI在占位符设置多个默认值后无法过滤出数据，实际是有数据的。情况如下：问题原因 参数设置的多个值之间需要使用逗号和单引号隔开，而不是只用逗号隔开，这样会被当成一个整体从而导致没有匹配的数据。解决方案 在逗号隔开...
概述 本文主要讲述数据集中过滤字段加载不出来的处理方法。问题描述 新建的数据集进行了多个表的关联，然后点过滤进行过滤条件的设置，按枚举筛选的时候，数据一直在加载，长时间未返回结果。问题原因 表关联以后数据量太大，加载出来需要...
在配置数据迁移任务的迁移对象时，您可以设置过滤条件，过滤待迁移数据。只有满足过滤条件的数据才会被迁移到目标数据库。该功能可应用于数据的定期迁移、拆分数据表等多种应用场景。功能限制 仅支持过滤当前表的字段，不支持跨表过滤。如...
概述 本文描述了Dataphin管道任务中预览数据发现过滤条件未生效的处理方法。详细信息 管道任务配置过滤条件后，执行预览，发现数据依然是全量数据。解决办法：点击到过滤_1页面，重新执行预览即可。适用于 Dataphin 公共云2.9.4-3
概述 本文为您介绍Quick BI新交叉表如何对聚合后的度量数据进行过滤。详细信息 新交叉表可用通过把度量放到过滤器中，实现对聚合后的度量数据进行过滤。适用于 Quick BI
问题描述 Quick BI新交叉表中显示为横杠（-）的数据如何过滤掉。解决方案 方案1：在数据集中给该字段设置过滤条件：不为空。方案2：在新交叉表中添加查询控件，展示类型选择文本输入框，在查询时选择条件为“不为空”。适用于 Quick BI
问题描述 数据集设置了过滤条件，过滤出符合条件的数据：查询控件关联该数据集之后，查询控件列表中包含过滤器未选中的数据：问题原因 数据集开启了缓存导致。开启缓存之后，数据集第一次刷新预览会把所有满足条件的数据都缓存到Quick BI...
问题描述 Quick BI线图图表在过滤器中用日期字段过滤后，数据库中有数据，线图图表不显示数据怎么解决。问题原因 查看线图生成的SQL，有Limit 0,1000的限制，在Quick BI页面设置了线图图表展示结果的数量，导致在线图图表中展示的结果不全...
问题描述 Dataphin集成任务从Oracle 抽数据到 Hive，过滤组件中对Date类型数据处理出现脏数据。{"category":"filter","distribute":true,"name":"WHERE","parameter":{"condition":"(ODS_LOAD_DT='2021-12-31')","conditionObject":"[{\...
问题描述 Qucik BI仪表板中使用过滤器返回数据为空。问题原因 过滤器中的字段为无聚合方式，在SQL中是对明细数据进行了筛选，所以返回数据为空。解决方案 将过滤器中字段的无聚合改为求和即可。适用于 Quick BI
问题描述 Quick BI在数据集中添加过滤时，使用已知有值字段过滤，选择枚举中的单选，多选提示暂无可用字段，如下图所示。问题原因 选用的字段在数据集中确实存在数据，出现这个原因是因为数据集的脚本到数据源中去查询超时导致。解决方案 ...
概述 Quick BI数据准备中输入过滤设置参数时提示：“Parameter validation failed”。详细信息 Quick BI数据准备中输入过滤设置参数时提示：“Parameter validation failed”。需要设置全局参数，之后再设置这个过滤的参数。相关文档 参考...
您可以使用数据过滤器，自定义数据过滤代码，实现数据结构转换、数据筛选展示和一些简单的计算。本文介绍新版DataV资产数据过滤器的使用方法。背景信息 新版数据过滤器与旧版过滤器相比，取消了全局过滤器的概念（即各可视化应用共享过滤器...
问题描述 Quick BI里的跳转功能选中A看板中具体数据跳转到B看板没有根据点击的值过滤。问题原因 跳转设置中绑定字段和关联维度不一致导致。解决方案 将跳转设置中关联维度和绑定字段修改为一致，再次跳转即可正常过滤。如下设置：适用于 ...
本文介绍如何管理数据过滤器，包括新建过滤器、添加过滤器、排序过滤器以及新建代码片段等。新建过滤器 请参见 新建过滤器。重命名过滤器 鼠标移动到过滤器列表中的某个过滤器上，单击 重命名 图标，输入过滤器名称即可。删除过滤器 警告 ...
本文以 轮播列表柱状图 组件，使用数据过滤器筛选出B站网页内的每日推荐数据为例，为您演示数据过滤器的详细使用方法。前提条件 在可视化应用编辑器页面，添加所需要的 轮播列表柱状图 组件，详情请参见 添加资产。操作步骤 登录 DataV控制...
本文以轮播列表柱状图组件使用数据过滤器筛选出B站网页内的视频为例，为您演示如何使用数据过滤器。操作步骤 登录 DataV控制台。在 我的可视化 页面，选择您创建的可视化应用，单击 编辑。在 画布编辑器 页面，单击 图标打开 资产列表，在...
本文介绍数据过滤器的功能和如何新建一个过滤器。数据过滤器功能 在DataV中可以使用数据过滤器，可以通过自定义JavaScript代码，实现数据结构转换、数据筛选展示和一些简单的计算。前提条件 已进入画布编辑器页面。新建过滤器 您可以通过...
源数据库类型为 Tair/Redis 时，仅支持通过Key的前缀过滤数据。源数据库类型为 MongoDB 时，仅全量同步或迁移任务支持过条件过滤，增量同步或迁移阶段不支持。源数据库类型为除 Tair/Redis 和 MongoDB 外的数据库时，如果过滤条件需要使用...