作为大模型时代的全场景数据消费的BI产品，Quick BI 支持数据源的连接和数据集的创建，对数据进行即时分析与查询。通过电子表格或仪表板功能，以拖拽的方式进行数据的可视化呈现。还可以支持自然语言交互进行数据分析提问，快速生成报表与...
本文为您介绍系统内置函数中数值函数的使用方法。BI_ABS BI_ABS用于求数值的绝对值。语法 BI_ABS(number)参数说明 number：待求绝对值的数值。定义 返回 number 的绝对值。输出 数值 示例 BI_ABS(-1.5)=1.5 BI_CEILING BI_CEILING用于对...
选择 超时告警 策略，当任务运行时长超过设置的超时时长后，系统将向指定的告警组发送通知。选择 超时失败 策略，当任务运行时长超过设置的超时时长后，该任务实例会立即失败。任务提交节点 仅支持 调度资源组节点，表示任务在Workflow的...
开源大数据平台E-MapReduce（Elastic MapReduce）是运行在阿里云平台上的一种大数据处理的系统解决方案。
选择 超时告警 策略，当任务运行时长超过设置的超时时长后，系统将向指定的告警组发送通知。选择 超时失败 策略，当任务运行时长超过设置的超时时长后，该任务实例会立即失败。任务提交节点 仅支持 调度资源组节点，表示任务在Workflow的...
注意事项 当集群出现以下情况时，自动补偿功能可能会失败：待替换的ECS实例出现系统问题。待替换的ECS实例开启了释放保护。待替换的ECS实例所属节点组的节点数小于或等于节点组限定的最小节点数。新补偿的ECS实例会在扩容流程中自动运行...
选择 超时告警 策略，当任务运行时长超过设置的超时时长后，系统将向指定的告警组发送通知。选择 超时失败 策略，当任务运行时长超过设置的超时时长后，该任务实例会立即失败。添加依赖 需要判断的依赖任务，可以是某一个项目中的工作流...
选择 超时告警 策略，当任务运行时长超过设置的超时时长后，系统将向指定的告警组发送通知。选择 超时失败 策略，当任务运行时长超过设置的超时时长后，该任务实例会立即失败。任务提交节点 仅支持 调度资源组节点，表示任务在Workflow的...
本文为您介绍系统内置函数中转换函数的使用方法。BI_DATEFORMAT BI_DATEFORMAT用于将日期进行格式化，并输出文本。语法 BI_DATEFORMAT(date,format)参数说明 date：待转换的日期。format：需转换的格式，支持的格式如下：yyyy:年 MM:月 dd:...
Alluxio是一个面向基于云的数据分析和人工智能的开源的数据编排技术。Alluxio为数据驱动型应用和存储系统构建了桥梁，将数据从存储层移动到距离数据驱动型应用更近的位置，从而能够更容易被访问，同时使得应用程序能够通过一个公共接口连接...
授权主体 被授权主体，即需要授权的RAM用户，系统会自动填入当前的RAM用户，您也可以添加其他RAM用户。选择权限 在 系统策略 中，输入并选择 AliyunEMRNotebookFullAccess 权限。该系统策略内容如下。{"Version":"1","Statement":[{"Action...
本文为您介绍E-MapReduce（简称EMR）中Kafka集群操作系统环境变量和配置项。操作系统环境变量 EMR Kafka集群的ECS实例操作系统用户为kafka，用户组为group，您可以登录ECS实例执行各类操作。EMR Kafka预置了以下Shell终端环境变量。变量名 ...
选择 超时告警 策略，当任务运行时长超过设置的超时时长后，系统将向指定的告警组发送通知。选择 超时失败 策略，当任务运行时长超过设置的超时时长后，该任务实例会立即失败。添加前置检查条件 根据前置任务的状态来跳转到对应的下游分支...
选择 超时告警 策略，当任务运行时长超过设置的超时时长后，系统将向指定的告警组发送通知。选择 超时失败 策略，当任务运行时长超过设置的超时时长后，该任务实例会立即失败。数据源实例 选择在 数据源中心 中创建的SSH数据源。任务提交...
调度系统：提供Apache Airflow Operators，以及兼容Apache Airflow livy_operator。提供DolphinScheduler Operators。元数据管理：支持外部Hive Metastore作为元数据服务。接口调用：提供Spark Thrift Server服务以支持JDBC接口调用。提供...
授权主体 被授权主体，即需要授权的RAM用户，系统会自动填入当前的RAM用户，您也可以添加其他RAM用户。选择权限 在 系统策略 中搜索并选择 AliyunEMRWorkflowAdmin 权限。AliyunEMRWorkflowAdmin权限内容 {"Version":"1","Statement":[{...
任务实例（JobRun）在任务编排系统中，Workflow的运行通常会对应一个JobRunID，表示一个任务实例。工作流（Workflow）工作流是指由一系列相关任务组成的有序流程，每个任务之间有明确的依赖关系和执行顺序。用户（Account）用户是访问控制...
按时间配置的弹性伸缩示例如下所示：示例1：执行频率 选择为 每天，执行时间设置为09:00~19:00，则系统将在每天的早上9:00自动增加一个节点，以应对计算需求，而到了晚上19:00，系统则会自动减少一个节点，以优化资源使用。示例2：执行频率...
自助取数 自助取数默认支持系统里已创建的所有数据源。取数能力全新升级，独立部署支持千万级别数据导出。数据源 PolarDB for MySQL支持8.0版本。变更内容 数据大屏 支持 页面跳转，包括三种跳转方式。请参见 数据大屏配置图表样式。数据...
对于CentOS系统，您可以通过 yum install httpd 命令安装httpd，然后使用 htpasswd 命令；对于Ubuntu，您可以通过 apt-get install apache2-utils 命令安装httpd，然后使用 htpasswd 命令。说明 这些命令和软件包的具体使用方式可能因系统...
您无需提前购买大量资源，系统会根据您工作空间实际的资源使用量进行结算。费用按照每小时整点进行一次计算（以UTC+8时间为准），计算完成后将进入新的计费周期。适用于业务用量经常变化的场景。包年包月 包年包月是一种先付费后使用的计费...
Quick BI服务协议的详情，请参见 Quick BI服务协议。
在进行按量付费节点组的扩容时，系统将尽最大努力交付所有创建成功的节点。适用客户 全网用户 新增功能/规格 在进行按量付费节点组的扩容时，如果ECS库存不足或ECS服务部署失败，系统将尽最大努力交付所有创建成功的节点。产品文档 管理...
目前，系统支持在Notebook会话中使用运行环境。在Notebook会话启动时，系统将根据所选环境预装相关库。更多信息，请参见 管理运行环境。引擎侧 版本号 说明 esr-2.2(Spark 3.3.1,Scala 2.12)Fusion加速 支持WindowTopK算子。优化了Shuffle...
适用客户 全网用户 新增功能/规格 EMR on ECS 在创建集群时，或在创建后集群的弹性伸缩页面，支持配置托管弹性伸缩模式，只需指定集群Task节点的最大最小数量，系统将根据业务负载动态调整集群。产品文档 创建托管弹性伸缩策略
在这种高安全级别的集群中，所有开源组件均采用Kerberos安全模式启动，确保只有经过Kerberos认证的客户端能够访问集群提供的服务（例如HDFS）。背景信息 集群开启Kerberos之后：客户端：可以对可信任的客户端提供认证，使得可信任客户端...
开启后，系统会按照 每批间隔时间 执行任务。您可以设置 每批间隔时间，即每隔多长时间执行一次任务。重要 关闭 滚动执行 后，所有节点同时重启可能导致服务不可用，请谨慎选择。失败处理策略 单节点失败继续执行：执行任务时，如果单节点...
Apache Hadoop YARN ZKConfigurationStore反序列化代码执行漏洞（CVE-2021-25642）Apache Hadoop YARN是默认的Haodop资源管理器，是一个通用的资源管理和调度系统。ZKConfigurationStore是YARN CapacityScheduler调度器用于从ZooKeeper获取...
系统会检测当前集群的资源使用状态，自动推荐配置弹性伸缩规则。您可以参考推荐规则为集群节点组配置弹性伸缩，具体操作请参见 创建自定义弹性伸缩策略、创建托管弹性伸缩策略。方式二：查看YARN详细指标数据 进入指标监控页面。登录 EMR ...
使用限制 仅当小版本的最后三位版本号大于或等于1.6.0时，系统才支持修改时区。例如，当小版本为3.3.2-1.81-1.6.5时，最后三位版本号为1.6.5，系统支持修改时区。注意事项 在导入数据之前，必须确保StarRocks的全局时区与部署FE节点的时区...
Quick BI作为一款云上多租户的SaaS产品，支持租户隔离。Quick BI把租户映射为一个组织，组织作为Quick BI最基本的概念存在，任何数据、资源和用户都必须从属于一个组织，不同组织之间的数据、资源和用户完全隔离，互不影响。
后续步骤 首次开通Workflow服务或开通新地域的Workflow服务后，系统会为您自动创建默认工作空间和默认调度资源组。如果默认调度资源组不能满足您的需求，您可以根据业务场景需求购买合适规格的付费调度资源组。购买调度资源组后，在实际...
目前阿里云开源大数据平台E-MapReduce常见的计算引擎（例如Flink、Spark、Hive或Trino）都与Paimon有着较为完善的集成度。您可以借助Apache Paimon快速地在HDFS或者云端OSS上构建自己的数据湖存储服务，并接入上述计算引擎实现数据湖的分析...
说明 购买E-MapReduce集群时，系统会根据您选择的实例配置自动购买并创建ECS实例，您无需提前准备集群所需的ECS实例。重要 如您在购买或使用ECS实例时挂载了公网，则可能会产生额外的带宽与流量费用，详情请参见 公网带宽计费。计费方式 ...
本文系统阐述了阿里云的组织用户管理体系，深入剖析了用户身份、角色指派与权限策略这三大核心维度的设计逻辑与交互关系，助您构建起一套精细、高效、安全且稳固的企业级访问控制框架。
Flink社区已提供了丰富的开源Connector，旧版Flink VVR中的各类自研Connector将停止功能更新。您可以通过使用开源Connector便捷地对接各种数据源和下游系统。说明 EMR-5.17.0、EMR-3.51.0版本开始使用Apache Flink 1.17.2版本，版本说明请...
多源数据融合：整合BI系统内数据资产与外部知识库，构建企业级一站式数据与知识视图，打破信息孤岛，提升分析全面性。智能意图识别：基于用户意图识别，自动规划相应专家Agent执行操作，帮助用户更准确、高效地获得答案，提升交互智能化...
例如，用于系统更新、配置更改或其他需要重启服务以确保新设置生效的情况。警告 重启实例会造成您的实例停止工作，可能导致业务中断。因此，建议您在业务低峰期进行操作。同时，请确保客户端已具备业务重试机制，以避免影响业务的正常使用...
适用客户 全网用户 新增功能/规格 托管弹性伸缩功能开启后，系统将持续监控集群YARN的负载，您只需要填写集群最大最小Task节点数，集群将自动按负载调整Task节点的数量，实现资源利用最大化。产品文档 添加托管弹性伸缩规则
本章节展示如何将BI工具与大数据平台集成，构建高效的数据可视化解决方案。使用Power BI连接EMR Serverless Spark并进行数据可视化