阿里云CLI 支持 阿里云命令行工具(Alibaba Cloud Command Line Interface)是在Alibaba Cloud SDK for Go之上构建的开源工具。阿里云CLI提供了对阿里云云产品OpenAPI的直接访问。您可以在命令行Shell中,使用 aliyun 命令与阿里云服务进行...
Spark Thrift Server会话:Spark Thrift Server是Apache Spark提供的一种服务,支持通过JDBC或ODBC连接并执行SQL查询,从而便捷地将Spark环境与现有的商业智能(BI)工具、数据可视化工具及其他数据分析工具集成。相关文档 管理SQL会话 ...
Flink社区已提供了丰富的开源Connector,旧版Flink VVR中的各类自研Connector将停止功能更新。您可以通过使用开源Connector便捷地对接各种数据源和下游系统。说明 EMR-5.17.0、EMR-3.51.0版本开始使用Apache Flink 1.17.2版本,版本说明请...
支持的开源组件有限。说明 该方式目前支持的服务如下:YARN、HDFS、SPARK2、SPARK3、FLINK、HBASE、IMPALA、TRINO、PRESTO、TEZ、RANGER。【外网访问】优点:开启端口少,只需开启Knox的端口8443。提供外部访问的能力,适合需要远程访问的...
DataFlow集群的Flink DataStream API完全兼容开源的Flink版本,关于Flink DataStream API的详细信息,请参见 Flink DataStream API Programming Guide。上下游存储(Connector)EMR-5.17.0&3.51.0及之后版本 开源Flink的上下游存储,详情请...
开源大数据开发平台E-MapReduce(简称EMR)是运行在阿里云平台上的一种大数据处理系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark,让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云...
阿里云E-MapReduce(简称EMR)是云原生开源大数据平台,能够为用户提供简单易集成的开源大数据解决方案。EMR on ECS集群主要构建于ECS之上,集群资源归属于用户,EMR提供基于该资源的半托管云服务能力,用户对集群拥有完全的管理操作权限,...
EMR Studio是E-MapReduce提供的开源大数据开发套件,包含Apache Zeppelin、Jupyter Notebook和Apache Airflow等开源组件。能够无缝关联EMR集群(EMR on ECS和EMR on ACK)的计算引擎提交任务,并提供了交互式开发、任务调度和任务监控等...
本章节提供基础工具的操作指南,帮助用户高效完成数据存储、管理和运维相关任务。在Notebook中使用Hadoop命令操作OSS/OSS-HDFS
与自建Hadoop集群相比,开源大数据开发平台EMR提供弹性资源管理和自动化运维,降低运维复杂度,通过用户管理、数据加密和权限管理等为数据安全保驾护航,同时EMR集成了丰富的开源组件并打通开源生态与阿里云生态,便于快速搭建大数据处理和...
Trino(即原PrestoSQL)是一个开源的分布式SQL查询引擎,适用于交互式分析查询。EMR-3.44.0和EMR-5.10.0版本开始改用社区正式名称Trino,之前各版本控制台显示为Presto,内核其实是Trino,使用时请注意区分。基本特性 Trino使用Java语言...
Alluxio是一个面向基于云的数据分析和人工智能的开源的数据编排技术。Alluxio为数据驱动型应用和存储系统构建了桥梁,将数据从存储层移动到距离数据驱动型应用更近的位置,从而能够更容易被访问,同时使得应用程序能够通过一个公共接口连接...
Presto(即PrestoDB)是一款灵活、可扩展的分布式SQL查询引擎。本文介绍Presto的基本特性、系统组成和优势等信息。...例如,如果您的Presto版本号为0.279,则可以访问https://prestodb.io/docs/0.279/,查看相应版本的开源Presto文档。
Quick BI 智能小Q是Quick BI集成多种大模型和Agent能力的增值服务模块,通过一系列AI功能如 小Q问数Agent、小Q解读Agent、小Q报告Agent、小Q搭建Agent 革新了整个BI的数据分析链路,帮助用户实现数据分析的智能化与个性化。用户能够通过...
如果您在使用智能分析套件Quick BI的过程中有任何疑问或建议,您可以通过不同渠道联系到我们。售前咨询 在购买阿里云产品前,可通过以下渠道了解或咨询产品信息:拨打阿里云售前电话:400-801-3260,根据电话提示转到售前人工服务。登录 ...
背景信息 EMR Kudu支持社区1.10以及1.11版本,可以使用社区提供的Backup和Restore的工具进行数据的迁移。基本流程示意图如下所示。操作步骤 执行以下命令,查看待迁移Kudu表的名称列表。Kudu table list {YourKuduMasterAddress} 说明 本文...
介绍EMR Serverless Spark的免费公测说明。免费公测时间说明 EMR Serverless Spark免费公测已于2024年04月25日开启,预计于2024年09月13日结束。公测阶段面向所有用户开放,您可以免费试用。免费试用结束后,产品将正常计费。免费公测限制 ...
发布日期 2025年12月23日 重点升级概览 智能小Q 小Q解读 仪表板解读组件新增快捷模板配置,优化解读结果正文的样式展示,并支持组件图标的自定义替换。仪表板小Q解读结果样式美化,支持红升绿降语义色样式。小Q报告 小Q报告编辑页的预览...
线柱图工具提示支持展示总计/占比&支持控制移动端的工具提示是否展示。散点图、气泡图、气泡地图、飞线地图数据标签位置优化。饼环图系列图表支持长按下钻。交叉表的可勾选维度数量支持自定义。仪表板能力提升 仪表板支持组件级评论。跳转...
使用Beeline连接Kyuubi 您可以用Hive Beeline或者Kyuubi Beeline工具(EMR集群上的工具名称为 kyuubi-beeline)连接Kyuubi Server。以下示例使用Kyuubi Beeline工具连接Kyuubi。普通集群 方式一:使用Zookeeper连接Kyuubi服务(推荐)...
发布日期 2025年6月10日 重点升级概览 智能小Q 智能问数 智能问数采用多步流式分屏呈现,分析过程、结果分别表达更清晰。新增 Python 结果数据的可交互式呈现。知识库新增正则匹配和数据集选择两类知识。归因分析能力增强,新增分指标分别...
SmartData组件主要包括JindoFS,JindoTable和相关工具集。本文介绍SmartData(3.0.x)版本的更新内容。JindoFS存储优化 改进Jindo Namespace服务单机配置,单机情况下也可以更新并异步写入元数据至Tablestore。移除Jindo Namespace服务的...
开源大数据平台E-MapReduce(简称EMR)的ClickHouse提供了开源OLAP分析引擎ClickHouse的云上托管服务。EMR ClickHouse完全兼容开源版本的产品特性,同时提供集群快速部署、集群管理、扩容、缩容和监控告警等云上产品功能,并且在开源的基础...
Hadoop DistCp(分布式复制)是一个用于大型集群间或集群内数据复制的工具,通过MapReduce实现复制过程中数据的分发、错误处理、恢复及报告。本文为您介绍Hadoop DistCp与Jindo DistCp的区别、Hadoop DistCp使用方法以及常见问题。说明 ...
Quick BI 作为分析 Agent 产品,通过中国信通院“大模型驱动的智能分析工具”和“商务智能(BI)分析工具基础能力”专项评测。中国信通院 云计算与大数据研究所依托中国通信标准化协会大数据技术标准推进委员会(CCSA TC601),联合50余家企业...
本章节展示如何将BI工具与大数据平台集成,构建高效的数据可视化解决方案。使用Power BI连接EMR Serverless Spark并进行数据可视化
Quick BI接入智能小Q的企业级数据智能体模型,您可以使用智能体进行对话。本文为您介绍如何使用智能体。使用限制 我的智能体属于增值模块,需要先购买智能问数模块后使用。仅高级版和专业版支持智能体,个人版不支持。嵌入和无线端场景,不...
仪表板的智能问答功能支持通过简单的自然语言,从指定的数据集中快速生成分析图表,并保存到仪表板中。本文为您介绍智能问答的使用方法。重要 仪表板内的智能问答_公测期结束,后续不再支持使用及订购;自24年4月1日起,新客户不再支持该...
在试用期间,您可免费使用一定额度的计算资源及标准存储空间,助力您体验StarRocks极速分析能力,快速验证业务需求。使用限制 该账号下不存在未支付订单。每个账号仅限一次免费试用资格。支持地域:仅限北京、杭州、上海、深圳。计算资源和...
移动端工具提示 PC端和移动端的工具提示开关相互独立,您可以通过仪表板编辑页面顶部的PC端/移动端切换按钮()进入移动端编辑视图,编辑移动端的工具提示。其中,字体大小支持PC端和移动端分别设置,其余的样式为统一配置。辅助展示 在 ...
EMR Serverless StarRocks兼容开源StarRocks的SQL语法和函数,您可以参考以下文档进行开发设计。StarRocks版本 参考文档 3.3系列 SQL参考 函数参考 3.2系列 SQL参考 函数参考 2.5系列 SQL参考 函数参考
作为大模型时代的全场景数据消费的BI产品,Quick BI 支持数据源的连接和数据集的创建,对数据进行即时分析与查询。通过电子表格或仪表板功能,以拖拽的方式进行数据的可视化呈现。还可以支持自然语言交互进行数据分析提问,快速生成报表与...
相较于原有解决方案,我们的解决方案运维更加简单,并且使用MySQL协议,可以对接各种BI工具,从而实现数据的快速分析和处理。实时数据分析场景解决方案 步骤如下:实时摄入:通过直接读取Kafka数据来实现。提供了Flink-Connector来支持...
Notebook 促进了数据分析师和数据工程师之间的协作,支持快速原型设计和实验,是探索数据、开发机器学习模型以及进行数据驱动决策的关键工具。EMR Serverless Spark支持通过Notebook进行交互式开发。本文带您快速体验Notebook的创建、运行...
由于ACK控制台上 访问链接与端口 不可用,您可通过以下配置访问开源组件的Web UI。登录 容器服务管理控制台。在 集群列表 页面,单击EMR on ACK所关联集群的 集群名称。鼠标悬浮在左边菜单栏 网络,单击 服务,在服务页面更新YAML文件。...
EMR-3.27.x及之前版本使用Flink社区开源版本,EMR-3.27.x之后版本使用完全兼容开源Flink的企业版(VVR)。本文介绍如何配置Flink(VVR)类型的作业。背景信息 Flink企业版由Apache Flink创始团队官方出品,拥有全球统一商业化品牌。VVR提供...
E-MapReduce Doctor(简称EMR Doctor)是E-MapReduce产品自研的面向开源大数据集群的智能运维诊断系统。通过EMR Doctor(即 监控诊断 页面的“健康诊断”和“集群日报”功能)可以全局了解集群的健康状况和动态走势,为运维决策和资源优化...
EMR-5.11.0及之前版本,EMR-3.45.0及之前版本 重要 如果您的EMR版本较低,没有相应的LDAP认证配置按钮,则需要参考开源软件的社区文档进行手动配置,以启用LDAP认证功能。在 组件列表 区域,选择 SparkThriftServer 操作列的 enableLDAP。...
E-Mapreduce(简称EMR)开源组件运行过程中会产生大量的日志。日志管理功能将EMR与日志服务SLS相结合,允许您在EMR控制台直接查询开源组件的日志。前提条件 已在EMR控制台上创建集群,具体操作请参见 创建集群。已 开通日志服务。使用限制 ...
如果是本地的元数据库,您可以使用集群上的Hue工具来管理。E-MapReduce后台RDS统一管理元数据的方式,仅限小容量的用户使用。对于大容量场景,建议您自建RDS作为统一元数据。默认限制为:总容量:200MiB。小时query数量限制:720000/h。...