操作列由用量监控、通信记录、查询AppKey及更多功能组成，如下所示：功能 描述 用量监控 查询该应用下不同音视频规格的通信时长，具体操作，请参见 通信时长。通信记录 查询该应用下全链路通话数据（包含通信质量和频道数据），具体操作，...
Client 通过Client来访问文件系统，然后由Client与NameNode和DataNode进行通信。Client对外作为文件系统的接口，类似于POSIX。Blocks HDFS将文件拆分成128 MB大小的数据块进行存储，这些Block可能存储在不同的节点上。HDFS可以存储更大的...
关于阿里云EMR Serverless Spark产品和服务的相关问题，您可以通过以下渠道寻求支持和解决。...填写相关问题信息，产品分类 选择 开源大数据平台 E-MapReduce。单击 提交。售后服务SLA 售后服务SLA详情，请参见 企业支持计划 的内容。
本文为您介绍 开源大数据平台 E-MapReduce 为 RAM 权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce 的 RAM 代码（RamCode）为 emr-serverless-spark，支持的授权粒度为 操作级。权限策略...
统计分析功能可以查询指定AppID下的活跃用户、频道、并发频道峰值及并发通信峰值，方便您监控和分析应用的使用情况。通过阅读本文，您可以了解统计分析的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 统计分析，进入...
内置函数清单 Serverless Spark 兼容开源内置函数的使用，开源具体函数说明请参见 Spark SQL Functions。此外，Serverless Spark 还支持多个特有内置函数，以下是特有支持的内置函数及其相关说明。函数 说明 PARQUET_SCHEMA 获取Parquet...
E-Mapreduce（简称EMR）开源组件运行过程中会产生大量的日志。日志管理功能将EMR与日志服务SLS相结合，允许您在EMR控制台直接查询开源组件的日志。前提条件 已在EMR控制台上创建集群，具体操作请参见 创建集群。已 开通日志服务。使用限制 ...
EMR用户可以用于访问链接与端口，查看开源组件Web UI时的用户身份认证，也可以在开启组件LDAP认证之后进行身份认证。如果将Ranger的用户源设置为LDAP，则可以对用户管理中的用户进行权限控制。如果是高安全集群，EMR用户可以用于Kinit操作...
访问HDFS Web UI 您可以通过SSH隧道和控制台两种方式访问HDFS Web UI，具体操作请参见 通过SSH隧道方式访问开源组件Web UI 和 访问链接与端口。NameNode服务地址 版本 访问地址 说明 hadoop 3.x http://${namenode_hostname}:9870${...
产品优势如下：云原生极速计算引擎 内置Fusion Engine(Spark Native Engine)，相对开源版本性能提升300%。内置Celeborn（Remote Shuffle Service），支持PB级Shuffle数据，计算资源总成本最高下降30%。开放化的数据湖架构 支持计算存储分离...
统计分析功能可以查询指定AppID下的活跃用户、频道、并发频道峰值及并发通信峰值，方便您监控和分析应用的使用情况。通过阅读本文，您可以了解统计分析的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 统计分析，进入...
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括 JindoFS 存储系统（原JindoFS Block模式）...
EMR Serverless StarRocks介绍 EMR Serverless StarRocks是开源StarRocks在阿里云上的全托管服务，您可以通过其灵活地创建和管理实例以及数据。本文为您介绍StarRocks的核心特性，并详述EMR Serverless StarRocks在此基础之上所引入的诸多...
EMR Serverless StarRocks不仅无缝兼容开源StarRocks，并且具备自动升级软件版本的功能，可省去手动管理版本的繁琐与风险。迁移方案详情，请参见 迁移StarRocks数据至EMR Serverless StarRocks。操作步骤 重要 集群扩容操作不会重启存量...
观星台是阿里云音视频通信为开发者提供的通信质量监测平台，分为通信监测、用量统计、质量统计和异常诊断模块，通过提供全链路的质量监控，帮助您及时发现并定位问题，可以有效的降低业务运维成本，并提高产品的使用体验。应用场景 应用...
本文为您介绍 开源大数据平台 E-MapReduce 为 RAM 权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce 的 RAM 代码（RamCode）为 emr，支持的授权粒度为 资源级。权限策略通用结构 权限策略...
EMR Workflow介绍 EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行...
SIP，即会话发起协议，是现代音视频通信的核心信令协议。本文系统阐述了其核心概念、体系结构、工作原理与关键方法，是您构建与开发实时通信服务的权威技术指南。
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 SparkThriftServer 操作列的 enableLDAP。...
观星台是阿里云音视频通信为开发者提供的通信质量监测平台，分为通信监测、用量统计、质量统计和异常诊断模块，通过提供全链路的质量监控，帮助您及时发现并定位问题，可以有效的降低业务运维成本，并提高产品的使用体验。应用场景 应用...
自2019年12月25日起，音视频通信服务协议生效，详情请参见 音视频通信RTC服务协议。
阿里云作为通过该认证的云计算服务提供商，从数据安全、网络安全、通信安全及操作安全等多个方面证明了其在安全责任履行上的能力。ISO27017 ISO27017提供了一套与云服务相关的信息安全控制措施，包含与ISO/IEC 27002相关控制的额外实施指导...
SSL在传输层对网络连接进行加密，提供端点验证和数据加密，确保客户端与StarRocks实例之间的通信数据不会被未经授权的用户读取，从而增强数据的安全性与完整性。前提条件 已创建实例，详情请参见 创建实例。使用限制 仅3.3.8-1.94-1.7.12及...
阿里云作为通过该认证的云计算服务提供商，从数据安全、网络安全、通信安全及操作安全等多个方面证明了其在安全责任履行上的能力。ISO27017 ISO27017提供了一套与云服务相关的信息安全控制措施，包含与ISO/IEC 27002相关控制的额外实施指导...
阿里云作为通过该认证的云计算服务提供商，从数据安全、网络安全、通信安全及操作安全等多个方面证明了其在安全责任履行上的能力。ISO27017 ISO27017提供了一套与云服务相关的信息安全控制措施，包含与ISO/IEC 27002相关控制的额外实施指导...
同时，它100%兼容开源Spark生态，能够无缝集成到客户现有的数据平台。通过使用EMR Serverless Spark，企业可以更加专注于数据处理分析及模型训练的优化，从而提升工作效率。前置概念 阅读本文前，您可能需要了解如下概念：什么是云原生？...
应用程序可以通过统一命名空间和接口来访问多个独立的存储系统，从而实现只连接JindoFSx就可与不同的底层存储系统进行通信。前提条件 已在E-MapReduce上创建EMR-3.42.0及后续版本、EMR-5.6.0及后续版本的集群，具体操作请参见 创建集群。...
RTC SDK 提供了网络质量监控的功能，您可以在网络状况变化时通过回调获取网络质量，设置对应的音视频规格，以确保基础通信体验。通过阅读本文，您可以了解获取网络质量及设置音视频规格的方法。功能简介 在网络质量不理想的情况下，音视频...
本文描述开源大数据平台 E-MapReduce支持的所有系统权限策略及其对应的权限描述，供您授权RAM身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问...
表 5.RTC 3.0 应用通信监测 变更类型 API 描述 新增 DescribeCallList 分页查询时间范围内通信信息。新增 DescribeCall 查询单次通信详情。新增 DescribePubUserListBySubUser 订阅端获取通信中发布端用户列表。新增 ...
通信监测 API 描述 DescribeCallList 分页查询时间范围内创建的通信信息。DescribeCall 获取单次通信详情。DescribeQoeMetricData 获取单次通信中用户的下行体验质量指标。DescribePubUserListBySubUser 根据订阅端获取通信中发布端用户...
数据湖元数据DLF是阿里云提供的统一元数据服务，具有高可用、免运维和高性能等优点，兼容Hive Metastore，无缝对接EMR上开源计算引擎，并支持多版本管理和Data Profile功能。另外，DLF还支持数据探索、湖管理和数据权限控制等功能，并与...
Fusion引擎是EMR Serverless Spark内置的高性能向量化SQL执行引擎，相比开源Spark在TPC-DS基准测试上有3倍性能提升。Fusion引擎与开源Spark完全兼容，您无需对现有代码做任何修改。在EMR Serverless Spark中，只需在创建会话时开启 使用...
RTC SDK 提供了网络质量监控的功能，您可以在网络状况变化时通过回调获取网络质量，设置对应的音视频规格，以确保基础通信体验。通过阅读本文，您可以了解获取网络质量及设置音视频规格的方法。功能简介 在网络质量不理想的情况下，音视频...
操作步骤 登录 音视频通信RTC控制台。在左侧导航栏单击 应用管理，进入应用管理配置界面。单击 创建应用。在 音视频通信（按量付费）页面，选中 服务协议。选项 说明 服务类型 RTC服务类型默认为 通用服务。计费方式 RTC计费方式默认为 按...
阿里云E-MapReduce产品构建于阿里云云服务器ECS上，基于开源的Apache Hadoop和Apache Spark，做了大量优化。本文为您介绍E-MapReduce（简称EMR）Spark相对开源增强的功能。背景信息 阿里云EMR 100%采用社区开源组件，随开源版本升级迭代，...
Delta Lake是一个开源存储框架，旨在数据湖之上构建LakeHouse架构。Delta Lake提供了ACID事务支持、可扩展的元数据处理功能，并能够在现有的数据湖（如OSS、Amazon S3和HDFS）上整合流处理与批处理。此外，Delta Lake还支持多种引擎，如...
自2019年12月25日起，音视频通信服务协议生效，详情请参见 音视频通信RTC服务协议。
JindoSDK：为EMR各种开源计算引擎提供统一的SDK，支持Java、C、C++和Python语言，提供多种访问和API接口，包括HCFS文件系统接口、POSIX接口和Table表格接口。工具集：提供相关的工具集，例如Jindo tool和迁移工具Jindo DistCp。各种...