业务要求与挑战 新榜原方案采用Elasticsearch（点查、多维检索）、在线分析库（分析）和离线处理库架构，存储作品、创作者等多维度数据，处理多维度关联和聚合查询，承载大量实时内容同步和每日大量数据的更新。在使用原方案的过程中，业务...
选择引擎类型 云原生多模数据库 Lindorm 支持多种引擎类型，兼容多种开源标准接口，同时提供SQL查询、时序处理、文本检索分析等能力。由于不同引擎类型适用不同的业务场景，您可以根据业务场景需求选择一种或多种引擎类型，具体介绍，请...
开源大数据平台E-MapReduce（Elastic MapReduce）是运行在阿里云平台上的一种大数据处理的系统解决方案。
本次测试对开源自建HBase与 云原生多模数据库 Lindorm 进行了多个场景的性能对比。环境配置 网络类型为专有网络。压测客户端、Lindorm实例与自建HBase实例处于同一可用区。开源自建HBase使用社区1.4.9版本。Lindorm宽表引擎为2.5.3.7版本。...
本文介绍 云数据库 Tair（兼容 Redis）的生命周期策略，帮助您了解 云数据库 Tair（兼容 Redis）在不同生命周期阶段的变化、对业务的影响及产品的整体演进规划，方便您有计划地更新或升级版本，以规避额外风险。背景信息 随着Redis开源社区...
本文介绍 云原生多模数据库 Lindorm 的产品概要。前置概念 阅读本文前，您可能需要了解如下概念：什么是分布式计算？什么是云原生？什么是云数据库？什么是物联网（IoT）？什么是SQL？什么是云原生多模数据库Lindorm 云原生多模数据库 ...
PolarDB PostgreSQL轻量版 支持采集核心组件（数据库、代理）及主机监控信息，且内部集成Prometheus和Grafana。功能介绍 支持采集核心组件（数据库、代理）及主机的监控信息。内部集成的 Prometheus 用于存储监控数据，并提供Grafana可视化...
云数据库HBase增强版全文索引服务支持多语言访问，并且完全兼容开源Apache Solr API，本文介绍如何使用Solr Java API访问云数据库HBase增强版全文索引服务。使用Solr Java API访问云数据库HBase增强版全文索引服务的操作和使用Solr Java ...
本文主要介绍查询 云数据库 Tair（兼容 Redis）中大Key的方法。Redis开源版 提供了List、Hash、Zset等复杂类型的数据结构，在使用 Redis开源版 时可能由于Key设计不合理而导致某个Key过大。Redis开源版 作为简单的单线程模型，在获取或删除...
相关文档 若数据较少且为非生产数据，您也可以使用 RedisShake 开源工具，将RDB中的数据迁移至 云数据库 Tair（兼容 Redis）实例，更多信息请参见 RedisShake RDB Reader。如需将 AOF文件 迁移至 云数据库 Tair（兼容 Redis）实例，请参见 ...
本文旨在介绍如何购买实例、创建账号、设置白名单、导入数据、...查询和分析图 连接图数据库GDB实例后，您可以通过数据管理DMS或GDB开源可视化控制台GDB Console对创建好的图数据库进行查询和分析。查询和分析图的操作，请参见 查询和分析图。
对比项 DTS数据迁移 DTS数据同步 适用场景 主要用于迁移数据上云，例如将本地数据库、ECS上的自建数据库或第三方云数据库迁移至阿里云 Tair 实例。主要用于两个 Tair 实例之间的数据实时同步，例如从实例A同步至实例B。可用于异地多活、...
图数据库GDB非常适合社交网络、欺诈检测、推荐引擎、知识图谱、网络/IT运营这类高度互连数据集的场景。例如，在一个典型的社交网络中，常常会存在“谁认识谁，上过什么学校，常住什么地方，喜欢什么餐馆”之类的查询，传统关系型数据库对于...
时间序列数据库TSDB以其强大的功能和兼容性，对于当前的一些开源解决方案实现了较好的适配。以下是TSDB与一些开源组件或开源项目对接的方法。Grafana如何对接TSDB Quick BI如何接入TSDB
Lindorm 是一款适用于任何规模、多种模型的云原生数据库服务，支持海量数据的低成本存储处理和弹性按需付费，提供宽表、时序、搜索、文件等多种数据模型，兼容HBase、Cassandra、Phoenix、OpenTSDB、Solr、SQL等多种开源标准接口，...
Sqoop是一款Apache社区的开源软件，支持在Hadoop生态软件和结构化数据集（例如数据库）之间进行高效的批量数据传输。背景信息 常见数据传输场景如下：将MySQL数据导入HDFS 将HDFS数据导入MySQL 将Hive数据导入MySQL 将MySQL数据导入Hive 将...
使用Superset访问Hive数据库 Superset提供了SQLAlchemy以多种语言支持各种各样的数据库，包括MySQL、Oracle、PostgreSQL和Microsoft SQL Server等关系型数据库，以及Hive、Presto和Druid等大数据查询引擎。这里以E-MapReduce Hadoop集群...
PolarDB PostgreSQL版 高度兼容Apache AGE的图引擎，支持对知识图谱的存储和查询检索，让您能够在同一个数据库集群上同时使用标准的ANSI SQL和图查询语言openCypher进行查询。使用场景 图数据库常用于下列场景：欺诈检测。主数据管理。产品...
在 云数据库 Tair（兼容 Redis）中，您可以创建不同版本的 Redis开源版 实例，本文介绍 Redis开源版 各版本的新特性与兼容性变更。说明 每部分包括社区和阿里云提供的特性及兼容性变更，您也可以参考 Tair 团队与社区共建的 Redis大版本...
支持的源库 支持的目标库 支持的架构 支持的迁移类型 自建Redis 7.2及以下版本 Redis开源版 4.0、5.0、6.0、7.0版本 Tair（企业版）Redis开源版 4.0、5.0、6.0、7.0版本 Tair（企业版）标准架构 集群架构 读写分离架构 全量数据迁移 增量...
同步支持度 支持的源库 支持的目标库 支持的架构 支持的同步拓扑 自建Redis 7.2及以下版本 Redis开源版 4.0、5.0、6.0、7.0版本 Tair（企业版）Redis开源版 4.0、5.0、6.0、7.0版本 Tair（企业版）标准架构 集群架构 读写分离架构 单向同步...
列存只读实例 开源与多云 PolarDB-X 在2021年11月份正式全内核开源，通过定期同步商业版本到开源版本（大约3~6个月），从而持续保持开源版本的迭代和功能对齐。在开源生态中，PolarDB-X 提供了配套的轻量化管控、生态工具的适配，可以基于...
GraphRAG：基于PolarDB+通义千问+LangChain的知识图谱+大模型最佳实践 PolarDB基于Mem0框架，整合了向量数据库引擎与图数据库引擎，使得AI Agent能够在跨会话中持久化存储与检索用户的偏好与历史，从而实现真正的长期记忆智能体验。...
说明 本文部分内容来源于开源StarRocks的 什么是StarRocks。StarRocks特性 StarRocks的架构设计融合了MPP数据库，以及分布式系统的设计思想，其特性如下所示。架构精简 StarRocks内部通过MPP计算框架完成SQL的具体执行工作。MPP框架能够...
Babelfish连接地址 基于Babelfish for PostgreSQL的开源项目，阿里云RDS PostgreSQL实例购买时开启Babelfish选项后，可以同时获得Microsoft SQL Server和PostgreSQL两种数据库引擎数据查询和处理的能力。可以通过TDS端口，从SQL Server客户...
在EMR集群中，为了确保集群安全，Hadoop、Spark和Flink等开源组件的Web界面端口均未对外开放。如果您想直接访问开源组件的Web界面，可根据实际场景选择 原生UI地址、Knox代理地址、SSH本地端口转发 或 SSH动态端口转发 方式进行访问。快速...
OpenLDAP是LDAP协议（Lightweight Directory Access Protocol）的开源实现，在EMR集群中主要提供用户管理和身份认证的功能。服务集成OpenLDAP 在EMR集群中，Knox服务默认与OpenLDAP服务对接。当您通过EMR控制台的 访问链接与端口 功能访问...
为了更好地融入开源生态，提供更加开放和多样化的计算服务，阿里云E-MapReduce（简称EMR）从EMR-5.17.0和EMR-3.51.0版本开始，将Flink引擎版本从Flink企业版Ververica Runtime（简称VVR）调整为Flink社区开源版本，同时引入RocksDB作为存储...
Babelfish for RDS PostgreSQL：基于Babelfish for PostgreSQL的开源项目，阿里云RDS PostgreSQL实例购买时开启Babelfish选项后，可以同时获得Microsoft SQL Server和PostgreSQL两种数据库引擎数据查询和处理的能力，从而使RDS PostgreSQL...
EMR Studio是E-MapReduce提供的开源大数据开发套件，包含Apache Zeppelin、Jupyter Notebook和Apache Airflow等开源组件。能够无缝关联EMR集群（EMR on ECS和EMR on ACK）的计算引擎提交任务，并提供了交互式开发、任务调度和任务监控等...
uDig是一款开源的桌面GIS应用和开发框架，可以进行空间数据（如shp地图文件）的编辑和查看，支持OpenGIS标准，对互联网GIS、网络地图服务器和网络功能服务器有特别的加强。uDig提供了一个通用的Java平台来利用开源组件建设空间应用程序。...
（可选）查看与选择数据库。查看Catalog中的数据库。SHOW DATABASES;您也可以指定默认目录。SHOW DATABASES FROM default_catalog;切换当前会话的Catalog和数据库。SET CATALOG catalog_name;USE db_name;您也可以直接使用 USE 来切换。USE...
uDig是一款开源的桌面GIS应用和开发框架，可以进行空间数据（如shp地图文件）的编辑和查看，支持OpenGIS标准，对互联网GIS、网络地图服务器和网络功能服务器有特别的加强。uDig提供了一个通用的Java平台来利用开源组件建设空间应用程序。...
uDig是一款开源的桌面GIS应用和开发框架，可以进行空间数据（如shp地图文件）的编辑和查看，支持OpenGIS标准，对互联网GIS、网络地图服务器和网络功能服务器有特别的加强。uDig提供了一个通用的Java平台来利用开源组件建设空间应用程序。...
与自建Hadoop集群相比，开源大数据开发平台EMR提供弹性资源管理和自动化运维，降低运维复杂度，通过用户管理、数据加密和权限管理等为数据安全保驾护航，同时EMR集成了丰富的开源组件并打通开源生态与阿里云生态，便于快速搭建大数据处理和...
架构 Spark架构如下图所示，基于Spark Core构建了Spark SQL、Spark Streaming、MLlib和Graphx四个主要编程库，分别用于离线ETL（Extract-Transform-Load）、在线数据分析、流计算、机器学习和图计算等场景，详情请参见 Apache Spark官网。...
EMR Studio上的Zeppelin与开源版本一致吗？如何设置Zeppelin Note的权限？Zeppelin执行时无法正常启动Interpreter EMR Studio上的Zeppelin与开源版本一致吗？EMR Studio上的Zeppelin是增强版的Zeppelin，与开源版本不一致。E-MapReduce的...
通过DolphinScheduler提交Spark任务 通过Serverless Spark提交PySpark流任务 通过spark-submit提交任务 通过Apache Airflow提交任务 通过Jupyter Notebook与Serverless Spark进行交互 在PySpark程序中使用Python第三方库 在Notebook中使用...
本文介绍如何通过Hive在E-MapReduce集群上创建库和表等操作。前提条件 已创建集群，且选择了Hive服务，详情请参见 创建集群。进入Hive命令行 使用SSH方式登录集群，详情请参见 登录集群。执行以下命令，切换为hadoop用户。su-hadoop 执行...
（可选）查看与选择 Catalog 及数据库。查看集群中的所有Catalog。SHOW CATALOGS;查看Catalog中的数据库。SHOW DATABASES FROM catalog_name;切换当前会话的Catalog和数据库。USE catalog_name.db_name;查询外部数据。SELECT*FROM table_...