大数据技术与应用

_相关内容

常见问题

数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段,扫描MaxCompute、OSS、阿里云数据库服务(RDS、PolarDB-X、PolarDB、OceanBase、表格存储等)和自建数据库中的数据,通过敏感数据规则,判断和打标敏感数据,为数据安全审计、...

基本概念

DTS 数据传输服务(Data Transmission Service,简称DTS)支持关系型数据库(RDBMS)、非关系型数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,帮助您构建安全、可扩展、高可用的...

概述

问答机器人,通过与大模型结合搭建高效的问答机器人服务。文件去重,通过文件指纹特征来去除重复文件。优势 云原生数据仓库AnalyticDB PostgreSQL版 向量数据库通过自研向量引擎FastANN提供的向量分析能力目前已经在诸多业务中得到了广泛...

自动弹性扩缩容

关联应用实例数 以关联应用运行实例数当前应用运行实例数的比值,作为弹性指标数据,要求应用位于同一集群。适用于具有依赖关系的应用,例如微服务应用。Prometheus:分为 内置Prometheus 和 自定义Prometheus。内置Prometheus:托管ACK...

应用场景

阿里云开源大数据平台E-MapReduce(简称EMR)具有广泛的应用场景。本文为您介绍EMR的主要应用场景。数据湖场景 DataLake集群类型提供了数据湖分析场景所需的服务和相关湖格式,包括Hadoop、OSS-HDFS、Hive、Spark、Presto等。通过选择OSS-...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

分析外部OSS上的数据

本文介绍了使用列存索引功能查询OSS上的外表数据技术原理和使用方法等内容。背景信息 业务存续期间,随着时间的推移,数据的规模不断增加导致存储成本上升。用户在应对激烈的市场竞争时,业务逻辑也在不断地发生变化,对应计算分析的复杂...

什么是云原生应用组装平台BizWorks

提供了业务建模、微服务开发、轻应用组装、能力开放等平台功能,致力于帮助企业快速设计、构建、组装和运营可复用的业务能力组件和应用,提升业务与技术协同能力,助力企业高效数字化创新。本文介绍BizWorks的产品背景、核心优势、功能特性...

使用ARMS应用监控数据指标绘制自定义的Grafana大盘

阿里云 可观测可视化 Grafana 版 支持一键集成ARMS应用监控数据源和大盘,如果您需要使用ARMS应用监控数据指标绘制自定义大盘,只需要创建一个Grafana工作区,一键集成ARMS应用监控数据源后,即可根据实际场景重新绘制Grafana大盘。...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

文档修订记录

QueryPublicModelEngine 2023.10.20 新增功能 上传下载 DataWorks的上传下载模块,提供了便捷的数据上传功能,支持将多种来源(例如,本地文件、OSS文件)的数据上传至MaxCompute大数据引擎中进行分析处理及相关管理操作,致力于为您...

什么是云原生内存数据库Tair

从服务淘宝详情和验证码等业务的持久化系统TBStore,到初始服务于淘宝用户中心的TDBM等等,后端系统缓存技术经历了多个系统和阶段的演变积累,到2009年,这些系统、技术经验经过进一步的研发,融合成了阿里巴巴规模高速存储系统Tair。...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

合规&认证

价格,财务及营销规划,业务战略,客户信息,客户数据,研发,软件硬件,API应用数据接口,技术说明,设计,特殊公式,特殊算法等),无论上述信息和资料以何种形式或载于何种载体,无论披露方在披露时是否以口头、图像或书面等方式表明其...

什么是数据库审计

数据库审计服务将数据库监控、审计技术与公共云环境相结合,针对数据库SQL注入、风险操作等数据库风险行为进行记录与告警,形成对核心数据的安全防护,为您的云端数据库提供完善的安全诊断、维护、管理功能。数据库审计服务符合等级保护...

在SAE控制台使用WAR包部署Java Web应用

操作 相关文档 更新、扩缩容、启停、删除应用等生命周期管理的操作 管理应用生命周期 自动弹性伸缩、CLB绑定和批量启停等提升应用性能的操作 配置弹性伸缩策略 为应用绑定CLB 一键启停应用 配置管理概述 变更实例规格 日志管理、监控管理、...

产品优势

本文介绍 云原生多模数据库 Lindorm 其他开源数据库的区别。背景信息 云原生多模数据库 Lindorm 兼容HBase、Cassandra、S3、TSDB、HDFS、Solr等多种标准接口,支持宽表、时序、对象、文本、队列、空间等多种数据模型,适用于日志、账单、...

技术架构

其最核心的竞争力不仅体现在性能和扩展性方面,更深层次的则是在面临有许多挑战性的PolarDB客户业务需求和规模化的公有云研发运维过程中而长期积累形成的一系列高可靠、高可用、与数据库协同设计的存储技术。PolarDB PostgreSQL版(兼容...

创建数仓分层

DataWorks的数仓分层功能,默认为您创建了 数据引入层ODS(Operational Data Store)、公共维度层DIM(Dimension)、明细数据层DWD(Data Warehouse Detail)、汇总数据层DWS(Data Warehouse Summary)及 应用数据层ADS(Application Data...

应用列表

应用列表 页面显示了所有应用的名称、技术栈、探针类型、提供服务请求数、提供服务错误数、提供服务响应时间Trace质量分数。说明 请求类型包含了除user_method外其他提供服务调用支持的类型,提供服务调用支持的类型请参见 提供服务。...

高压缩引擎(X-Engine)介绍

挑战和诉求:历史数据归档 历史数据归档的挑战 部分业务数据的读写特征,都是最新产生的数据会被更频繁地读取或更新,而更久之前的数据(如1年前的聊天记录或订单信息)很少被访问。随着业务发展,数据库系统中会积累大量访问频率很低...

X-Engine简介

这个技术属首次将硬件加速技术应用到在线事务处理数据库存储引擎中,相关论文《FPGA-Accelerated Compactions for LSM-based Key Value Store》已经被2020年的 FAST'20 国际会议接收。通过数据复用技术减少数据合并代价,同时减少缓存淘汰...

数据归档备份恢复

本文介绍了冷数据归档备份恢复的技术原理、费用和设置方法。数据是企业的核心资产。随着业务发展,企业数据呈现出规模化、爆炸式的增长,业务应用要求实时、在线的快速处理。对于数据库运维人员来说,保护企业核心数据的任务越来越具有...

概述

存储格式 数据来源及特点 数据量增大或减少 详细数据量 JSON 大量应用产生JSON类型的数据,冗余数据。增大151.7%3.02GB AVRO Hadoop生态格式的数据数据部分遗留系统产生。增大8.3%1.3GB RCFile Hadoop生态格式的数据数据...

在SAE控制台使用JAR文件部署微服务应用

操作 相关文档 更新、扩缩容、启停、删除应用等生命周期管理的操作 管理应用生命周期 自动弹性伸缩、CLB绑定和批量启停等提升应用性能的操作 配置弹性伸缩策略 为应用绑定CLB 一键启停应用 配置管理概述 变更实例规格 日志管理、监控管理、...

基本概念

地理系统 TwinFabric数字孪生系统支持常见的地理信息系统数据源接入,满足实景三维中国建设技术大纲中部分地形级实景三维、城市级实景三维、部件级实景三维数据源的接入,支持基于球面、平面三维场景搭建地理信息多源数据的融合开发。...

应用采集

先部署Collector,后部署应用Agent,应用Collector网络可达(用于推送数据做集中脱敏等处理),部署Collector的机器需要JDK 1.6+版本,JVM内存4G以上。磁盘监控的应用数量、监控时长、业务活跃度、SQL数量及SQL大小有关,不会出现...

功能特性

功能集 功能 功能描述 参考文档 安全 备份恢复 MaxCompute提供数据备份恢复功能,系统会自动备份数据的历史版本(例如被删除或修改前的数据)并保留一定时间,可以对保留周期内的数据进行快速恢复,避免因误操作丢失数据。备份恢复 ...

应用场景

本文档主要为您说明阿里云数据库存储DBFS的主要应用场景。云上自建数据库 DBFS为数据库场景量身打造的特性,非常适合云上用户自建数据库(例如:MySQL,PostgreSQL等),实现存储计算分离:对比项 DBFS 本地盘 极致性能 帮助用户实现数据库...

技术架构

架构演进理念 当前,分布式领域有3大技术方向:Sharding技术,NewSQL原生分布式技术,云原生DB技术。每种分布式都有其独特的优势和特点。PolarDB-X 的架构继承了DRDS和X-DB技术的稳定性,结合了PolarDB的云原生技术,融入了NewSQL对于分布...

调用链采样配置最佳实践

1、2、3、4作为整个应用拓扑中的下游应用,其被采样的链路数据部分都由其上游决定,所以从成本控制的角度考虑,通过调整应用A和B的采样率可较为明显的控制整体的可观测数据采集量。另外从链路价值角度来看,绝部分调用链都是重复且...

Doris概述

Apache Doris是一个高性能、实时的分析型数据库,能够较好的满足报表分析、即席查询、数据湖联邦查询加速等使用场景。本文为您介绍Apache Doris。背景信息 关于更多Apache Doris信息,详情请参见 Doris介绍。使用场景 数据源经过各种数据...

DB2数据

DB2数据源作为数据中枢,为您提供读取和写入DB2数据库的双向通道,能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DB2数据同步的能力支持情况。支持的版本 DB2 Reader和DB2 Writer使用的DB2驱动版本为 IBM Data Server Driver ...

功能特性

安全性 OceanBase 数据库在调研了大量企业对于数据库软件的安全需求,并参考了各种安全标准之后,实现了企业需要的绝部分安全功能,支持完备的权限角色体系,支持 SSL、数据透明加密、审计、Label Security、IP 白名单等功能,并通过了...

PolarDB Serverless实现了哪些突破

在国际数据库顶级会议2021 ACM SIGMOD上,一篇标题为《PolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers》的论文,介绍了阿里云自研数据库 PolarDB 基于计算存储分离,实现的最新Serverless技术架构研究进展。...

产品架构

数据格式方面,StarRocks存算分离的数据文件存算一体保持一致,并支持各种索引技术,其中元数据(例如TabletMeta)经过重新设计以更好地适应对象存储环境。缓存 为了优化查询性能,StarRocks构建了层级分明的数据缓存体系。热数据存放...

应用场景

数据库备份DBS 提供数据全量备份、增量备份、异地备份以及数据恢复等功能,帮助您实现多种典型应用场景。典型场景 应用场景 相关操作文档 备份安全 跨阿里云账号备份恢复数据 通过公网地址实现数据库跨账号备份 备份集自动归档到备份服务器...

什么是PolarDB PostgreSQL企业版

秒级快速备份 不论多数据量,全库备份只需30秒,而且备份过程不会对数据库加锁,对应用程序几乎无影响,全天24小时均可进行备份。PolarDB定价 详情请参见 规格定价 和 购买PolarDB集群。如何使用PolarDB 您可以通过以下方式管理 ...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用