通过社会实践说明大数据的应用

_相关内容

时序引擎应用开发简介

使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 Lindorm时序引擎兼容相关接口,对于已有使用OpenTSDB或者时间序列数据库TSDB的应用程序,您可以按照以下步骤进行应用迁移:应用适配 修改应用程序中的连接字符串,连接的目标从原有的...

接入指南

通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报Node.js应用数据 通过...

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...

2023年

TimeTravel查询与Incremental查询 2023-06-26 新增近实时增量导入 新说明 数据流入Transactional Table 2.0主要存在近实时增量写入和批量写入两种场景,本文为您介绍高并发近实时增量写入场景的架构设计。近实时增量导入 2023-06-26 新增表...

最佳实践概览

轻量应用服务器提供了部分最佳实践,包括搭建环境、搭建网站、数据传输、迁移服务器以及高可用架构等。您可以根据实际需求,参考相应文档完成服务器的搭建。搭建环境 阿里云轻量应用服务器提供了多种镜像,您可以通过应用镜像快速部署应用...

上传数据

添加完成数据文件后,在跳转后的添加数据对话框,选择数据的分组、输入数据集的名称、选择数据的类型和数据的服务地址,单击对话框右下角的 创建数据集 即可完成三维瓦片数据的添加。说明数据量较时解析时间会比较长,您可以先关闭弹...

上传数据

添加完成数据文件后,在跳转后的添加数据对话框,选择数据的分组、输入数据集的名称、选择数据的类型和数据的服务地址,单击对话框右下角的 创建数据集 即可完成三维瓦片数据的添加。说明数据量较时解析时间会比较长,您可以先关闭弹...

上游应用

对于某个应用而言,上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况,包括响应时间、请求数、错误数等信息。前提条件 接入应用监控 功能入口 登录 ARMS控制台,在左侧导航栏选择 应用监控>应用列表。在 应用列表 页面...

准备工作概述

OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...

概述

AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征,并利用特征向量作为非结构化数据的唯一标识,帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中,绝多数的数据都...

简介

DMS数据分析与应用介绍 DMS通过Data Fabric+模型构建数据管理底座,赋能数据分析与应用。该场景下核心的四个功能如下:安全托管:DMS在阿里集团数据库权限访问控制最佳实践,为企业提供一系列数据库权限管控的集合,可帮助企业实现多云...

概述

网络及数据安全最佳实践 从网络架构和数据安全等方面进行全面检测,以确保系统和数据进行了合理的设置和保护,有效减少网络和数据泄漏的风险。满足这些要求,可以幅度降低网络安全风险。网络及数据安全最佳实践支持的功能如下表所示。...

流式ETL

说明文档 配置文档 通过DAG模式配置ETL任务 配置流程通过DAG模式配置ETL任务 配置源库信息 配置转换组件 配置目标库信息 新建连接模板 通过Flink SQL模式配置ETL任务 在DTS迁移或同步任务中配置ETL 最佳实践 使用ETL分析实时订单 DTS任务中...

什么是ETL

说明文档 配置文档 通过DAG模式配置ETL任务 配置流程 配置源库信息 配置转换组件 配置目标库信息 新建连接模板 通过Flink SQL模式配置ETL任务 在DTS迁移或同步任务中配置ETL 最佳实践 使用ETL分析实时订单 DTS任务中配置ETL典型应用

将MySQL数据迁移到Redis

将业务中的热数据保存到Redis,用户通过应用直接从Redis中快速获取常用数据,或者在交互式应用中使用Redis保存活跃用户的会话,都可以极地降低后端关系型数据库的负载,提升用户体验。使用Redis作为缓存首先需要将关系型数据库中的数据...

2024年

2024年05月 模块 功能名称 变更类型 功能描述 相关文档 应用监控 基础指标监控 优化 面向虚拟机或容器部署的应用提供准确的指标数据,提高指标准确率和告警准确性。实例监控 指标收敛 新增 应用接口、外部依赖、数据库对应的监控指标支持...

ETL工作流快速体验

案例提供的数据仅用于阿里云数据开发治理平台DataWorks数据应用体验。仅 空间管理员 角色可导入ETL模板至目标工作空间。如需给账号授予空间管理员角色,请参见 空间级模块权限管控。导入ETL工作流模板 您可以将DataWorks ETL工作流模板...

什么是应用安全

您无需修改应用代码,只需在实例中安装应用安全探针,即可为应用提供强大的安全防护能力,并抵御绝部分未知漏洞所利用的攻击手法。前置概念 阅读本文前,您可能需要了解如下概念:什么是CPU?什么是DNS?什么是SQL?背景信息 ARMS应用...

购买组合套餐(服务器+负载均衡)

快速配置应用 如果您选择阿里云提供的应用镜像创建了服务器,可以通过控制台快速配置应用。具体操作,请参见 管理应用(适用于应用镜像)。搭建网站 如果您选择阿里云提供的系统镜像创建了服务器,您需要自行搭建开发环境或者部署应用程序...

通过Jaeger上报.NET应用数据

说明 语言 列显示 图标的应用为接入应用监控的应用,显示-图标的应用为接入可观测链路 OpenTelemetry 版的应用。NET Core 3.1埋点 Demo源码的运行版本要求:Jaeger:1.0.2版本.NET:3.1版本 通过NetCore组件自动埋点 在项目的 dotnet-demo/...

简介

概述 GanosBase(简称Ganos)是阿里云自主研发的新一代时空数据库引擎,它将时空数据处理能力融入了云原生关系型数据库PolarDB、云原生多模数据库Lindorm、云原生数据仓库AnalyticDB和云数据库RDS等主要产品中,为数据库构建了面向新型时空...

简介

概述 GanosBase(简称Ganos)是阿里云自主研发的新一代时空数据库引擎,它将时空数据处理能力融入了云原生关系型数据库PolarDB、云原生多模数据库Lindorm、云原生数据仓库AnalyticDB和云数据库RDS等主要产品中,为数据库构建了面向新型时空...

调用链采样配置最佳实践

常用采样方案介绍 通过大量实践发现,无论从计算、存储资源成本消耗上进行分析,还是从具体使用场景角度评估,都不一定需要收集所有埋点数据。因此,分布式链路追踪系统支持按照一定策略上报数据,取得成本与收益之间的平衡,提高投入产出...

2020年

说明 您可以通过LOAD命令从外部存储导入数据,向表或表的分区中追加数据、覆盖重写数据。LOAD 2020-03-16 新增内建函数 MUMERIC_HISTOGRAM、PERCENTILE_APPROX 和 PERCENTILE_APPROX。新说明 MUMERIC_HISTOGRAM:统计指定列的近似直方图...

强弱依赖治理概述

随着分布式微服务的发展,系统正在变得越来越复杂,一个普通的应用也可能依赖了很多其他的服务。在没有明确强弱依赖关系的前提下,系统很难进行限流降级、优化改造等操作。强弱依赖治理就是通过科学的手段持续稳定地得到应用间依赖关系、...

内存型

最佳实践:TairVector混合检索实践 基于Tair Vector实现图文多模态检索 基于Tair Vector实现分子结构近似检索 基于Tair与LLM构建企业专属Chatbot 企业级特性 企业级特性 说明 通过数据闪回按时间点恢复数据 开启 Tair 的数据闪回功能后,...

什么是Dataphin

Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出,一站式提供数据采、建、管、用全生命周期的大数据能力,以助力企业显著提升数据治理水平,构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...

什么是云原生应用组装平台BizWorks

云原生应用组装平台BizWorks是基于组装式理念和阿里巴巴中台实践构建的一体化云原生应用开发和组装平台,提供了业务建模、微服务开发、轻应用组装、能力开放等平台功能,致力于帮助企业快速设计、构建、组装和运营可复用的业务能力组件和...

一致性级别

主节点的数据更新后,相关的更新会应用到只读节点,具体的延迟时间与写入压力有关(一般在毫秒级别),通过异步复制的方式确保了主节点和只读节点间数据的最终一致。PolarDB 提供了如下两种一致性级别,满足您在不同场景下对一致性级别的...

如何优化数据全量抽取

本文介绍了在应用通过代码高效抽取数据的方法。简介 数据抽取是指通过代码或者数据导出工具,从 PolarDB-X 中批量读取数据的操作。主要包括以下场景:通过数据导出工具将数据全量抽取到下游系统。PolarDB-X 支持多种数据导出工具,更多...

DataWorks On EMR使用说明

费用 说明 数据库费用 数据同步时,读写上下游数据库中的数据时,可能会产生数据库费用。计算和存储费用 运行计算引擎任务时,可能会产生计算引擎的计算和存储费用。网络服务费用 连通DataWorks和其他相关产品的网络环境时,可能会产生网络...

需求分析

本实验提供数据仅作为阿里云数据开发治理平台DataWorks数据应用实操使用,所有数据均为人工Mock数据。本实验中,数据同步和数据加工部分的任务可以通过ETL工作流模板一键导入。在导入模板后,您可以前往目标空间进行操作,并自行完成后续...

应用场景

互联网类应用 Cassandra能够支持并发低延时的访问需求,具备高可用和弹性扩容能力,适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式,实现更好的可用性和容灾能力。云...

阶段一:基础防护建设

在该阶段,DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践,帮助企业做好数据安全治理的相关基础防护工作。场景一:数据分级分类 无论在任何行业,数据分级分类都是监管首要检查的...

同步数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

文档更新动态(2022年之前)

更新说明 数据源权限列表 2021年08月24日 新增Dataphin在VPC网络下的通用IP地址 为了提升网络连通配置的效率,Dataphin新增在VPC网络环境下各地域通用的IP地址,您可以将通用的IP地址添加至业务数据库的白名单中以实现网络打通。...

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

连接数据库

关于数据库的超时设置的推荐实践 若您的应用使用了一些常见的ORM框架(例如SpringBoot+MyBatis+JDBC Driver等)来访问数据库,这些ORM框架通常支持从事务、SQL语句、网络收发包等多个维度对SQL查询时的客户端侧超时时间进行设置。...

需求分析

本实验提供数据仅作为阿里云数据开发治理平台DataWorks数据应用实操使用,所有数据均为人工Mock数据。业务背景 为了更好的制定企业经营策略,现需要从用户网站行为中获取网站用户群体基本画像数据,例如,用户群体地理属性、社会属性等,...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用