基于DataWorks的大数据一站式开发及数据治理
概述 基于Dataworks做大数据一站式开发，包含数据实时采集到kafka通过实时计算对数据进行ETL写入HDFS，使用Hive进行数据分析。通过Dataworks进行数据治理，数据地图查看数据信息和血缘关系，数据质量监控异常和报警。 适用场景 日志采集、处理及分析 日志使用Flink实时写入HDFS 日志数据实时ETL 日志HIVE分析 基于dataworks一站式开发 数据治理 方案优势 大数据一站式开发，完善的数据治理能力。 性能优越：高吞吐，高扩展性。 安全稳定：Exactly-Once，故障自动恢复，资源隔离。 简单易用：SQL语言，在线开发，全面支持UDX。 功能强大：支持SQL进行实时及离线数据清洗、数据分析、数据同步、异构数据源计算等Data Lake相关功能 ，以及各种流式及静态数据源关联查询。
阿里云 E-MapReduce(EMR)是构建在阿里云云服务器 ECS 上的开源 Hadoop、Spark、HBase、Hive、Flink 生态大数据 PaaS 产品。提供用户在云上 使用开源技术建设数据仓库、离线批处理、在线流式处理、即时查询、机器学习等 场景下的大数据解决方案。详情请查看 www.aliyun.com/product/emapreduce DataWorks:基于 MaxCompute/EMR...
EMR集群安全认证和授权管理
场景描述 阿里云EMR服务Kafka和Hadoop安全集群使 用Kerberos进行用户安全认证，通过Apache Ranger服务进行访问授权管理。本最佳实践中以 Apache Web服务器日志为例，演示基于Kafka 和Hadoop的生态组件构建日志大数据仓库，并 介绍在整个数据流程中，如何通过Kerberos和 Ranger进行认证和授权的相关配置。 解决问题 1.创建基于Kerberos的EMR Kafka和 Hadoop集群。 2.EMR服务的Kafka和Hadoop集群中 Kerberos相关配置和使用方法。 3.Ranger中添加Kafka、HDFS、Hive和 Hbase服务和访问策略。 4.Flume中和Kafka、HDFS相关的安全配 置。 产品列表：E-MapReduce、专有网络VPC、云服务器ECS、云数据库RDS版
名词解释 E-MapReduce：阿里云 E-MapReduce（EMR）是构建在阿里云云服务器 ECS 上的开源 Hadoop、Spark、HBase、Hive、Flink生态大数据 PaaS 产品。提供 用户在云上使用开源技术建设数据仓库、离线批处理、在线流式处理、即时查询、机 器 学 习 等 场 景 下 的 大 数 据 解 决 方 案。详 情 请 查 看 ...
智算服务PAI-灵骏
智算服务PAI-灵骏面向大规模深度学习及融合智算场景的PaaS平台产品，支持公共云Serverless版、单租版以及混合云产品形态， 基于软硬件一体优化技术构建高性能异构算力底座，提供AI工程化全流程平台服务，具备高性能、高效率、高利用率等核心优势，满足高性能计算等领域应用需求，在大模型训练、自动驾驶、基础科研、金融量化等场景广泛应用。
提供高性能的 RDMA 计算网络、RDMA 存储网络和管控网络，采用高性能和高可用的方式来访问其它阿里云服务，具有强安全隔离、分钟级部署、无级变速、原生高可靠等特点.并行IO访问架构，单集群最高可达2TB/s吞吐和3000万IOPS，支持与云上和线下存储数据互通.新一代AI智算平台，满足大规模AI算力需求.支持Serverless的AI研发...
来自：
云产品
业务中台技术解决方案
阿里云业务中台解决方案为企业构建业务中台提供体系化的建设解决方案，涵盖从中台架构设计、中台实施、运行支持、持续治理等一整套业务中台建设方法论体系。阿里云业务中台解决方案基于经过阿里多年双十一洗礼的成熟云原生产品，结合完善的生态伙伴体系，成功帮助大量企业实现业务的实时在线与统一，实现各业务板块之间链接和协同，持续提升业务创新效率。
阿里云业务中台最佳实践沙龙圆满落幕.阿里架构总监一次讲透中台架构，13页PPT精华详解.了解业务中台.通过页面上的方案咨询联系我们的业务中台专家.业务中台专家通过电话先进行业务拜访前的预沟通，了解业务场景.业务中台专家登门拜访，进行详细需求调研确认，为您量身打造方案.项目合同签署后，阿里云协同合作伙伴为您进行...
来自：
解决方案
Salesforce on Alibaba Cloud
阿里云和Salesforce共同为中国客户带来了全球广受好评的CRM（客户关系管理）平台，包括销售云、服务云、电商云和 Salesforce 平台。它可以让企业的营销、销售、商务、服务和IT团队从任何地方一起协同工作，以提供卓越的客户体验。
云呼叫中心可提供PaaS化的...阿里云上的Salesforce包括销售云、服务云、平台云、以及代表中国数字体验的社交电商，均由阿里云托管和运营，让在中国开展业务的企业能够充分利用Salesforce CRM客户关系管理平台，借助一整套自动化和工作流工具，为其销售和服务流程提供支持.阿里云上的Salesforce在中国的产品战略.查看全部日志.
来自：
云产品
云消息队列 Kafka 版
云消息队列 Kafka 版是阿里云基于Apache Kafka构建的大数据消息中间件，广泛用于日志收集和分析、数据处理等场景。可提供全托管服务，用户无需部署运维，更专业、更可靠、更安全。
云消息队列 Kafka 版是阿里云基于 Apache Kafka 构建的高吞吐量、高可扩展性的分布式消息队列服务，广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等场景，是大数据生态中不可或缺的产品之一，阿里云提供全托管服务，用户无需部署运维，更专业、更可靠、更安全.查看产品文档.购买云消息队列 Confluent 版....
来自：
云产品
容器服务 Edge 版 ACK Edge
容器服务 Edge 版 ACK Edge是一款提供标准 Kubernetes 集群云端托管，支持边缘计算资源、业务快速接入、统一管理、统一运维的云原生应用平台，能够帮助您轻松实现云边一体化协同。
阿里云容器服务企业案例火热征集中，欢迎报名参与评选.<查看全部产品.容器服务 Edge 版（简称 ACK Edge）是一款提供标准 Kubernetes 集群云端托管，支持边缘计算资源、业务快速接入、统一管理、统一运维的云原生应用平台，能够帮助您轻松实现云边一体化协同.容器服务 Edge 版 ACK Edge.边缘异构资源快速接入，支持X86、arm...
来自：
云产品
商超连锁全渠道零售解决方案
阿里云商超连锁全渠道零售解决方案包括B2C、O2O、B2B的场景，提供APP/小程序，支持对接饿了么、美团等第三方外卖平台，基于阿里巴巴多年沉淀的业务中台技术，建立商品、会员、交易、营销等共享服务中心，实现全渠道数据的共享和一致，帮助零售商打造线上、线下无差别的全渠道销售能力。
云服务器 ECS.是一个应用托管和微服务管理的PaaS平台.了解更多>.专注于解决单机关系型数据库扩展性问题.了解更多>.可支撑万亿级数据洪峰的分布式消息中间件.了解更多>.久经考验的成熟组件，经过天猫双11、外部零售客户打磨，技术领先.产品技术成熟.提供阿里巴巴新零售沉淀的业务中台最佳实践经验.架构设计赋能.提供全渠道...
来自：
解决方案
云数据库专属集群MyBase
云数据库专属集群MyBase是阿里云专为企业级用户定制优化的解决方案。支持MySQL、PostgreSQL、SQL Server、Redis和MongoDB数据库。具有云资源独享、支持资源超分配，自主可运维、开放权限等特点。MyBase不仅能保障客户独享云资源更加安全、享受到云数据库服务的便捷灵活，同时还满足企业对数据库合规性、安全性和高性能的要求。
因产品规划调整，阿里云于2023年08月31日起，停止售卖 MyBase 托管版实例.<查看数据库全部产品.MyBase 是阿里云专为企业级用户定制优化的解决方案，支持 MySQL、PostgreSQL、SQL Server、Redis 和 MongoDB 数据库。具有云资源独享、支持资源超分配，自主可运维、开放权限等特点。MyBase 在保障客户独享云资源更加安全、享受...
来自：
云产品
AHAS多活容灾MSHA
多活容灾MSHA是在阿里电商业务环境演进出来的多活容灾商业化产品，是应用高可用服务AHAS的核心模块，为客户提供容灾架构建设能力。横向支持容灾架构的上线、运维、演练、切流，升级到下线。纵向支持业务流量的全链路管理，从流量接入到服务化调用再到异步化消息，最终完成数据落库。
浅谈异地多活及阿里云容灾经验分享.基于Tengine的接入层MSFE，可按比例或精准路由规则将请求路由到正确单元的后端应⽤，实现流量多活.具备接入层、服务层、消息层、数据层等自上而下的业务组件资源容灾管理能力，统一管理维护.基于接入层流量切换，以及RPC、MQ、定时任务调度流量的流量切换能力，保障业务的分钟级恢复能力....
来自：
云产品
- 产品推荐
- 这些文档可能帮助您