基于MaxCompute的大数据BI分析
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例,将业务数据和日志数据使用 MaxCompute做ETL之后,同步到ADB进行实时 分析,之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
文档版本:20211213 1 基于 MaxCompute的大数据 BI分析 最佳实践概述 方案优势 以 Hologres+QuickBI快速实时数据分析的核心能力为切入点,将客户的业务 、日志数据引导至阿里云的日志服务和分析性数据库。融合阿里云的日志服务 SLS 的生态,增强用户体验(如无缝对接 Flink、Elasticsearch、RDS、Hologres、EMR、dataV ...
来自: 最佳实践 相关产品:日志服务(SLS),大数据计算服务 MaxCompute,云原生数据仓库AnalyticDB My,Quick BI,云速搭CADT
企业级互联网架构解决方案
企业级互联网架构解决方案是在阿里巴巴电商业务环境沉淀下来的互联网中间件,其优秀的架构设计理念,以及大型分布式系统数据化运营能力,帮助企业用户快速构建大型分布式应用,支持业务需求快速创新,助力传统企业快速互联网+转型。
实现商品通、会员通、库存通、交易通、结算通,用低成本的技术架构支持企业的全渠道探索,思考推进向新零售...用户需有自机房,为本地数据中心赋予阿里云同款云架构能力.公共云架构结合专有云,实现快速部署与数据的处理与计算服务.从研发-测试-运维提供一套完整的全流程平台支撑,初步实现了 DevOps.DevOps 闭环整体架构.
来自: 解决方案
城市管理解决方案
城市管理解决方案按照“城市管理要像绣花一样精细”的总体要求,打造以全面感知为核心的城市治理数据底盘,通过数据智能优化业务流程,打造场景化应用体系,建立以大数据驱动的城市管理新模式,全面提升城市治理智能化和精细化水平。
建设基础数据中心、全域数据中心、萃取数据中心,形成城市管理领域的全量数据底盘。并以试点应用为抓手,先行构建领域数据服务体系。数据资源中心提供数据资源加工、处理、服务的一站式开放服务能力,同时提供数据处理过程的算法管理、模型管理、标签管理等服务能力,为各部门提供数据资源和开发治理工具服务.城市管理...
来自: 解决方案
新型冠状病毒全基因组分析解决方案
阿里云提供病毒基因组测序从样本到报告的解决方案,通过算法和模型上的优化,可以在14小时内完成新冠病毒的确诊,一次实验可完成20人以上的精准筛查。
为地方疾控中心,医院临检中心,海关等需要管理疫情的机构,建立病毒筛查、诊断和分析能力;2.为已有实验和测序能力的实验室,提供病毒基因数据筛查、自动化分析和报告、以及研究平台.通过算法和模型上的优化,可以在14小时(时间不定,视样本量和测序通量而定)内完成新冠病毒的确诊,一次实验可完成20人以上的精准筛查....
来自: 解决方案
能源智能解决方案
利用云计算、大数据和人工智能技术结合电力、石化及能源产业链自身特点,融合形成智能化解决方案。
配网主网生产指挥中心面临大量的信息的接收、确认判断、信息检索、工作跟进等工作,给指挥中心人员带来大量重复性、繁琐性的事务性工作,难以实现有效的指挥中心分析、高级决策等业务职能,迫切需要采用新的技术手段帮助指挥中心的工作人员从中解放,提升指挥效能和电网生产业务的生产力水平.数据机器人提升指挥效率和...
来自: 解决方案
基于Elasticsearch的订单检索加速最佳实践
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高,核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题:单表记录不断增多,数据检索速度会变慢,尤其是对中文的模糊查询(建立普通索引完全不起作用)。虽然数据库自身在不断完善,但效果有限且没办法灵活扩展,复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库,数据集成产品提供Binlog实时订阅,实时解析、增量数据实时更新及二级索引库之间进行数据实时同步,为数据库提供“能力增益”, 不仅能从根本解决主库抗压问题,提升稳定性;同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
步骤11 回到 rds的 dms界面,对表 trading_order插入数据,再到 Elasticsearch查看 。(dms登录方式本可查看文档章节 2.4创建 rds订单表”。在上图 dms使用 insert into语句插入一条数据到 trading_order表:insert into trading_order(order_amount,source_type,consignee_ada,order_type,company,consignee_...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,DataWorks,Elasticsearch
云治理中心
阿里云云治理中心是企业多账号环境集中治理和管理的平台。帮助企业根据最佳实践设置Landing Zone多账号环境,设定基线对企业云上环境进行持续治理和管理。
如何开通云治理中心.建立多账号资源结构.云上环境风险发现及治理.治理健康检测.专家咨询预约.专家咨询预约.专家咨询预约.专家咨询预约.专家咨询预约.专家咨询预约.治理成熟度检测功能升级,马上免费体验!治理成熟度检测功能升级,马上免费体验!查看全部产品.云治理中心是云上环境集中治理和持续管理平台。通过集合阿里云...
来自: 云产品
蚂蚁链摩斯多方安全计算平台解决方案
蚂蚁链摩斯多方安全计算平台解决方案利用多方安全计算、隐私保护、区块链技术,打造数据安全共享的基础设施。解决企业之间数据合作过程中的数据安全和隐私保护问题,打通数据孤岛,将计算移动到数据端,达成数据可用不可见,安全促进业务创新。
蚂蚁链摩斯多方安全计算平台采用去中心分布式架构,数据合作各方通过本地安装的摩斯计算节点完成安全计算,保证原始数据不出域,仅输出计算结果。并可将查询调用记录存证在区块链上,防止数据造假,保障数据质量。可应用于联合风控、联合营销场景.数据安全与隐私保护.去中心分布式架构.轻量部署自主迭代.一站式数据合作服务...
来自: 解决方案
微服务中心解决方案
注册中心和配置中心是 Dubbo 和 Spring Cloud 微服务架构中的重要组件,往往采用 ZooKeeper/Nacos/Eureka/Apollo 等开源方案进行自建,但因其依赖复杂,往往给客户带来的较高的建设和运维成本,同时,在 Hbase、Spark或Kafka 等大数据的环境下,会依赖 ZooKeeper 进行分布式系统的协调,此时,基于云上的托管服务,可以极大的降低运维复杂度,并提高应用可用性。
阿里云微服务中心解决了依赖 ZK/Nacos/Eureka 等开源注册和配置方案进行自过程引起的依赖复杂、建设和运维成本高的问题,同时,降低了在 Hbase、Spark或Kafka 等大数据的环境下的分布式系统协调难题,旨在打造云上微服务运维体系的闭环.微服务中心解决方案.微服务引擎MSE是一个面向业界主流开源微服务框架 Spring Cloud...
来自: 解决方案
阿里云最佳实践离线大数据workshop
阿里云最佳实践离线大数据workshop
本最佳实践,首先搭建一个简化的电商 demo 系统,然后为此 demo 系统构建一套离 线大数据分析系统。 实践目标 1. 学习搭建一个离线大数据分析系统,学习从数据采集到数据存储和业务分析的业 务流程。 2. 整个离线大数据分析系统全部基于阿里云产品进行搭建,学习掌运用各个服务组 件及各个组件之间如何联动。 背景知识要求 熟练掌握 SQL 语法 对大数据体系系统知识有一定的了解
MaxCompute向用户提供了完善的数据导入方 案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有 效 降 低 企 业 成 本,并 保 障 安 全。详 见:https://help.aliyun.com/product/27797.html  Dataworks:DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引 文档版本:20210802(发布...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),大数据计算服务 MaxCompute,DataV数据可视化,数据总线,Quick BI,云速搭
保险上云解决方案
保险上云解决方案解决保险基础设施上云底层设计,核心系统分布式架构,业务数据化,运营数字化的全方位解决方案。支撑保险行业数据智能、业务敏捷、数据安全,和人工智能技术服务能力。
长安保险仅用5个月时间就把除核心数据库外的所有系统搬站上云,基本消除了自机房,同时也用云计算实现了同城双活和异地灾备,是采用混合云架构数据中心的典型案例.全系统上云,建设成本从千万降低到百万,且完全符合监管要求;搭建互联网金融的技术平台和利用数据计算助力互联网保险和科技保险的发展;从业务、技术和...
来自: 解决方案
多行业遥感智能解译解决方案
多行业遥感智能解译解决方案综合运用遥感AI、视频AI和气象AI技术,通过多源对地观测数据的智能解译分析,解决传统数据处理效率低、精度差等问题,助力自然资源、新能源、农(林)业、气象、环保、水利、住建、应急、交通、物流、无人机、海洋、航空航天、通信制造、金融保险等多个领域实现全面、精准、高效的遥感影像智能分析利用。
综合运用遥感 AI 技术,通过多源对地观测数据的智能解译分析,解决传统数据处理效率低、精度差等问题,助力自然资源、新能源、农业、气象、环保、水利、住、应急、海洋、金融保险等领域实现全面、精准、高效的遥感影像智能分析利用,推动综合监测监管场景工作实现从人工到自动、从定期到及时、从被动响应到主动作为的转变...
来自: 解决方案
企业构建统一CMDB数据
企业构建统一CMDB<em>数据</em>源
典型场景 l 企业/ISV构建多云CMDB平台,对接数十款产品的API,拉取、清洗、格式化、存储配置数据是复杂且高成本的工作。 l 企业日常的资源管理,需依赖资源配置历史、资源关系数据进行故障溯源和影响评估。 解决方案 l 企业管理账号设置Config配置数据投递,将所有账号的资源配置快照和历史归集到统一地址留存。 l 使用OSS做长期归档,使用SLS做实时分析和监听。获取全量资源数据并及时感知云上资源的变更。 l 将数据集成到自有CMDB平台 客户价值 l 基于配置审计简单便捷的持续收集云上资源配置数据,在自建CMDB过程中节省大量人力和时间成本。 l 跨账号统一收集数据,实现中心化的资源配置管理。 l 实现资源配置数据的持续收集和监听,及时感知云上资源的增删改,洞察异常变更。
获取ECS网络信息 本章节,我们以ECS资源的网络配置数据为例,使用 python脚本模拟将资源配置 导入企业自有系统。用到了配置审计的 API,在使用前需要导入阿里云 SDK 核心库:aliyun-python-sdk-core:在多账号情况下,列出主账号下指定账号 组的所有资源数据:在多账号情况下,查询指定资源的详细数据 注意:上述两个...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),配置审计
传统企业业务上云基础安全防护
传统企业业务上云基础安全防护
场景描述 越来越多的企业客户选择把自己的生产系统部 署在公共云平台上,以满足自身业务的发展及弹 性扩缩容、稳定性等方面的需求。如何在公共云 上构建基本的网络安全、主机安全、入侵检测、 运维审计等方案,是企业首选的最佳实践。 解决问题 1.服务器安全、应用安全 2.网络安全、数据安全 3.安全审计、安全管理 产品列表 云安全中心 Web应用防火墙 云防火墙 SSL证书 数据库审计 堡垒机
根据数据库在云环境的创建方式(RDS方式或ECS自数据库方式),Agent程序 的部署位置分别是: ECS云服务器自数据库:Agent程序需要部署在数据库所在的ECS云服务器上。 RDS云数据库实例:Agent程序需要部署在对应的应用服务器上,通常为访问RDS 数据库的应用系统所在应用服务器(ECS)。7.1.开通数据库审计 步骤1 ...
来自: 最佳实践 | 相关产品:云安全中心,Web应用防火墙,数据库审计,堡垒机,云防火墙,云速搭CADT
工业数据中台解决方案
以企业IT&OT数据为基础,结合数据汇聚&治理能力,实现数据资产化、数据服务化,打造统一标准、稳定可靠的数据资产,发挥数据价值,完成端到端的数据敏捷交付、部署、应用。
河钢数字技术股份有限责任公司与阿里合作,借助阿里数据中台主数据治理解决方案,为河钢集团构建河钢集团中央数字中心数据管理平台,平台以集团钢铁主业为实施范围,以营销主数据为实施内容,旨在借助大数据、云计算技术,搭建以主数据管理为核心的集团数据中台基础,构建一个全面、统一、完整的主数据标准化体系,支撑...
来自: 解决方案
转发路由器TR
转发路由器TR(Transit Router)是地域范围内企业级核心转发网元,可为您转发同地域或不同地域的网络实例间的流量,并支持在地域内定义灵活的互通、隔离、引流策略,帮助您打造一张灵活、可靠、大规模的企业级互联网络。
通过专线连接云下网络.VBR到TR的连接能够实现云下数据中心通过专线连接到云上网络.连接其他地域的TR.同一个云企业网内的不同地域TR能够两两互联,实现全球统一的客户专用网络.TR作为云上Region级核心路由器,大规模的连接多种类型的网络实例.中心化连接网络实例.TR上可以配置多张路由表,每个网络实例与不同路由表关联,...
来自: 云产品
游戏行业安全解决方案
通过阿里云DDoS高防、风险识别等安全产品,帮助游戏行业客户构建全面的安全防护体系,满足抵御攻击、合规运行、提高业务风险等级等不同场景的安全需求,保障游戏业务运行的稳定、安全。
通过 DDoS 防护、云防火墙和云安全中心,即开即用,帮助客户快速建立基础安全能力保障业务连续性,能够防御典型网络攻击和入侵检测,保障游戏登录等平台稳定性.快速构建基础安全能力.通过阿里云完整的安全技术产品,帮助客户实现网络、主机、应用、数据、业务五大维度防护能力,构建完整的云上纵深防护体系,在抵御攻击提升...
来自: 解决方案
云原生Stack
云原生Stack简称CNStack,是阿里云一款开放的一站式企业级云原生技术中台,能帮助用户打造满足大规模、高性能、合规性和业务连续性等要求的分布式应用系统,提升企业数字化转型的整体效能。
容器云场景面向企业 IDC 数据中心、分布式基础设施及多云混合云基础设施,提供统一的资源调度和运维平面,帮助企业提升基础设施的资源利用率和运维效率,并通过可插拔的场景化组件,加快数字化业务的发布效率,提升系统稳定性,降低系统运维成本.1台 8c/16G 的虚拟机即可安装,极少的资源使用量将释放更多环境资源用于业务...
来自: 云产品
迁移与运维管理
阿里云提供一系列的运维管理工具:日志服务SLS、云治理中心等帮助你自动化的开发和运维,能够更加轻松控制云基础产品与基础设施。
将操作审计与费用中心相结合,易点天下实现实时自动化地标签和资源组设置,并建立基于标签的和资源组的高效分账体系.易点天下实现基于标签的自动分账体系.DBS新用户购买micro备份实例3个月9.9元,限1次限1台!可观测产品大促专场,限时省千元.买数据库备份仓库租用,送100GB存储容量.Prometheu监控包年包月容器实例首月...
来自: 云产品
智慧银行解决方案
智慧银行解决方案基于阿里云数据中台,建设智能化的客户服务体系、营销体系、大数据风控体系、产品与渠道运营体系,实现一切业务数据化,一切数据业务化,全面提升用户体验和运营效率,降低经营成本。
专有云与阿里云公共云的一致性,使得客户是面向企业级客户的全栈云平台,其基于阿里云产品的分布式架构,针对企业级市场的使用特点,为客户提供一个开放、统一、可信的企业级云平台.DataWorks 是一个提供了数据 OS 能力、并以 all in one box 的方式提供专业高效、安全可靠的一站式数据智能云研发平台。同时能满足用户对数据...
来自: 解决方案
< 1 2 3 4 ... 6 >
共有6页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用