自建Hadoop迁移MaxCompute
自建Hadoop迁移MaxCompute
场景描述 客户基于ECS、IDC自建或在友商云平台自建了大数 据集群,为了降低企业大数据计算平台的成本,提高 大数据应用开发效率,更有效保障数据安全,把大数 据集群的数据、作业、调度任务以及业务数据库整体 迁移到MaxCompute和其他云产品。 解决的问题 自建Hadoop集群搬迁到MaxCompute 自建Hbase集群搬迁到云Hbase 自建Kafka或应用数据准实时同步到 MaxCompute 自建Azkaban任务迁移到Dataworks任务 产品列表 MaxCompute,Dataworks、云数据库Hbase版、Datahub、VPC,ECS。
名词解释 HDFS Hadoop 分布式文件系统(HDFS)被设计成适合运行在通用硬件上的分布式 系统,它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式 文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉 价的机器上。HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应 用。VPN...
来自: 最佳实践 相关产品:云服务器ECS,DataWorks,大数据计算服务 MaxCompute,云数据库 HBase 版,数据总线,云速搭
基于Flink+ClickHouse构建实时游戏数据分析
基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中,常常需要对用户行为日志进行分析,通过数据挖掘,来更好地支持业务运营,比如用户轨迹,热力图,登录行为分析,实时业务大屏等。当业务数据量达到千亿规模时,常常导致分析不实时,平均响应时间长达10分钟,影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据,实现秒级响应的实时用户行为分析,并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析,得到用户特征和画像,实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓,对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能,千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高,支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用,免运维,全球多Region部署,快速支持新游戏开服。 Flink+ClickHouse+QuickBI
用户的行为习惯包括用户的登录设备(IOS、PC、Android等等),登 录时间点,在线的时长,点击和浏览的页面,页面跳转等等,这些数据往往可直接从 服务器日志中获取。而业务行为数据就是用户在游戏平台中具有业务意义的操作,比 如充值,购买装备等,这些数据往往需要在系统中进行相应的数据埋点。方案架构 方案优势 通过云...
来自: 最佳实践 | 相关产品:云服务器ECS,弹性公网IP,实时计算,Quick BI,消息队列 Kafka 版,云数据库 ClickHouse
网盘与相册服务
网盘与相册服务基于阿里云高可用存储及高安全水位的能力,帮助客户解决办公数据的搜索、管理、共享、审计等文件管理难题,同时也可为企业办公新形态升级提供打包服务。
可以支持因网络状态、电脑状态导致的文件传输到一半失败后,重新上传请求时无需重新等待前半段已传输成功的文件.支持同组织内文件共享、外部用户公网文件分享等功能.提供批量上传、文件夹上传、传输暂停、取消等传输状态管理功能.实现公网、内网等各种文件内容快速同步,给用户根据当前网络状态管理传输状态的功能,且能在...
来自: 云产品
网盘与相册服务PDS
网盘与相册服务(简称PDS)是阿里云为客户提供的面向企业、团队与个人的数据管理开放平台,提供一站式数据存储、分析和AI的能力。方便客户快速高效的构建可支撑海量用户的网盘与相册服务,同时针对团队及个人用户,支持免开发开箱即用。
可以支持因网络状态、电脑状态导致的文件传输到一半失败后,重新上传请求时无需重新等待前半段已传输成功的文件.支持同组织内文件共享、外部用户公网文件分享等功能.提供批量上传、文件夹上传、传输暂停、取消等传输状态管理功能.完善的安全及权限管理能力.基于阿里云底层存储提供企业级安全防护,配备灵活、多维度的权限...
来自: 云产品
无影客户端下载
下载对应的无影客户端版本,安装成功后,即可通过客户端随时随地访问无影服务。
提供IP白名单,防SQL注入,SSL加密传输,TDE数据加密等功能.主备架构,故障秒级切换,业务无感知.满足分服、滚服弹性扩展.游戏公司为了快速抢占市场,需要快速的开发出新产品吸引玩家,云数据库Redis版能减少系统开发复杂度,业务爆发时可轻松弹性扩容,满足高性能业务要求.满足游戏分服类应用的分服、滚服弹性扩展需求;数据...
来自: 云产品
钉钉专业版
钉钉专业版是阿里云基于钉钉原生功能所进阶的产品,它可以解决考勤打卡、视频会议、企业应用等6大组织难题,为用户提供更超值的优惠权益和更优质的尊享服务。
保密群 保密群内聊天有水印,office文件及图片不可下载、转发、复制移动端可防止载屏、录屏、转发,仅支持Android、IOS设备载屏有通知.自定议工作台-专业版 丰富的模块组件,轻松打造组织文化/管理窗口;为中小企业提供“轻量级+适配型”定制方案,助力中小企业进行数字化升级.考勤专家模式 定制化设计考勤报表字段,满足...
来自: 云产品
视频云营业厅解决方案
远程实现银行柜员服务、证券开户、保险勘察等各类服务场景,建立视频云营业厅,打通金融机构用户线上经营服务能力,满足终端用户线上业务办理的需求。
支持 iOS、Android、PC、Pad、天猫精灵等终端,实现跨平台交互;支持 Native、H5、小程序音视频接入.支持公共云、专有云、混合云、行业云(政务、金融)方式部署,支持银行客户特有的DMZ区部署,满足监管合规要求.端到端全链路加密;依托阿里全球高速网络和2800+CDN节点,低时延传输;改进的FEC算法,抗丢包40%;弱网环境...
来自: 解决方案
办公安全平台SASE
阿里云办公安全平台(Security Access Service Edge)依托阿里云海量的边缘节点,将安全能力延伸至用户边缘,为企业分支机构/门店、远程移动办公场景的访问互联网及云上服务流量提供就近接入的安全防护能力。
支持精准识别5000+常用的应用特征,通过将应用标签化能够管控企业员工访问高带宽消耗、泄密风险(文件外发)、降低工作效率等类型的互联网应用.依托阿里云的威胁情报数据,可为用户提供30+个大类,上千万量级的URL特征库,可以识别并拦截员工访问恶意网站的行为,防止办公终端中招的同时,也保障企业内部网络的安全水位.零...
来自: 云产品
倚天云服务器
倚天云服务器采用倚天710处理器,通过芯片快速路径加速手段,完成计算、存储、网络性能的数量级提升,应用于云原生、视频编解码、高性能计算和游戏服务等场景。
无需安装二进制转换工具即可运行应用程序,从而拥有原生 Android体验.支持SVE2矢量指令集,增加矩阵相关运算的支持,支持支持int8、bfloat16,提升ML场景性能.图文卡片(实景照片型).唐家哲,靖鑫,也树.客户案例描述(客户痛点+如何解决+最终如何)2-3行文字.客户案例描述(客户痛点+如何解决+最终如何)2-3行文字.客户案例...
来自: 云产品
无影终端
无影终端包括硬件终端与软件客户端,是无影云上办公空间的必备要素,为用户提供便利、高效的无影使用体验。
Windows客户端(支持Windows 7及以上64位操作系统)·macOS客户端(支持macOS 10.15及更高版本)·Android客户端(建议使用Android 10或更高版本)·iOS客户端(建议使用iOS 11或更高版本)·Web端(无需下载,支持Chrome、Firefox浏览器).通用icon文字列表.多种硬件终端和软件客户端,满足不同使用场景.原厂适配,为...
来自: 云产品
视频点播
视频点播(ApsaraVideo VoD,简称VoD)是集视频采集、编辑、上传、媒体资源管理、自动化转码处理(窄带高清TM)、视频审核分析、分发加速于一体的一站式音视频点播解决方案。
基于阿里云CDN的全球网络提供高性价比传输服务.针对直播流和云上媒资内容,融合AI服务进行快速剪辑和特效包装.提供从预防盗播/盗链/盗录,到泄露后监测侵权和存证溯源的完整链路.提供短视频拍摄/剪辑、智能美颜特效、全平台播放器等SDK集成方案.【标题】-产品功能.产品级短视频SDK,多途径生产视频.产品级短视频SDK,录制...
来自: 云产品
IoT 设备身份认证
阿里云 IoT设备身份认证提供身份认证、通道加密和业务数据加密等能力,实现物联网数据可信上云和可信上链。提供公共云、一体机、专有云、多云等部署模式。
查看详情 IoT 安全运营中心 覆盖Linux、Android、RTOS类的设备 一键开启物联网平台风控,快速集成安全Agent保护物联网设备安全 支持检测4类异常行为、40+风险、50+项合规检查点 支持实时推送安全策略,自动处置威胁事件。为物联网平台提供一键开启的风险检测能力,为物联网设备提供漏洞检测与修复、网络访问控制、合规自查...
来自: 云产品
媒体处理MPS
阿里云媒体处理(ApsaraVideo for Media Processing,原MTS)是一种多媒体数据处理服务。它以经济、弹性和高可扩展的转换方法,将多媒体数据转码成适合在全平台播放的格式。并基于海量数据深度学习,对媒体的内容、文字、语音、场景多模态分析,实现智能审核、内容理解、智能编辑。
嵌入的水印信息隐藏于载体文件中,水印嵌入后不影响视频画面、图片的视觉质量及完整性,可用于版权保护、泄露溯源、广播监视、信息传输文件验真等多种场景.82A_【标题】行业实战场景.谢赟辉,靖鑫,也树.更稳定,更流畅的点播体验.提供集音视频上传、自动化转码、媒体资源管理、分发加速于一体的一站式音视频点播解决方案。...
来自: 云产品
中小企业基于SAG APP实现云上移动办公
中小企业基于SAG APP实现云上移动办公
1. 客户端一键接入上云,配置自动化 2. 城域内 Internet 就近接入,快速高效 3. 数据加密传输,满足安全性要求 4. 阿里云控制台统一配置管理
步骤2 单击文件管理>上传文件,拖拽文件上传成功。(此处图片文件请自行选择本地电脑 已有的图片)文档版本:20211008 27 中小企业基于 SAG APP实现云上移动办公最佳实践 联合云企业网访问 OSS等云服务 步骤3 设置文件权限。本实例已设置 OSS为私有状态,所以需要为相关用户设置访问权限,允许指定用户访问指定 OSS资源。...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,云企业网,云解析 PrivateZone,智能接入网关,云速搭
利用交互式分析(Hologres)进行数据查询
利用交互式分析(Hologres)进行数据查询
场景描述:随着收集数据的方式不断丰富,企业信息化 程度越来越高,企业掌握的数据量呈TB、 PB或EB级别增长。同时,数据中台的快 速推进,使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力,为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
本实践中,会聚合点 击的手机操作系统信息,调整推送对于ios和android的倾向性。2.2.CADT部署资源 本节采用云速搭CADT快速构建实验环境。注意:在使用CADT部署资源之前,需要在控制台开通所用到的服务。步骤1 登录CADT控制台。通过下图所示方式登录,或者访问链接直接登录均可。(https://bpstudio.console.aliyun.com)...
来自: 最佳实践 | 相关产品:大数据计算服务 MaxCompute,DataV数据可视化,实时计算,Hologres,云速搭CADT
云速搭构建大规模云手机压测集群
云速搭构建大规模云手机压测集群
在互联网游戏行业新游发行前、金融行业的基金或券商APP在大版本更新前,均需要将APP部署到大规模测试环境中进行压测,确保大规模并发场景下对APP本身可靠性和后台业务系统的稳定性及资源准备情况做好验证。 本实践设计一个游戏压测场景,在阿里云的多地域快速部署共一万台云手机,每台云手机之间网络可互通,每台云手机通过阿里云提供的NAT网关可访问互联网。
步骤3 在通过 CADT创建的 bucket的文件管理里上传步骤 1下载的 APK文件。文档版本:20220901 18 云速搭构建大规模云手机压测集群 云速搭架构模板准备 步骤4 返回到云手机控制台,进入应用安装。文档版本:20220901 19 云速搭构建大规模云手机压测集群 云速搭架构模板准备 步骤5 返回到云手机 VNC控制台,在首页单击鼠标向上...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,弹性公网IP,NAT网关,云企业网,云速搭CADT,弹性云手机
超低延时直播 RTS
超低延时直播是一款超低延时、高并发、低卡顿的视频直播产品,它将延时从标准视频直播降低至毫秒级别,且提供更强的抗丢包能力,适用于对网络延时要求高、互动性强的直播场景。
直播授课内容及时生成点播文件,对直转点内容进行二次加工,精剪粗剪智能媒体生产。对媒资内容进行有序管理及内容安全加密.一站式全球文娱活动互动直播,为全球文化娱乐传播行业客户提供低成本的直播转码、超低延时传输,助力客户快速进行全球范围内的活动直播.WEB直播延时从HLS的10秒~30秒降低至毫秒级;APP直播延时从3~...
来自: 云产品
消息推送
移动网关服务,源于阿里云移动开发平台。消息推送 MPS,针对不同的场景推出多种推送类型,满足个性化推送需求。集成了多家手机厂商的推送功能,方便快速集成移动终端推送功能,与 App 用户保持互动,从而有效地提高用户留存率,提升用户体验。
消息推送 MPS 基于 TCP 长连接通道或者手机厂商推送渠道进行消息通知相关业务数据传输.针对单个用户或设备快速推送消息,配置简单.针对单个用户或设备推送消息,可指定消息模版,消息正文由替换模板占位符得到.针对大量设备或者用户推送消息,可指定消息模版,在配置文件中针对不同设备或用户设置不同的占位符变量值.针对...
来自: 云产品
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
无影云手机无影云手机是运行在云端的虚拟手机,提供安全、稳定、弹性和流畅的安卓应用运行环境。操作系统Alibaba Cloud LinuxAlibaba Cloud Linux是阿里云研发的稳定、安全、高性能的服务器操作系统,为用户提供更好的操作系统服务体验。边缘计算边缘节点服务 ENSENS提供“融合、开放、联动、弹性”的分布式算力资源,帮助...
来自: 云产品
文件下载加速及成本优化
方案使用阿里云CDN来加快源站内容的分发速度,通过分布于全球的CDN节点来缓存源站的文件内容,并且调度用户请求到最近的CDN节点上快速下载所需文件,因此能够加快文件下载速度,提高网站性能。核心优势包括改善用户体验,提高网站可访问性,在降低源站服务器负载的同时,还能够节约源站的流量成本。
方案使用阿里云CDN来加快源站内容的分发速度,通过分布于全球的CDN节点来缓存源站的文件内容,并且调度用户请求到最近的CDN节点上快速下载所需文件,因此能够加快文件下载速度,提高网站性能。核心优势包括改善用户体验,提高网站可访问性,在降低源站服务器负载的同时,还能够节约源站的流量成本。文件下载加速及成本优化 ...
< 1 2 3 4 >
共有4页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用