数据湖-在线学习场景数据分析
数据湖-在线学习场景数据分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例,使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer,模拟应用中的关键页面,比如登 录、课程内容等,之后构造若干用户使用的模拟 日志数据,投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖(EMR+OSS)搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
内容 文档名称 数据湖-在线学习场景数据分析 文档编号 153 文档版本 V1.2 版本日期 2020-03-31 文档状态 外部发布 制作人 期会 审阅人 游圣 文档变更记录 版本编号 日期 作者 审核人 说明 阿瑟 雷飙 周皓 V1.0 2020-03-03 云魁敬海 创建 华颋期会 V1.1 2020-03-31 筱晖 期会 文档优化 V1.2 2021-02-01 期会-增加CADT、EMR ...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,访问控制,E-MapReduce
云上高并发系统改造
云上高并发系统改造
场景描述 随着业务的发展,系统并发压力越来越大,如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景,提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景: 1.系统并发压力大,需要进行系统应用改造。 2.数据层并发压力大,需进行分库分表改造。 3.数据库数据量巨大,亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段,我们除了通过SLB做负载 均衡外,我们可以通过SLB下挂nginx的方 式,增加负载均衡侧的可扩展性 2.在数据库拆分阶段,在做好数据规划后,我 们借助DTS进行数据迁移,通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
本着以上原则整个系统的进化可以参考下图片来自云栖社区):整个系统进化分为三个阶段:x轴,水平扩展阶段,通过负载均衡服务器不断地横向扩充应用服务器,水平 扩展最重要的问题是不同服务器之间如何保持 session和会话同步。尽量减少 不同服务器切换时对用户侧的影响,水平扩展后自然会遇到一些问题,如 DB 的瓶颈...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,数据传输,云解析 PrivateZone,云原生分布式数据库PolarDB-X,云速搭CADT
超级计算集群实现自然语言处理训练
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景,使用神龙 GPU云服务器(SCCGN6)+CPFS进行NLP的 训练,采用Bert模型。这里不使用容器,直接 使用裸机进行NLP的Bert训练,使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器(SCCGN6) SCC超级计算集群 CPFS共享存储
审核人 说明 V1.0 2019/07/15 敬海 游圣行夜 创建 V1.1 2019/11/20 敬海 增加首页概览页,更新git地址 V1.2 2019/12/09 敬海 产品更新 V1.3 2020/02/02 敬海 更新架构 V1.4 2020/12/10 敬海 AIACC更新及demo更新 V1.5 2021/03/08 敬海 更新文件链接等 I企业上云实践 超级计算集群实现自然语言处理训练 前言 概述 本文介绍...
来自: 最佳实践 | 相关产品:文件存储NAS,超级计算集群
图像搜索
图像搜索是阿里云自研的一款用于图片间相似性检索的平台型产品。通过输入图片,可高精度、高效率的在图库网站中检索到与输入图片相似的图片集合,并支持定制化服务。以图搜图可广泛的应用于拍照购物、 商品推荐、版权保护、图片相似推荐等场景。
通过版权图片搜索功能可针对加工后的图片快速定位到版权图片库中的原,从而实现版权图片溯源.图片素材交易网站.图片素材是版权图片交易网站的核心资产,通过版权图片搜索功能可快速在图片库中定位到侵权图片,从而维护图片交易网站的合法权益.通过输入图片,可以在自建有版权的图库中准确找到原,有效避免图片拼接、...
来自: 云产品
计算巢服务
阿里云计算巢服务是一个面向ISV、SI、MSP和开发者的云集成PaaS平台,方便服务商更好的将产品、服务集成,借助云原生的能力提升软件服务交付、部署及后续管理。
产品特点AI大模型,文字生成图片图片转图片。立即创建数据库服务:TuGraph高性能数据库服务介绍TuGraph(tugraph.org)是蚂蚁集团的高性能数据库(Graph Database)及数据管理平台,具有万亿数据的处理能力,计算性能去取得国际数据库性能基准测试第一名。产品特点高性能数据库,支持实时和离线的毫秒级复杂...
来自: 云产品
移动APP业务合规解决方案
移动APP业务合规解决方案以云计算基础设计及达摩院 AI 能力为底座为企业提供合规镜子功能,通过深度学习技术、自动化扫描结合专家服务,帮助企业低成本、高效、精准的识别业务合规风险,持续满足业务合规需求。
对移动 APP 业务场景下的视频、图片、语音、文字内容进行全维度的风险审核,提供鉴黄、涉政暴恐识别、广告识别、不良场景识别、语音反垃圾、文本反垃圾等多种能力,以低成本、高效率、个性化、高准确率的体验提升内容风险防控水位.内容智能审核.内容智能审核.方案可通过多维度审核能力,对违规内容、不良内容和未成年人不宜...
来自: 解决方案
低代码电商直播间解决方案
低代码电商直播间解决方案,基于阿里云云原生、音视频、AI 智能算法和网络等先进技术,通过低代码方式接入,帮助企业快速完成在自有 APP、小程序、网站等平台的私域电商直播间的搭建。其易接入且强扩展的特性,既可以满足企业定制需求,又可以降低时间成本,快速验证直播卖货商业模式。
\ \ 基于多模态内容理解 AI 技术,提供图片、视频、音频等多类型媒体审核服务,对敏感信息实时识别审核,保障直播内容安全.视频加速、AI 辅助、为直播安全保驾护航.互动直播低代码方案.音视频通信 RTC.低门槛接入,强大技术保障,提供一体化音视频服务的同时,快速满足客户对直播功能、营销组件、安全审核、数据分析等多...
来自: 解决方案
媒体处理MPS
阿里云媒体处理(ApsaraVideo for Media Processing,原MTS)是一种多媒体数据处理服务。它以经济、弹性和高可扩展的转换方法,将多媒体数据转码成适合在全平台播放的格式。并基于海量数据深度学习,对媒体的内容、文字、语音、场景多模态分析,实现智能审核、内容理解、智能编辑。
支持拼接生成雪碧,通过一次请求雪碧可获取多张图片的信息,实现大幅降低图片请求数量,提高客户端性能.通过对视频内容的理解并结合画面美学,选取展现较好的关键帧作为视频封面、提取视频多帧精彩瞬间拼接生成GIF动图.提取视频精彩内容片段,融合生成最具代表性的5s短视频摘要.对视频文件截取指定时间的截图、生成...
来自: 云产品
社交/媒体 Anti Spam解决方案
阿里云云盾基于对海量用户设备、IP、账户行为的画像分析,自动识别虚假账户及盗号,屏蔽垃圾信息及非法广告,同时对图片和视频进行智能鉴黄、鉴恐,降低spam,专注正常运营。
解决内容低俗,提高自动审核的精准性,降低人工审核.基于设备维度的唯一标示,通过机器学习和大数据技术,快速判断渠道流量构成.识别APP虚假流量安装,降低推广费用.阿里云云盾基于对海量用户设备、IP、账户行为的画像分析,自动识别虚假账户及盗号,屏蔽垃圾信息及非法广告,同时对图片和视频进行智能鉴黄、鉴恐,降低spam...
来自: 解决方案
音视频终端 SDK
音视频终端 SDK集成了阿里云视频直播和视频点播业务中拍摄、编辑、上传、推流和播放的核心能力,同时融合视频特效、音频特效等音视频AI能力,为用户提供一体化SDK,支持多终端接入,搭配产品级Demo,支持用户根据业务需求快速集成所需
使用播放器 SDK 提供多码率自适应、变速不变调、端侧画质增强等功能,结合云端服务为长视频观影提供进度条缩略、防遮弹幕、ASS 字幕等多样玩法,同时配合多重安全策略确保视频安全.播放器 SDK 全端覆盖充分满足业务需求,现已支持移动端(Android、iOS)、桌面端(Windows、macOS、Linux)和跨端方案(Web、Flutter),...
来自: 云产品
音视频通信RTC
阿里云音视频通信RTC依托核心的音视频编解码、信道传输以及网络调度技术,构建覆盖全球的实时音视频通信网络。提供移动端、PC、Web等多端SDK,并兼容标准WebRTC浏览器接入网络,适用于互动娱乐、在线教育、视频会议等场景。
内容安全基于深度学习技术,提供图片、视频、语音、文字、网页等多媒体的内容风险智能识别和审核服务,帮助用户发现色情、暴恐、政治敏感等风险内容,大幅度降低人工审核成本.产品功能子项.产品功能子项描述.产品功能描述.支持接入语音/视频等鉴黄审核系统.可将音视频通话内容旁路转推至视频直播中心,观众可通过CDN方式...
来自: 云产品
智能媒资服务
智能媒资服务是阿里云提供的媒体内容资产管理和处理服务,提供标签、审核、检索、视频封面、智能处理等核心功能,提高海量内容的利用分发管理效率。
相比传统审核,提高大量视频过的效率,保障准确性,降低审核的成本.通过视频检索技术,检索分成广告库,对特定广告进行监播和识别。有利于支撑广告动态分成业务生态,轻松把控广告投放的时间、次数等,同时保障了广告版权方和投放平台的利益;同时可基于此可以进行广告的高效识别、替换及广告位竞拍.对于新增视频,在庞大...
来自: 云产品
云投屏
云投屏是阿里云基于内容智能开发的针对线下门店智能广告屏场景的信息发布系统。提供内容编辑、审核、增强、排版、投放、设备集成等能力。可实现内容质量算法检测、内容安全黄暴恐过滤、内容智能发布推荐、内容格式云端转码等功能。
可实现内容质量算法检测、内容安全黄暴恐过滤、内容智能发布推荐、内容格式云端转码、算法生成图片海报等功能.提供账号角色管理,支持阿里云账号,支付宝账号等登陆方式,支持客户自定义角色.可在线管理设备的基础信息,设备状态等,及时发现设备故障.提供内容上传,识别,存储功能,并支持管理用户的素材源,包含图片,...
来自: 云产品
智能媒体服务 IMS
智能媒体服务IMS(Intelligent Media Services),是围绕直播和点播场景下的媒体采集、媒资管理、内容生产、制作和分发能力的一站式服务集,提供广播级、全智能、灵活多样、可多云接入的专业能力,并面向多云复杂业务流场景提供成熟的低代码终端SDK集成方案。
基于文字、图片、视频等多维标签和物料检索素材,精准定位.支持百兆bps码率内容的云端转码和剪辑合成.高码率源生产处理.对象存储OSS.视频点播VOD.短视频服务集音视频强大拍摄、特效编辑、本地转码、高速上传、自动化转码处理、媒体资源管理、分发加速、播放于一体的完整短视频解决方案。借助视频摆脱“工具化”印象,提升...
来自: 云产品
企业资质识别
阿里云企业资质识别支持各类资产证件的识别。企业资产如营业执照识别,可结构化识别出注册号,公司名称,公司地址,法人代表,营业期限等多个字段; 房产证识别可识别多种商品性质房源,快速准确识别房屋性质,坐落,权利人等10个字段。结构化输出业务所需的字段,方便工作人员审核录入,核对,有效节约人力时间成本。
利用海量的图片样本训练模型,准确率可达95%以上.依托于阿里自建的EAS在线服务集群,提供弹性伸缩的低延时服务.基于阿里云机器学习PAI,可结构化识别多种企业资质证件.提供弹性服务,扩展性好,算法持续的迭代优化对用户稳定性无影响.产品规格-预付费资源包.营业执照识别.可快速精准的识别企业营业执照中的注册号、公司名称...
来自: 云产品
行业文档识别
阿里云提供行业文档类识别,可以高精度识别各行业文档和表单表格,通用于各行业的通用文字识别。包含单字坐标,表格识别,图像旋转等功能,广泛应用于司法、金融、医疗等各行业,方便工作人员审核录入核对,节约人力时间成本。
企业法务合同审核.通过OCR的高精度识别,实现纸质文档的准确识别和结构化识别,自动归类和录入,如金融借贷管理、保险核保流程等.金融/保险自动化流程.更多产品与服务.<全部 OCR 文字识别产品.高精度识别各行业文档和表单表格,通用于各行业的通用文字识别。包含单字坐标,表格识别,图像旋转等功能,广泛应用于司法、金融...
来自: 云产品
智能封面
阿里云智能封面,是通过对视频内容的理解,结合画面美学和海量用户行为数据,选出最优的关键帧或关键片段作为视频封面,提升视频点击转化及用户体验。支持封面图片、封面动图、封面视频功能,选取展现视频内容效果最优的图片、动图或视频,作为视频的图片封面。
选取展现视频内容效果最优的图片,作为视频的图片封面.提取视频多帧精彩瞬间,拼接生成GIF动图,作为视频的动图封面.提取视频精彩内容片段,融合生成最具代表性的短视频作为封面视频.通过对视频内容的理解,结合画面美学分析,选出最优的关键帧或关键片段作为视频封面。支持提取静态图片封面、动图封面、封面视频三种形式....
来自: 云产品
视频点播
视频点播(ApsaraVideo VoD,简称VoD)是集视频采集、编辑、上传、媒体资源管理、自动化转码处理(窄带高清TM)、视频审核分析、分发加速于一体的一站式音视频点播解决方案。
上传并设置PNG图片作为视频水印,并支持可视化调整水印位置.阿里云私有加密算法,有效防止视频泄露和盗链问题.多种转码模版,窄带高清主流格式全覆盖。提供高效、专业、可定制的视频转码服务.多种转码模版,窄带高清.智能媒资管理.智能视频标签,智能审核,智能判重。视频AI帮你摆脱繁重人力.媒资信息管理与多维搜索.管理...
来自: 云产品
云端智能剪辑
云端智能剪辑(云智剪)是基于云计算和人工智能技术的视频剪辑生产服务,能为用户提供直播剪辑、视频剪辑、模版工厂、数字人制作等核心功能,并可使用 AI 辅助剪辑生产。
云智剪提供基于文字或语音驱动的数字人形象制作和人声克隆,后期可添加动态视频、图片、字幕、特效等自动化生成数字人视频成片,提供一站式数字人视频制作能力.视频云场景资源包推荐.视频云场景资源包推荐,助力企业高效上云.<查看全部产品.云端智能剪辑(以下简称:云智剪)是基于云计算和人工智能技术的视频剪辑生产服务...
来自: 云产品
云导播台
云导播台是阿里云提供的直播云端导播服务。能提供预监预看、备播延播、虚拟演播等功能,服务赛事演出、新闻报道、活动直播等场景,灵活接入,无需硬件
包括台标、背景、字幕、转场、滤镜等.素材库和特效库.延时直播,搭配备播功能,出现紧急状况可一键切换至备播画面.云导播台提供实时回放功能,可应用于现场直播、节目制作等场景.直播过程中进行实时字幕添加,以及多语言翻译,可应用于新闻制作等场景.在视频中插入广告,实现收益增长,可应用于网络直播、节目制作等场景....
来自: 云产品
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用