日志服务sls
日志服务（Log Service，简称Log）是针对实时数据一站式服务，在阿里集团经历大量大数据场景锤炼而成。无需开发就能快捷完成数据采集、消费、投递以及查询分析等功能，帮助提升运维、运营效率，建立DT时代海量日志处理能力。
提供丰富算子、开箱即用的场景化UDF（Syslog、非标准json、AccessLog UA/URI/IP解析等）。可扩展语法应对各种复杂格式.全托管云上服务，无须投入额外运维资源。支持自动根据流量弹性伸缩.支持多层嵌套、分流等逻辑，支持复杂的数据分派与编排需求.提供关键词、SQL92、AIOps函数等多种方式，支持面向文本+结构化数据实时查询...
来自：
云产品
自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统，购买阿里云EMR集群之 后，涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本），涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
Hadoop-ECS MySQL-ECS（本实践方案将在 ECS上安装 MySQL数据库，用于保存 Hive元数据信 息）类别 配置项 说明 文档版本：20210721 7 自建Hive数据仓库跨版本迁移到阿里云 EMR 基础环境搭建 ECS名称 MySQL 主机名 mysql55 实例规格 ecs.g6.large(2c 8g)镜像 镜像市场 镜像版本 m-uf68wwaaa4kwtq4lix9s 数量 1 其他配置同 ...
互联网、电商Elasticsearch搜索
场景描述 每一个生活在互联网中的用户，每天都在经 历各种各样的“搜索”，查找电商网站商品、 信用卡账单、查电子发票、查附近的餐厅酒 店、查偶像、查交通等等。相对于传统的关 系型数据库，Elasticsearch只需要几毫秒的 时间，即可查询PB级数据并从中找到匹配 信息。利用Elasticsearch高可用性和易用 性，能够快速处理网站、APP丢给它的文本、 数字、日期、IP以及地理数据。 解决问题 1.电商网站商品、订单、物流等搜索 2.保险行业保单查询 3.互联网教育行业课程搜索 4.O2O行业地理位置搜索等 产品列表 云服务器ECS 专有网络VPC 负载均衡SLB 云数据库RDSMySQL版 Dataworks Elasticsearch 数据传输服务DTS
步骤1 使用电商网站的公网 IP/admin登录电商网站后台管理系统。步骤2 进入商店配置页面。40 文档版本：20220121 互联网、电商 Elasticsearch搜索最佳实践 电商网站使用 Elasticsearch引擎 步骤3 配置 Elasticsearch搜索引擎。41 文档版本：20220121 互联网、电商 Elasticsearch搜索最佳实践 电商网站使用 Elasticsearch引擎...
基于弹性计算的AI推理
场景描述 本方案适用于使用GPU进行AI在线推理的场 景。在推理之前，模型已经训练完成。例如,刷脸 支付中，我们在刷脸的时候，就是推理的一个过 程。再比如图像分类，目标检测，语音识别，语 义分析等返回结果的过程。 解决问题 使用GPU云服务器搭建推理环境 使用容器服务Kubernetes版构建推理 环境 使用NAS存储模型数据 使用飞天AI加速推理工具加速推理 产品列表 GPU云服务器 容器服务Kubernetes版 NAS共享存储
阿里云 企业上云实践 基于弹性计算的 AI推理最佳实践 文档版本：20200320 发布日期：20220320 II 企业上云实践 基于弹性计算的 AI推理最佳实践|文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 基于弹性计算的 AI推理最佳实践 文档编号 061 文档版本 v1.9 版本日期 2020-03-20 文档状态 外部发布 制作人 敬海 审阅...
基于湖仓一体架构使用MaxCompute对OSS湖数据分析预测
本篇最佳实践先创建EMR集群作为数据湖对象，Hive元数据存储在DLF，外表数据存储在OSS。然后使用阿里云数据仓库MaxCompute以创建外部项目的方式与存储在DLF的元数据库映射打通，实现元数据统一。最后通过一个毒蘑菇的训练和预测demo，演示云数仓MaxCompute如何对于存储在EMR数据湖的数据进行加工处理以达到业务预期。
基于湖仓一体架构使用MaxCompute对OSS湖数据分析预测实践 业务架构 场景描述 数据湖和数据仓库是当前大数据技术条件下构建分布式系 统的两种数据架构设计取向，数据湖偏向灵活性，数据仓 库侧重成本、性能、安全、治理等企业级特性。但是数据 湖和数据仓库的边界正在慢慢模糊，数据湖自身的治理能 力、数据仓库延伸到外部...
SLS多云日志采集、处理及分析
场景描述 从第三方云平台或线下IDC服务器上采集 日志写入到阿里云日志服务，通过日志服务 进行数据分析，帮助提升运维、运营效率， 建立DT 时代海量日志处理能力。 针对未使用其他日志采集服务的用户，推荐 在他云或线下服务器安装logtail采集并使用 Https安全传输；针对已使用其他日志采集 工具并且已有日志服务需要继续服务的情 况，可以通过Log producer SDK写入日志 服务。 解决问题 1.第三方云平台或线下IDC客户需要使用 阿里云日志服务生态的用户。 2.第三方云平台或线下IDC服务器已有完 整日志采集、处理及分析的用户。 产品列表 E-MapReduce 专有网络VPC 云服务器ECS 日志服务LOG DCDN
第三方云平台或线下 IDC服务器已有完 整日志采集、处理及分析系统，需要使 用阿里云日志服务做日志统一管理 最佳实践频道 阿里云最佳实践分享群 如二维码过期，请搜索群号：31852400 文档版本信息 SLS多云日志采集、处理及分析 文档版本：20150122（发布日期）I 文档版本信息 SLS多云日志采集、处理及分析 文档版本：...
混合云使用Ali-Perseus
场景描述 本文介绍了混合云场景中，自建 Kubernetes服务，线下集群+云上弹性扩 展阿里云GPU服务实例+飞天AI加速工 具，并采用阿里云CPFS存储，运行AI训 练+AI推理作业的操作步骤。 解决问题 1.利用云企业网打通两个地域的VPC， 自建Kubernetes集群 2.使用飞天AI加速工具运行训练和推理 作业 3.使用CPFS存储共享数据 产品列表 云企业网CEN GPU云服务器 并行文件存储CPFS 文件存储NAS
安装 arena 背景信息 Arena是阿里开源的一个管理工具，可以一键提交训练或者推理作业，进行作业管 理。详情请参考：https://github.com/kubeflow/arena/blob/master/docs/installation/INSTALL_FROM_B INARY.md 操作步骤 步骤1 到如下地址，下载 arena安装包：https://github.com/kubeflow/arena/releases 步骤2 拷贝到 ...
EHPC药物筛选
场景描述 本方案适用于使用弹性高性能计算 EHPC和文件存储NAS来搭建基础环 境，运行药物筛选应用AutodockVina 的场景中，这里采用批处理方式来提交 作业，并可以可视化计算结果。 方案架构 1.计算之前，将数据通过互联网/闪电立方/高速通道上传到阿里云OSS 2.计算时，将数据从OSS拉取到文件共享存储NAS上 3.计算时，在EHPC集群上进行，计算节点从NAS上读写数据 • 容量型NAS：低成本，大容量 • 性能型NAS：适合高IOPS应用，作为临时目录 • CPFS：适合超大规模，并行度极高的作业 4.计算节点： • 如果对计算时间不敏感，希望低成本运算，可选ECS实例 • 如果时效性要求高，建议采用SCC超级计算集群 5.可视化 • 如果可视化部分计算量不大，可以采用EHPC自带的可视化服务 解决问题 1.使用EHPC运行药物筛选应用 2.使用nas存储计算数据 3.使用OSS保存计算结果 • 通过分子对接（moleculardocking）模拟计算进行药物筛选，是模拟小分子配体和生物大分子受体的 相互作用，预测配体和受体的结合模式和亲和力。 • 通常，有很多已有的配体库，如商业化的Specs、Enamine和ChemDiv化合物库。提供大量配体，模 拟计算就是计算这些配体和给定受体的相互作用。 • 每次模拟计算通常处理一个配体和一个受体，不同配体之间没有依赖，因此可以同时大规模并行处 理。 本解决方案同样适用于有批量、高并发处理需求的其它生物、医药等场景。 产品列表 弹性高性能计算E-HPC 文件存储NAS 对象存储OSS
http://vina.scripps.edu/ Vina 使用 demo：http://vina.scripps.edu/tutorial.html 我们 EHPC 集 群 使 用 的 Linux CentOS 7.6 的 操 作 系 统，下 载 对 应 的 Vina 版 本：http://vina.scripps.edu/download/autodock_vina_1_1_2_linux_x86.tgz MGLTools 包括 AutoDock Tools(ADT)和 Python Molecular Viewer(PMV)。...
数据湖-在线学习场景数据分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例，使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer，模拟应用中的关键页面，比如登 录、课程内容等，之后构造若干用户使用的模拟 日志数据，投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖（EMR+OSS）搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC云服务器ECS（产品名称）文档模板（手册名称）/阿里云 企业上云实践 数据湖-在线学习场景数据分析 最佳实践 文档版本：20200331 文档版本：20150122（发布日期）2数据湖-在线学习场景数据分析 文档版本信息 文档版本信息 文本信息 ...
移动开发秘籍：云上高效构建App
使用移动研发平台EMAS和研发协同平台云效来提供一站式App的开发、测试、运维、运营等应用全生命周期的管理能力，提升开发效率，降低运维成本。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台方案导读通过EMAS快速开发App方案介绍方案优势方案部署方案权益移动开发秘籍：云上高效构建App本方案使用移动研发平台EMAS和研发协同平台云效来提供一站式App的开发、测试、运维、运营等应用全生命周期的管理能力，提升开发效率，降低运维...
来自：
解决方案
移动开发平台 mPaaS
阿里云移动开发平台 mPaaS提供App开发、测试、运营及运维等云到端的一站式解决方案，帮助企业快速构建高质量的移动应用，阿里云快速开发平台提升企业产品生态发展。
查看详情阅读mPaaS文档，了解更多产品信息产品优势灵活高效降低开发难度，节约时间成本工程化的开发框架可以自动生成初始化代码，还提供模块化开发模式，可分可合，灵活机动。简化接入流程，能够让开发者搭积木似的快速搭建自己的 App。稳定可靠降低开发难度，节约时间成本组件都经历了支付宝高并发，大流量的检验，对弱网...
来自：
云产品
一站式快速开发多平台小程序
本方案使用阿里云多端低代码开发平台魔笔低代码快速搭建适配于多平台的小程序，帮助您提升开发效率、降低维护成本。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台方案导读通过小程序开发企业移动端入口小程序搭建方案对比方案介绍方案优势方案部署方案权益一站式快速开发多平台小程序本方案使用阿里云多端低代码开发平台魔笔低代码快速搭建适配于微信、支付宝等多平台的小程序，帮助您提升开发效率、...
来自：
解决方案
无影云电脑软件开发最佳实践
传统办公电脑和管理方法在应对企业信息安 全方面存在较多的安全风险。随着企业办公向 开发外包、BYOD 等方向发展，保证开发环境 在不同场景、不同终端下的安全可靠，防止核 心数据丢失与泄密，成为企业管理者面临的首 要问题。 无影云电脑为企业软件开发人员提供软硬 一体或 PC+无影客户端的云桌面解决方案，将 所有开发人员的开发工作与普通工作隔离、产 品文档和软件代码在云端进行集中存储和多 副本备份，云终端或 PC 不留存敏感信息，既 有效保障了信息资产的安全性，又满足开发测 试对系统性能的要求。
无影云电脑软件开发 最佳实践 方案设计 场景描述 传统办公电脑和管理方法在应对企业信息安 无影云桌面+无影客户端+传统电脑 全方面存在较多的安全风险。随着企业办公向 开发外包、BYOD等方向发展，保证开发环境 在不同场景、不同终端下的安全可靠，防止核 心数据丢失与泄密，成为企业管理者面临的首 要问题。无影云电脑为...
基于DataWorks的大数据一站式开发及数据治理
概述 基于Dataworks做大数据一站式开发，包含数据实时采集到kafka通过实时计算对数据进行ETL写入HDFS，使用Hive进行数据分析。通过Dataworks进行数据治理，数据地图查看数据信息和血缘关系，数据质量监控异常和报警。 适用场景 日志采集、处理及分析 日志使用Flink实时写入HDFS 日志数据实时ETL 日志HIVE分析 基于dataworks一站式开发 数据治理 方案优势 大数据一站式开发，完善的数据治理能力。 性能优越：高吞吐，高扩展性。 安全稳定：Exactly-Once，故障自动恢复，资源隔离。 简单易用：SQL语言，在线开发，全面支持UDX。 功能强大：支持SQL进行实时及离线数据清洗、数据分析、数据同步、异构数据源计算等Data Lake相关功能 ，以及各种流式及静态数据源关联查询。
创建 DataWorks项目 背景信息 本实践采用 DataWorks的 Stream Studio进行数据开发，DataWorks大数据一站式开 发平台可以和其他的业务流程统一管理，故推荐使用。在上文中，已经通过 CADT开 通了 DataWorks（需开通专业版），还需要创建相关项目：步骤1 登录 DataWorks管理控制台...
多端低代码开发平台魔笔
魔笔是面向全端（Web、H5、全平台小程序、App）场景，模型驱动的低代码开发平台，提供一站式的应用全生命周期管理，包括可视化开发、发布、运维；基于云原生架构的弹性扩展和低成本运维服务，帮助客户高效地解决应用研发、迭代、运维的问题。
1小时教你快速搭建代办事项管理平台！EMAS限时福利放送，超低价体验！浙江广电集团：“10天”成为行业最小创新单位！3小时学会如何使用多端低代码开发平台魔笔.移动研发平台EMAS&多端低代码开发平台魔笔 最新技术文章.应用数量.运行环境.应用数扩展.页面搭建.数据建模.前后端逻辑编排.工作流编排.应用权限.接口集成.接口...
来自：
云产品
DataWorks
大数据开发治理平台 DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎，为客户提供专业高效、安全可靠的一站式大数据开发与治理平台。每天阿里巴巴集团内部有数万名数据/算法工程师正在使用DataWorks，承担集团99%数据业务构建。
全方位覆盖大数据平台的数据存储、数据集成、数据管理与治理、数据开发、数据处理及分析、数据服务、高可用、平台管理、系统运维、数据安全等能力.先进级！阿里云通过信通院数据平台整体解决方案最高等级评测.阿里云一体化大数据智能计算平台ODPS（Open Data Platform and Service）入选世界互联网领先科技成果，10余年来...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您