开源大数据平台 E-MapReduce 相关资源
阿里云大数据平台 E-MapReduce 提供详细的产品文档，面向开发者提供全方位的服务，有免费的实验课程和解决方案体验馆，帮助您快速上手。在阿里云 E-MapReduce 开发者社区，您可以和更多开发者交流。
API提供全方位的API查询、文档和调用等，助您快速通过API使用开源大数据平台E-MapReduce，便捷完成二次开发。SDK为开源大数据平台E-MapReduce的每种开发语言提供专业的在线调试、部署指南和丰富的场景化示例，帮助您简化OpenAPI的使用过程。镜像站170+开源软件镜像查看更多资源编排 ROSIaC 自动部署云资源查看更多WebIDE云...
来自：
云产品
基于函数计算FC实现阿里云Kafka消息轻量级ETL处理
在大数据ETL场景，Kafka是数据的流转中心，Kafka中的数据一般是原始数据，可能存在多种数据混杂的情况，需要进一步做数据清洗后才能进行下一步的处理或者保存。利用函数计算FC，可以快速高效的搭建数据处理链路，用户只需要关注数据处理的逻辑，数据的触发，弹性伸缩，运维监控等阿里云函数计算都已经做了集成，函数计算FC也支持多种下游，OSS/数据库/消息队列/ES等都可以自定义的对接
创建函数前必须先创建服务，服务就像函数的集合，同一个服务下的所有函数共享一些相同的设置，例如服务授权和日志配置等。文档版本：20240408 8 基于函数计算 FC实现阿里云 Kafka消息轻量级 ETL处理 场景验证 服务名称：根据实际业务自行填写。服务角色：默认选择 AliyunFcDefaultRole，如果下拉框没有，可以点击创建默认 ...
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景，企业的Kafka实例可能存在多种情况，比如使用阿里云Kafka服务，可能是自建开源Kafka，或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例，在这个前提下Kafka实例之间可能会需要消息同步的情况： 同帐号容灾场景：比如Kafka实例都是阿里云Kafka，但是Kafka实例会有主备之分，需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾：这类场景比如主Kafka是阿里云Kafka，备Kafka是IDC开源自建Kafka，或者是其他云上的Kafka。 不同业务之间消息同步：因为现在的业务通常不会是信息孤岛，都需要消息互通，所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例，并且这两个Kafka实例归属不同的RAM角色，有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题（重试机制，容错机制，死信队列等）。 大幅提升构建消息同步架构的效率，降低构建复杂度问题。
创建函数前必须先创建服务，服务就像函数的集合，同一个服务下的所有函数共享一些相同的设置，例如服务授权和日志配置等。文档版本：20240330 13基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步 部署基础环境 服务名称：根据实际业务自行填写。 服务角色：默认选择AliyunFcDefaultRole，如果下拉框没有，...
智能商业分析 Quick BI
瓴羊智能商业分析 Quick BI 是阿里云用户臻选的数据可视化工具，大幅提升数据分析和报表开发效率，一站式满足企业各种场景的数据分析和决策的诉求。
利用这种能力，您可以对海量数据进行实时在线分析服务，同时支持拖拽式操作和丰富的可视化效果，使数据分析、业务数据探查、报表制作等工作变得轻松自如。在具体的操作过程中，您需要先确保已开通 MaxCompute 和 Quick BI，并将它们绑定至 DataWorks 项目空间。然后，在 MaxCompute 中准备好数据源，这些数据可以是新建的表...
来自：
云产品
SAE-ACK应用双跑最佳实践
场景描述 实现ACK、SAE中部署的应用在东西向和南北向互通，实现SAE-ACK应用双跑。 应用场景 该最佳实践应用于两类场景： l 因为SAE支持更丰富自动扩缩指标（比如QPS，RT，TCP连接数等），所以将相对稳态的应用部署在ACK中，将相对弹性波动大的应用部署在SAE，借助SAE更强大的自动扩缩应对流量洪峰。 l 将K8s架构迁移到Serverless架构时，需要平滑过渡，所以该最佳实践中的双跑架构可以有效帮用户平滑的完成迁移。
阿里云微服务引擎（MSE）解决问题 阿里云容器服务（ACK） 安全组 因为K8s的HPA设置相对复杂，默认提供 云速搭CADT 的CPU和内存不能满足实际需求（尤其是 Java技术栈），所以可以将弹性波动大的服 务部署在SAE，借助SAE更丰富的HPA规 则应对流量脉冲。 K8s架构向Serverless架构迁移的平滑过 渡。最佳实践...
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景，将Kafka中的消息流转到其他下游服务是很常见的场景，除了常规的消息流转外，很多场景还需要基于消息体内容做判断，然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后，会自动触发函数计算中的函数，接收到消息，对消息内容做判断，然后再操作MongoDB。用户可以对提供的默认函数代码做修改，来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品，并完成了大多数的配置，用户只需要到函数计算和MongoDB控制台做少量配置即可。
创建函数前必须先创建服务，服务就像函数的集合，9 文档版本：20240304 基于函数计算 FC 实现阿里云 Kafka 消息内容控制 MongoDB DML 操作 部署基础环境 同一个服务下的所有函数共享一些相同的设置，例如服务授权和日志配置等。l 服务名称：根据实际业务自行填写。l 服务角色：默认选择 AliyunFcDefaultRole，如果下拉框...
基于SpringCloud应用玩转MSE实践
随着业务不断创新，大型的单个应用和服务会被拆分为数个甚至数十个微服务，微服务架构已经被广泛应用。 微服务的好处在于快速迭代，如何在迭代过程中保障线上流量不受损。依赖开源产品缺少无运维工具，常常需要投入较大的运维人力和成本。 本实践提供基于云原生应用产品提供微服务注册配置中心、微服务治理和云原生网关等一系列高性能和高可用的企业级云服务能力。
微服 务的好处在于快速迭代，迭代过程保障线上流量不受损。依赖开源产品缺少专业运维工具，常常需要投入较大的运 维人力和成本。本实践基于云原生应用产品提供微服务注册配置中心、微 服务治理和云原生网关等一系列高性能和高可用的企业级 云服务能力。方案优势 本实践通过云速搭CADT，一键完成基础环境的搭建和部 署，提供...
互联网电商行业离线大数据分析
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示，如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示，效果震撼，触控大屏支持用户自助查询数据，极大地增强数据的可读性。
互联网电商行业离线大数据分析 最佳实践 业务架构 场景描述 本实践介绍了使用阿里云MaxCompute、数据库（RDS）、DataWorks等产品实现电商网站离线数据分 析，分析后的业务指标数据实时在大屏展示。通过完整 的实践Demo为例，提供从电商网站搭建，数据从RDS 同步到MaxCompute、再到DataWorks进行数据分析，最后在大屏上展示...
分布式身份服务
分布式身份服务 DIS 通过蚂蚁区块链，安全的存储个人和企业用户的身份信息，并在保护隐私的情况下为用户、用户信息提供方、用户信息使用方提供身份标识和信息交互，使得企业和机构可以更合规的使用和管理用户身份信息及数据授权，而身份信息的真实性得到了极大的保障。
为上链应用提供链上链下数据交叉核验，保证链上流转数据可信扩展，并提供通用的、隐私保护的数据分析能力，支持多方业务数据融合和治理，适用于金融风控、数字物流等场景.跨链数据连接服务 ODATS.是利用蚂蚁区块链领先技术实现的跨链数据连接服务。通过制定标准化的区块链UDAG全栈跨链协议，保证跨链交易的安全性、可扩展性...
来自：
云产品
可信计算服务
可信计算服务C3S为上链应用提供链上链下数据交叉核验，保证链上流转数据可信扩展，并提供通用的、隐私保护的数据分析能力，支持多方业务数据融合和治理，适用于金融风控、数字物流等场景。
可信计算服务 C3S（Blockchain Confidential Computing Service）为链上应用提供链上链下数据交叉核验，保证链上流转数据可信扩展，并提供通用的、隐私保护的数据分析能力，支持多方业务数据融合和治理，适用于金融风控、数字物流等场景.可信计算服务 C3S.可信计算服务 C3S（Blockchain Confidential Computing Service）为...
来自：
云产品
远程办公-AD管控下的弹性云桌面
在弹性云桌面中部署企业基础办公环境时，IT人员通常会面临以下问题，本文希望通过场景实践的方式，示范如何结合使用不同阿里云产品，来解决这些问题：用户如何管理？企业已有AD用户如何上云？云上共享文件服务权限怎么管？数据安全问题有保障吗？该如何设置？云桌面能使用本地机房或IDC中的服务吗？ 本文使用的应用场景： 场景1：客户A在云上新建Windows ActiveDirectory（以下简称AD）；弹性云桌面，和NAS文件存储服务部署在AD所在的VPC内。场景2：客户B在阿里云上已有AD和NAS。弹性云桌面创建在与AD不同的VPC中。AD与云桌面的VPC通过CEN连接。场景3：客户C在云下IDC有自建AD和文件服务。弹性云桌面创建在阿里云上。云下机房与阿里云弹性云桌面所在VPC通过IPsec VPN连接。 方案优势： 易部署：弹性云桌面支持快速便捷的桌面环境创建、部署、统一管控与运维。 CEN和VPN网关服务开通即用，配置实时生效，快速完成部署。 低成本：弹性云桌面无需前期传统硬件投资，帮您快速构建安全、高性能、低成本的桌面办公体系。可广泛应用于具有高数据安全管控、高性能计算等要求的金融、设计、视频、教育等领域。VPN网关基于Internet建立加密通道，比建立专线更便宜，快速实现混合云。 安全性：VPN网关使用IKE（秘钥交换协议）和IPSec对传输数据或进行加密，保证数据安全可靠。云桌面自带的安全策略保证数据不落地。 集中管控：通过Windows AD对云桌面用户和共享文件服务进行统一权限管控。可实现AD用户自动同步上云，和文件级别的权限管控。
文档版本：20201210 107 远程办公-AD管控下的弹性云桌面最佳实践 附录 4：云桌面相关 API 附录 4：云桌面相关 API 如果您熟悉网络服务协议和一种以上编程语言，推荐您调用 API管理您的云上资源 和开发自己的应用程序。尤其是当需要维护大量桌面实例的场景中，合理使用 API 将大大提升维护的效率和质量。云桌面 API概览：...
医学NLP
对医学领域文本内容进行分析，识别文本中的医学术语及属性。目前支持16种核心医学实体、6种医学属性的抽取。 医疗大数据是医疗前沿重要的发展方向，大数据与医疗结合，不仅会提升临床诊疗效果，还会对保险、药品研发等多个医疗健康领域产生深远影响。 但医疗大数据面临严重的质量问题，主要体现在数据统一性、完整度、准确性三个方面。因此，要想将大数据与医疗深度结合，底层数据和上层应用能力都必不可少。
在近百项目中落地应用，实战经验丰富.标准化接口封装，大大降低研发人力投入.更多产品与服务.服务于医生、医院和卫计委的电子病案质控解决方案，辅助医生及时发现病历书写中的缺陷，全面提病历质量.服务于医生、医院、卫计委和患者端的全链接辅助诊疗解决方案。辅助诊疗系统可帮助医院优化诊疗流程、提高诊疗效率和全面提高...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您