同时又能通过开发实际数据分析项目，积累实战经验，提升就业竞争力。说明 本计划将根据云工开物项目的最新政策动态调整，如有变更事项将另行通告。产品介绍 产品名称 产品定位 产品优势 功能特性 经典案例 DataV-Board DataV-Board是DataV...
需求分析 项目不做数据开发，需要分析的数据在其他项目中。为避免不同主账号资源隔离，本项目的Owner必须与数据开发生产项目的Owner为同一账号。项目主要完成数据查询、下载，需要每个成员用自己的权限进行数据查询、下载。需要设置项目的 ...
DataWorks提供项目所有者、空间管理员、数据分析师、开发、运维、部署、访客、安全管理员、模型设计师、数据治理管理员等多种角色，本文将为您介绍具体角色的权限说明。DataWorks提供的空间预设角色默认拥有所有空间级模块的可读权限，但...
指标名称 字段来源 业务规则 系统架构分析 概括当前项目数据开发总体的流程和范围。测试过程管理 测试版本控制 代码从测试环境发布至开发环境后，需描述此部分。项目交付测试通过后，每天上午9点、下午3点接受开发提交的新版本，其他时间...
2022年2月21日21点起，E-MapReduce（简称EMR）数据开发功能停止更新，进入维护状态，会影响创建项目、新建和运行作业、工作流、数据开发运维等功能。如果您还在使用数据开发功能，请尽快迁移到DataWorks构建数据开发平台。本文为您介绍数据...
背景信息 Python是机器学习和AI模型开发的主流编程语言，提供了丰富的科学计算和可视化库，如NumPy（N维数组运算）、Pandas（数据分析）、Matplotlib（2D绘图）和Scikit-Learn（数据分析和挖掘算法）。同时，Python还支持TensorFlow、...
背景信息 除了项目目录外，Data Studio还提供了个人目录和手动目录，以满足不同的开发需求，帮助您在各种业务场景下高效进行数据开发和管理。以下是对这三种类型目录的对比，您可以根据具体需求选择合适的目录进行开发。目录类型 权限范围 ...
物联网数据分析的数据开发任务是使用标准的SQL语句对设备进行数据分析，而API服务可将数据开发任务封装成API，方便开发者调用。API服务既可以直接响应设备端请求，也可以用于服务端数据对接。创建数据分析任务 登录数据分析控制台，单击 ...
阿里云EMR Workbench是一个综合性的大数据分析和开发环境，作为阿里云E-MapReduce的一部分，它提供了EMR Notebook和EMR Workflow两个核心功能。通过EMR Workbench，您可以轻松进行数据开发，以及交互式数据分析，并设计复杂的数据处理工作...
数据源 用于生成可视化图表或进行数据分析的原始数据来源。您可将自有数据库（例如，RDS MySQL数据库）接入DataV-Note，作为DataV-Note的 数据源，接入后可在项目中对数据源中的表进行分析。项目数据集 在分析过程中产生的中间结果数据，...
EMR Notebook是一个Serverless化的交互式数据分析和探索平台，满足大数据和AI融合下的数据处理需求，为数据工程师、数据分析师和数据科学家提供了可视化的应用程序开发环境。通过EMR Notebook可以完成对SQL、Python、Markdown等多种语言...
Sugar BI是百度智能云推出的敏捷 BI 和数据可视化平台，MaxCompute支持您将MaxCompute项目数据接入Sugar BI，帮助您轻松完成数据分析和数据可视化工作。本文为您介绍如何使用Sugar BI连接MaxCompute项目，并进行可视化数据分析。前提条件 ...
您可参考 Spark官方文档 自定义全局Spark参数，并配置全局Spark参数的优先级是否高于指定模块内（数据开发、数据分析、运维中心）的SPARK参数。本文为您介绍如何设置全局Spark参数。背景信息 Apache Spark是用于进行大规模数据分析的引擎。...
通过本教程，您可以了解如何使用DataWorks和EMR产品组合进行大数据开发和分析，并通过用户画像分析案例体验...消费数据 用户画像分析完成后，使用数据分析模块，将加工后的 数据可视化展现，便于您快速提取关键信息，洞察数据背后的业务趋势。
创建Hologres数据源 数据开发、数据分析环境准备 基于DataWorks进行Hologres调度任务前，您需先将Hologres实例创建为工作空间的数据源并绑定至数据开发（DataStudio）。绑定后，才可使用该数据源进行相关数据开发、数据分析、周期性调度...
消费数据 用户画像分析完成后，使用数据分析模块，将加工后的 数据可视化展现，便于您快速提取关键信息，洞察数据背后的业务趋势。获取最终加工后的数据后，使用数据服务模块，通过标准化的 API数据服务 接口，实现数据的共享与应用，为...
通过本教程，您可以了解如何使用DataWorks和EMR产品组合进行大数据开发和分析，并通过用户画像分析案例体验...消费数据 用户画像分析完成后，使用数据分析模块，将加工后的 数据可视化展现，便于您快速提取关键信息，洞察数据背后的业务趋势。
消费数据 用户画像分析完成后，使用数据分析模块，将加工后的 数据可视化展现，便于您快速提取关键信息，洞察数据背后的业务趋势。获取最终加工后的数据后，使用数据服务模块，通过标准化的 API数据服务 接口，实现数据的共享与应用，为...
本文为您介绍如何使用Quick BI连接MaxCompute项目，并进行可视化数据分析。背景信息 智能分析套件 Quick BI 是一个专为云上用户设计的易上手且性能强的大数据分析平台，不仅是业务人员查看数据的工具，更是数据化运营的助推器。前提条件 在...
支持的数据源及同步方案 数据开发、数据分析 环境准备 基于DataWorks进行计算引擎任务周期性调度前，您需先将集群添加至DataWorks。添加后，才可使用该集群进行相关数据开发、数据分析、周期性调度运行任务等操作。注册CDH或CDP集群至...
MaxCompute支持您将MaxCompute项目数据接入Yonghong BI，帮助您轻松完成数据分析和数据可视化工作。本文为您介绍如何连接Yonghong BI和MaxCompute项目，并进行可视化数据分析。背景信息 Yonghong Desktop是一款桌面智能数据分析工具，基于...
2024-04-10 全部地域 TIMESTAMP_NTZ数据类型 03月 功能名称 功能描述 发布时间 发布地域 相关文档 镜像管理功能发布 MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用...
IoT Studio中可通过个人、授权或公开解决方案创建项目，该项目中会自动创建并复制解决方案中的应用、服务或产品配置，您可根据实际需求修改相关配置，完成项目开发。您也可根据解决方案内容，自行创建并开发项目。本文主要介绍使用个人、...
自然语言生成SQL 场景：初级开发或数据分析师需要编写复杂的SQL查询，耗时且容易出错。实现：创建一个SQL生成工具，输入“查询近30天内所有活跃用户的平均消费金额”，AI自动生成准确的SQL代码。企业私有知识库 场景：将存储在数据库中的...
支持的数据源及同步方案 数据开发、数据分析 环境准备 基于DataWorks进行计算引擎任务周期性调度前，您需先将集群添加至DataWorks。添加后，才可使用该集群进行相关数据开发、数据分析、周期性调度运行任务等操作。注册EMR集群至DataWorks ...
MaxCompute支持您将MaxCompute项目数据接入网易有数BI，帮助您轻松完成数据分析和数据可视化工作。本文为您介绍如何使用网易有数BI连接MaxCompute项目，并进行可视化数据分析。背景信息 网易有数BI是新一代敏捷数据可视化分析平台，是包含...
时段1：30 时段2：250 时段1：300 时段2：250 运营分析项目 时段1：00:00:00~09:00:00 时段2：09:00:00~23:59:59 考虑到上述业务的特点，对应配额组 预留CU量 的 maxCU 都进行了限制，避免严重影响其他配额组的最低保障值。设计配额组时，...
SQL窗口介绍 SQL Console初体验 SQL Console新交互模式下变更表数据和结构 数据工作站 数据集成 离线集成是一种低代码开发数据加工任务的工具，可以组合各类任务节点形成数据流，通过周期调度运行达到数据加工、数据同步的目的。...
本文为您介绍在数据开发（Data Studio）的组件管理界面，如何创建组件，并进行组件的分享、升级、查看组件引用记录等管理操作。组件介绍 在MaxCompute实际业务实践中，存在大量类似的SQL代码过程，过程中输入表和输出表的结构一致或结构...
创建E-MapReduce集群后，您可以在数据开发中创建项目，并在项目中进行作业的编辑和工作流的调度。新建项目之后，您可以对项目进行管理，为项目关联集群资源、添加项目成员以及设置全局变量。前提条件 已创建集群，详情请参见 创建集群。...
数据分析：即时快速分析 数据分析基于“人人都是数据分析师”的目标，旨在为更多非专业数据开发人员，如数据分析、产品、运营等工作人员提供更加简洁高效的取数、用数工具，提升大家日常取数分析效率。功能概述 数据分析支持基于个人视角的...
MaxCompute支持您将MaxCompute项目数据接入FineBI，帮助企业的业务人员和数据分析师开展以问题为导向的探索式分析工作。本文为您介绍如何通过MaxCompute JDBC驱动，连接FineBI和MaxCompute项目，并进行可视化数据分析。背景信息 FineBI是帆...
在数据 开发 页面，单击项目名称后的 图标，选择数据开发的项目空间（Dev 或 Basic 项目）。如果您当前访问的是 Dev 或 Basic 项目，且项目空间为您的数据开发空间，则不需要选择项目空间。在数据 开发 页面，将鼠标悬停在顶部菜单栏的 ...
说明 部分DataWorks功能模块（例如，数据质量、数据开发、数据分析）触发的任务没有实例ID，平台会展示为中划线（-）。EMR作业类型：仅支持查看 MAPREDUCE 及 SPARK 类型的作业。运行时间排序：您可对 开始时间 或 结束时间，进行升序或降...
创建完成后，可在DataWorks的各功能模块使用该计算资源连接Hologres实例，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已 购买Hologres实例 并 创建数据库。重要 购买Hologres实例时，请确保其与DataWorks工作空间位于同一...
您可参考 设置全局Spark参数 来自定义全局的SPARK参数，并设置全局参数的优先级是否高于特定模块（如数据开发、数据分析和运维中心）内的局部参数。以下将为您介绍如何设置全局SPARK参数。背景信息 Apache Spark是一个用于大规模数据分析的...
通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio还支持丰富多样的插件生态，实现实时离线一体化、湖仓一体化、大数据AI一体化，助力“Data+AI”全生命周期的数据管理。Data Studio介绍 Data Studio是智能湖仓一体...
通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio还支持丰富多样的插件生态，实现实时离线一体化、湖仓一体化、大数据AI一体化，助力“Data+AI”全生命周期的数据管理。Data Studio介绍 Data Studio是智能湖仓一体...
创建完成后，可在DataWorks的各功能模块使用该计算资源连接AnalyticDB for MySQL3.0集群，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已 创建AnalyticDB for MySQL3.0集群。说明 建议购买AnalyticDB for MySQL3.0集群时，...
2023-08-02 产品规格 购买方式 2023年07月 项目管理 功能名称 功能描述 发布时间 相关文档 数据资产关联 在应用和业务逻辑开发中，如需使用数据服务自定义API和数据表等数据资产，必须先在IoT Studio项目中进行关联。2023-07-31 项目 2023...