api大数据

_相关内容

API概览

GetMmsDataSource 获取单个数据源详情 获取单个MMA数据源详情 ListMmsDataSources 列出数据源 列出MMA数据源 UpdateMmsDataSource 更新数据源配置、启/停数据源实例 重新拉取MMA数据源的元数据 DeleteMmsDataSource 删除数据源 删除MMA数据...

CreateDataServiceApiAuthority-新增数据服务API授权

调用CreateDataServiceApiAuthority新增数据服务API授权。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求...

授权API

API发布后,您可以将API授权给他人,或获取他人已授权的API,以实现数据共享。本文为您介绍如何对API进行授权及不同场景下API的授权方案。前提条件 仅支持对已发布的API进行下线、授权和变更协议等操作,详情请参见 发布API。进入API管理...

注册API

API编辑页面的右侧导航栏中,单击 版本,找到待申请版本单击 申请发布 跳转到申请页面,申请类型默认为 发布数据服务API,填写 申请原因 后单击 申请权限 完成发布申请。说明 工作空间定义审批流后需要走流程审批才可以发布API,详情请...

API概览

本产品(大数据开发治理平台 DataWorks/2020-05-18)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...

MapReduce API

本文为您介绍MapReduce API,帮助您理解如何使用它来高效处理和分析规模数据集。PyODPS DataFrame支持MapReduce API,您可以分别编写 map 和 reduce 函数(map_reduce 可以只有 mapper 或者 reducer 过程)。wordcount 的示例如下。...

数据服务常见问题

场景 数据服务资源组类型 独享数据服务资源组 公共数据服务资源组 实例模式 同租户访问RDS 数据服务API能够正常编辑和保存 数据服务API能够正常编辑和保存 跨租户访问RDS 数据服务API能够正常编辑和保存 保存API时报错:存在安全风险,需要...

API概览

本产品(emr-serverless...Gateway API 标题 API概述 Kyuubi Gateway Kyuubi Gateway ListKyuubiSparkApplications 获取Kyuubi提交的Spark应用详情列表 ListKyuubiSparkApplications CancelKyuubiSparkApplication 取消Kyuubi提交的Spark应用 ...

数据服务审批策略

支持管理员从DataWorks空间级别为每次发布的数据服务API定义发布审批流程。使用限制 企业版的DataWorks支持使用数据服务审批策略。新建审批策略 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运...

测试API

在生成API时,如果需要将API发布至API网关进行托管,您需要完成对API的测试,验证调用API时的请求参数和返回结果是否符合预期;同时您也可以对已发布的API进行测试。本文为您介绍如何测试开发中和已发布的API。背景信息 API测试本质上是...

ListComponents-查询组件列表

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...

发布API

如果您的API是为了供自己的应用程序调用,需要在API网关中创建应用,将API授权到应用中,然后通过AppKey和AppSecret加密签名调用,详情请参见 客户端调用API示例。同时API网关提供了主流编程语言的SDK,您可以快速集成API至自己的应用中,...

GetMmsDb-获取数据源内的某个库

获取MMA数据源内的某个库 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中...

ListMmsDbs-获取数据源内的"数据库"列表

列出MMA数据源内的库 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用...

RestAPI(HTTP形式)数据

实践2:读取一个接口数据,该接口为一个分页的RestAPI接口。实践3:读取一个接口数据,该接口为POST类型的RestAPI接口。实践4:循环某请求参数读取RestAPI接口。常见问题 只能指定好请求数据的翻页次数吗?解答:是的。是否支持自动翻页,...

ListMmsTables-列出数据源内的表

列出MMA数据源内的表 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用...

创建及管理API标签

本文为您介绍如何对API进行新建、添加、查看和删除标签等操作。背景信息 数据服务为生成API、注册API、部署API和工作流程提供打标功能,便于您对API进行有效的分类和搜索。API标签属于工作空间级别的功能,即在同一工作空间内仅存在并维护...

开放存储SDK示例-Python SDK

MaxCompute支持第三方引擎(如Spark on EMR、StarRocks、Presto、PAI和Hologres)通过SDK调用Storage API直接访问MaxCompute数据,本文为您介绍使用Python SDK访问MaxCompute的代码示例。MaxCompute提供了开放存储相关接口,详情请参见 ...

API概览

本文为您介绍阿里云E-MapReduce提供的集群、集群服务、弹性伸缩等的API接口及说明。集群 API 描述 创建集群 调用CreateClusterV2接口,创建一个E-MapReduce集群。说明 如果您在2022年12月19日17点(UTC+8)以后第一次创建EMR集群,无法使用...

相关限制

本文介绍使用数据质量API以及配置Spec时的相关限制。DataQualityScan Spec 限制 Datasets Datasets最多只能设置一个。tables只能支持一个,暂时不支持通配符。filter的配置对应按照WHERE条件指定数据范围。说明 MaxCompute分区表一定要指定...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...

RestAPI Reader最佳实践

实践2:读取一个接口数据,该接口为一个分页的RestAPI接口 示例场景:接口定义 本实践示例的场景为读取一个RESTful接口数据并写入一个MaxCompute分区表中,其中使用的示例RESTful接口为一个自建的测试GET接口,本示例的接口详情如下。...

CreateDataset-创建数据

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...

加速服务

数据服务支持对部分数据源表的查询提供加速能力,加速能力包含DataWorks数据服务提供的加速能力和MaxCompute本身支持的加速方案(MCQA)。通过使用加速服务,您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用...

开放API(OpenAPI

DataWorks开放平台提供OpenAPI能力,通过调用DataWorks的OpenAPI使用DataWorks的各项功能,实现应用和DataWorks的集成和交互。背景信息 DataWorks的OpenAPI提供100多个API功能,通过调用API,可以快速进行批量操作和系统集成对接等工作,...

元数据采集

代码来源 采集口径 触发采集方式 数据开发 数据开发-创建节点并编辑代码 自动采集 数据开发(旧版)数据开发(旧版)-创建节点并编辑代码 数据分析 数据分析-新建SQL查询并编辑代码 数据服务 数据服务-新建API数据推送服务 API资产 数据...

查看计量大屏

数据服务提供了计量大屏功能,您可以通过该功能查看各类可视化图表和统计数据,包括工作空间下的API总数、总调用次数以及总执行时长用量等信息,帮助您全面了解API的调用情况。同时,您也可以针对单个API查看监控图表,获取API网关状态码、...

ListDataServiceApiAuthorities-获取授权给他人的API...

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ProjectId long 是 工作...

使用Aviator函数作为过滤器的最佳实践

应用场景 如果将函数设置为API的前置过滤器,当API被调用时,函数可以对API的请求参数进行预先处理。如果将函数设置为API的后置过滤器,当API被调用时,函数可以对API的返回结果进行二次加工和改造。操作指南 函数的创建、测试、提交、发布...

GetMmsPartition-获取数据源内的某个分区

获取MMA数据源内的某个分区 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素...

CreateDatasetVersion-创建数据集版本

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...

DataWorks数据服务创建API时无法选择资源组

问题描述 DataWorks数据服务创建API时无法选择资源组。问题原因 Serverless资源组数据服务CU限制默认为0,需要为Serverless资源组的数据服务用途分配CU。解决方案 进入资源组列表页面。登录 DataWorks控制台,切换至目标地域后,单击左侧...

配置API过滤器(函数)

数据服务支持您编写函数,并将函数关联至API,使得函数可以作为API的过滤器使用,对API的请求参数或返回结果进行加工处理。本文为您介绍函数功能。使用限制 您需要购买DataWorks基础版及以上版本,才可以使用过滤器功能。Python函数正在...

调用API

API发布并授权之后,您可以通过简单身份认证(在请求头中添加AppCode)或加密签名身份认证(在请求头中添加AppKey和AppSecret)的方式调用API。本文为您介绍如何获取认证信息以及调用API的具体流程。前提条件 您需要首先发布APIAPI网关...

ListDoctorHDFSDirectories-批量获取HDFS目录分析结果

接口说明 list Doctor HDFSNodes 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action...

GetApiTemplate-查看API模板内容

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...

ListDoctorHiveTables-批量获取Hive表分析结果

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...

开放存储SDK示例-Java SDK

MaxCompute支持第三方引擎(如Spark on EMR、StarRocks、Presto、PAI和Hologres)通过SDK调用Storage API直接访问MaxCompute数据,本文为您介绍使用Java SDK访问MaxCompute的代码示例。概述 使用Java SDK访问MaxCompute的主要接口如下。...

GetDoctorHDFSCluster-获取HDFS分析结果

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...

GetDoctorHiveTable-获取Hive表分析结果

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用