处理大数据的方法

阿里云 > 云栖社区> 主题地图> C> 处理大数据的方法

处理大数据的方法 相关的博客

大数据处理的核心技术有哪些？大数据平台方法

大数据时代，数据来源途径越来越丰富，而且类型也很多花样，存储和数据处理的需求量很大，对于数据展现也非常的高，并且很看重数据处理的高效性和可用性。 大数据领域已经涌现出了大量新的技术，它们成为大数据采集、存储、处理和呈现的有力武器。想要通过大数据技术获取更多有
sdydata 6年前 1004

干货！处理大数据的技术大盘点

信息技术蓬勃发展，每天都有新产品问世，同时不断地形成新的趋势。这种不断的变化使得信息技术和软件专业人员、开发人员、科学家以及投资者都不敢怠慢，并引发了新的职业机会和有意义的工作。然而，竞争是激烈的，与最新的技术和趋势保持同步是永恒的要求。对于专业人士来说，在全
异步社区 6年前 10628

大数据分析与处理方法介绍

从所周知，大数据已经不简简单单是数据大的事实了，而最重要的现实是对大数据进行分析，只有通过分析才能获取很多智能的，深入的，有价值的信息。那么越来越多的应用涉及到大数据，而这些大数据的属性，包括数量，速度，多样性等等都是呈现了大数据不断增长的复杂性，所以大数据
小旋风柴进 7年前 1242

CIO指南：如何使用SAP HANA平台处理大数据

CIO指南：如何使用SAP HANA平台处理大数据   http://mp.weixin.qq.com/s?__biz=MjM5OTI2MjgyMA==&mid=2651785957&idx=1&sn=a2d234e1decabb69c44be1174
dicksonjin 8年前 2627

外行人看大数据 大数据处理的关键技术

大数据技术，从本质上讲是从类型各异、内容庞大的数据中快速获得有价值信息的技术。目前，随着大数据领域被广泛关注，大量新的技术已经开始涌现出来，而这些技术将成为大数据采集、存储、分析、表现的重要工具。 大数据处理的关键技术主要包括：数据采集、数据预处理(数据清理、
沉默术士 7年前 1394

连载6：阿里巴巴大数据实践：大数据建设方法论OneData

前言： -更多关于数智化转型、数据中台内容请加入阿里云数据中台交流群—数智俱乐部 和关注官方微信公总号（文末扫描二维码或点此加入） -阿里云数据中台官网 https://dp.alibaba.com/index 来源：数智化转型俱乐部 面对爆炸式增长的数据，
数据小冰嘎 4年前 56

Pandas处理大数据的一些小技巧

近期的工作和Hive SQL打交道比较多，偶尔遇到一些SQL不好解决的问题，会将文件下载下来用pandas来处理，由于数据量比较大，因此有一些相关的经验可以和大家分享 近期的工作和Hive SQL打交道比较多，偶尔遇到一些SQL不好解决的问题，会将文件下载下来
知与谁同 7年前 2779

《智能数据时代：企业大数据战略与实战》一1.4　大数据处理的微妙之处

.本节书摘来自华章出版社《智能数据时代：企业大数据战略与实战》一书中的第1章，第1.4节，作者 TalkingData ，更多章节内容可以访问云栖社区“华章计算机”公众号查看 1.4　大数据处理的微妙之处 处理不同类型数据的方式正趋于一致，因为进行数据处理的
华章计算机 7年前 1095

处理大数据的方法 相关的问答

关于mysql处理大数据的办法

一个超过1000W条的数据，现在需要手动置顶这些帖子，默认顺序按时间排序。 比如1000W中有一个id为222的。如果我手动自动这个222，他就需要到最前面去，其他的还是按时间排序，因为有原因，所以无法在加字段，只能通过连表，但是连表数据量太大，慢查询太多。
落地花开啦 8年前 728

[@倚贤][¥20]Java对于大数据处理有没有好的方法？一直都只接触python处理海量数据，但是应该处理数据不可能仅仅局限于一种语言，或者说Java在这方面是不是存在某种缺陷。

问题来自Java技术沙龙的杨文庆 Java技术沙龙报名链接：https://yq.aliyun.com/promotion/796
李博 bluemind 6年前 380

大数据时代——数据存储技术百问

如今计算机已经渗透到企业运作的各个角落，企业依靠所存放的这些业务数据进行决策，因此企业如何存放数据成为企业信息系统的重中之重，这也掀起了如今的存储热潮。根据不同的应用环境通过采取合理、安全、有效的方式将数据保存并能保证有效的访问需要更高要求的存储模式。 ![
yq传送门 7年前 31045

最好的优化数据库联表查询结果的方法

大家都知道传统的数据库比如mysql或者sqlite，mssql等，都有一个非常蛋疼的问题：因为只能使用简单2维数组的方式返回结果，所以结果集表里面充斥大量的重复数据，并且表与表之间的多对一或者一对多等关系也因为联表了不容易看出来。 这冗余的数据占带宽也就算
蛮大人123 8年前 768

[问题] 阿里云国际站的VPC底下云数据库MongoDB內数据，传输至阿里云中国站的MaxCompute方法?

请问下，阿里云国际站的亚太东南3可用区A的MongoDB数据可以传输至中国站华东2的MaxCompute吗? 目前专案要将海外资料做语意分析PAI处理，需要将国际站资料汇入中国站PAI平台上，目前是考虑传输到MaxCompute上，或是有其他更好方法? 请提供
snowjj 7年前 831

数据存在(重复)检测

暂时能想到三个方法 1.交给数据库处理，数据库设置 UNIQUE 2.交给数据库处理，每次 INSERT 之前执行 SELECT, 但这样随着数据增大 SELECT 次数会不断增加 3.交给语言处理，将已有数据存在数组中，用 in_a
爵霸 8年前 645

MaxCompute百问集锦（持续更新20171011）

![fd7e5655f16e03d1198dc492cead625bbfb9af58_jpeg](https://yqfile.alicdn.com/ee78085f2e6a147c3fffcc95038b11a73c609bf1.jpeg) 大数据计算服务
隐林 7年前 36996

在关系型数据库中频繁使用 JSON 格式来存储不需要索引的数据好么？

最近在设计一些复杂的 MySQL 数据库表。 碰到一些需要存储用户所得成就、用户所得称号、用户消息之类的数据的需求。 感觉这类数据其实可以直接用 JSON 格式存储在 user_meta 表的 text 类型字段里。 而不需要设计过于复杂的表。 当然并
蛮大人123 8年前 1029

相关主题

大数据处理方法 数据分析的方法 常见的数据分析方法 数据分析的基本方法 RDS 大数据量的处理 mysql连接数据库的方法 数据迁移的四种方法 解决问题的方法 java连接mysql数据库的方法 表格的制作方法 报表的制作方法 分析问题的具体方法 数据处理 大数据处理培训 大数据量处理 大数据处理公司 大数据处理技术 攻击服务器的方法 set的使用方法 数据库处理 数据处理分析 数据分析处理 数据分析 处理 处理海量数据 数据图像处理 数据图像处理 数据预处理 数据恢复方法 数据分析方法 数据分析 方法 hadoop 大数据处理 python的安装环境搭建方法 云服务的使用方法 虚拟机的使用方法 安装caffe失败的解决方法 大数据处理技术培训 物联网大数据处理 RDS 处理大数据量 RDS 大数据量处理 mysql数据处理 lisp 网络 npapi封装dll 10000网上人工服务器 linux主机名小写转大写 网络工程职称 jscharts中文api 香港云主机20元 python openssl 证书 file api 上传 exsi5.5主机无响应