到量数据

阿里云 > 云栖社区> 主题地图> D> 到量数据

到量数据 相关的博客

大数据量数据库的简单备份迁移数据技巧

今天真汗颜啊。。。。由于我的一不小心，我把几百万条数据给删了，囧。客户的几年重要数据就这样没了，我当时愁的，还好后来找回来了。 对于大数据的操作，大家一定要慎重操作。 在SQLServer2005中，想从一个数据库服务器迁移一个数据表的数据到另一数据库服务器的
科技小先锋 8年前 1223

一次性集中处理大量数据的定时任务，如何缩短执行时间？

作者：58沈剑 问题抽象： （1）用户会员系统； （2）用户会有分数流水，每个月要做一次分数统计，对不同分数等级的会员做不同业务处理； 数据假设： （1）假设用户在100w级别； （2）假设用户日均1条流水，也就是说日增流水数据量在100W级别，月新增流水在
Java架构师追风 6年前 796

从SQL Server到MySQL，近百亿数据量迁移实战

沪江成立于 2001 年，作为较早期的教育学习网站，当时技术选型范围并不大：Java 的版本是 1.2，C# 尚未诞生，MySQL 还没有被 Sun 收购，版本号是 3.23。工程师们选择了当时最合适的微软体系，并在日后的岁月里，逐步从 ASP 过度到 .ne
技术小能手 8年前 7605

存储大量爬虫数据的数据库，了解一下？

"当然, 并不是所有数据都适合" 在学习爬虫的过程中, 遇到过不少坑. 今天这个坑可能以后你也会遇到, 随着爬取数据量的增加, 以及爬取的网站数据字段的变化, 以往在爬虫入门时使用的方法局限性可能会骤增. 怎么个骤增法? Intro 引例 在爬虫入门的时候,
fesoncn 8年前 3336

如何解决PHP里大量数据循环时内存耗尽的问题

最近在开发一个PHP程序时遇到了下面的错误： PHP Fatal error: Allowed memory size of 268 435 456 bytes exhausted 错误信息显示允许的最大内存已经耗尽。遇到这样的错误起初让我很诧异，但转眼一想，
行者武松 8年前 1129

CYQ.Data 轻量数据层之路 优雅V1.4版本 框架开源

开源说明 本次开源针对最新版本V1.4版本,相关更新见：CYQ.Data 轻量数据层之路 优雅V1.4 现世 附API帮助文档(九) bug反馈、优化建议、及最新框架版本下载见：CYQ.Data 轻量数据层之路 bug反馈/优化建议/框架下载 相关产品 1：配
泡泡浅眠 8年前 1112

phalapi-进阶篇6(解决大量数据存储数据库分表分库拓展)

phalapi-进阶篇6(解决大量数据存储数据库分表分库拓展) 前言 时隔半个月随着PHP7的推出为PHP打了一瓶兴奋剂,在性能提升了一倍的情况下我们会逐渐发现,瓶颈会集中在数据库操作,那我们的内容就接着数据库读写分离,来聊聊分表分库应该怎么玩,应为PhalA
喵了个咪_ 10年前 2395

盘点中国2013行业数据量

说人类步入了信息时代，有个事情是非常重要的，就是物理世界的信息化，包括信息基础设施建设和数字化，紧接着就是如何将数字化的东西（数据）进行储存、传输、交换以及使用，这一脉络伴随着移动互联网，云计算、大数据以及各种各样智能终端的出现，显得也越来越清晰。很多人都已
小旋风柴进 9年前 1935

到量数据 相关的问答

[@倚贤][¥20]开发环境有大量数据库结构变更，如何同步到生产环境？

您好！ 在开发过程中对数据库结构做了很多变更， 比如：增加了表、修改或增加了字段、增加了索引等问题。 如果每次变更都记录sql，感觉太繁琐了。 请问怎么解决这样的问题，避免在上线生产的时候要花大量时间去同步变更结构？
ihaley 7年前 457

关于大数据量数据传输和存储问题

场景一 条件: 数据库有表A,里面有100W条数据。 操作 把表里面的数据全部取出来,进行处理 问题 1.能不能一次全部取出来？既通过select 字段1,字段2 from A来取出数据? （除了防止取出数据取出太多导致内存溢出,还有什么需要考虑
蛮大人123 10年前 1096

php如何导出大量数据的Excel？

比较常用的是用PHPExcel，1万左右数据还行，但是数据到达100万左右，PHPExcel就显的很无助，搜索了下比较常用的是使用php的fputcsv，不知道还有什么办法能导出比较大量数据的excle ![screenshot](https://oss-c
落地花开啦 10年前 1347

使用textarea提交大量数据时，php后台使用$_POST数组读取不到

首先是一个页面表单，只有一个input和textarea。当在textarea中输入的数据比较小（比如1000节）的时候，后台我用php的$_POST数组能读取到数据，但如果textarea中输入的数据比较大（比如10万字节）时，后台我用php的$_POST数
杨冬芳 10年前 799

大量mysql数据怎么快速导入到Mongodb？

现有2个mysql表 不同字段的2个表 总共是1200多W条记录，现在想导入到mongodb 一个表中 每条记录都要经过一定的处理。 所以想请教有什么最快的方式来处理这个数据。 求大牛指导。
落地花开啦 10年前 907

redis 持续插入大量数据无法成功

我是刚学这个redis， 发现一个问题，不知道大家有没有碰到过， 当我持续插入数据时， `redis-server log` 显示： `redis cannot allocate memory` 本人查了一下，是说redis是个内存吃货， 一直向系统要，
落地花开啦 10年前 1051

Linux系统如何查看自己的数据盘是否已经挂载，以及数据盘的使用情况？

![2016_12_19_123121](https://yqfile.alicdn.com/f7a7afae53e4fc06f71947b03df100ffbc3bd79c.jpeg) ![123](https://yqfile.alicdn.com/70
99tyw 9年前 7545

将大量数据从SQL Server传输和转换为Azure SQL Server的最佳方法。Azure数据工厂，HDInsight等

我想将客户现场服务器Client上安装的SQL Server数据库中的20 GB SQL数据传输到我们的Azure SQL Server Source，在具有200 DTU性能的S4上，每月320美元。在进行初始设置时，我们设置了一个Azure数据工厂，它通过
社区小助手 7年前 468

相关主题

数据 数据库 大数据数据 数据仓库数据 数据分析 数据 数据分析数据 数据仓库 元数据 数据挖掘 数据清洗 数据仓库数据清洗 数据库数据清理 数据分片 数据库 数据库管理数据 数据还原 元数据 数据收集 数据集成 模型数据 提取数据 储存数据 数据篡改 数据 安全 集成数据 应用数据 数据系统 数据复制 添加数据 保护数据 数据整合 迁移数据 表单数据 主数据 复原数据 数据救援 后台数据 指定数据 开源数据 数据 集成 聚合数据 数据不足 数据隔离 数据清洗 到sql备份 还原rds备份 还原rds数据库文件 导出postgresql 导入rds备份 到pg数据 恢复sqlserver增量 迁移pg实例 导出pg实例 恢复sqlserver量