开发者社区> 问答> 正文

hbase读写慢是什么原因?

自己测试,建了个最简单的表

1

然后将图片数据存入f:img的列,每张图片差不多10兆大小,存的时候8g的数据需要半个小时时间,

2

3

读取数据就根据rowkey读取一行,耗时将近两秒,经过测试,时间主要消耗在创建连接
connection = ConnectionFactory.createConnection(conf)(0.3s)和执行
Result result = table.get(get)方法(1.1s)

集群是如下图

4

配置就是一般的办公电脑的配置

往大神们不吝赐教

展开
收起
hbase小能手 2018-11-05 14:54:18 4718 0
2 条回答
写回答
取消 提交回答
  • 前一个帐号wangccsy@126.com不知道怎么的就成了企业帐号,改不成个人。所以重新注册了一个个人帐号。老程序员。精通JAVA,C#,数据库,对软件开发过程和流程熟悉。考取系统分析师,项目管理师和系统架构设计师等软件资格考试认证。愿意和大家一起前进。

    一般来说,Hadoop是处理大数据量的,使用hdfs建立好集群能更好的发挥作用,如果仅仅在单机上操作,无法体现它的良好性能。

    2019-07-17 23:12:04
    赞同 展开评论 打赏
  • HBase是一个分布式的、面向列的开源数据库,一个结构化数据的分布式存储系统。HBase不同于一般的关系数据库,它是一个适合于非结构化数据存储的数据库。阿里云HBase技术团队共同探讨HBase及其生态的问题。

    这个需求是小文件存储,建议将小文件直接定义名称放到hdfs指定路径,将路径名和文件名放到hbase表中。可以设置rowkey为文件名,value为路径,通过rowkey取的时候,可以取到路径,然后通过hdfs的API取的文件。这种方式的优点是,文件可以通过sftp导入到hdfs,而不是通过文件流。

    2019-07-17 23:12:04
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
大数据时代的存储 ——HBase的实践与探索 立即下载
Hbase在滴滴出行的应用场景和最佳实践 立即下载
阿里云HBase主备双活 立即下载