最近公司项目在用sqlserver2012，因数据量非常大，程序跑起来临时表的数据量高达40多G，严重影响C盘的存量，所以决定将临时表文件迁移到存量比较大的分区。 临时方法：重启MSSQLSERVER服务可删除缓存，可是…

比特科技: 存储、数据库、大数据技术 » HBase优化实战 http://www.bitstech.net/2015/12/04/hbase-optmization/ 背景 Datastream一直以来在使用HBase…

HBase 并不快，只是当数据量很大的时候它慢的不明显。 不适合使用 HBase 的场景： 主要需求是数据分析，比如做报表。 单表数据量不超过千万。 适合使用 HBase 的场景： 单表数据量超千万，而且并发还挺高。 数…

背景介绍 本项目主要解决 check 和 opinion2 张历史数据表（历史数据是指当业务发生过程中的完整中间流程和结果数据）的在线查询。原实现基于 Oracle 提供存储查询服务，随着数据量的不断增加，在写入和读取过…

HBase 简介 HBase是一个分布式的、面向列的开源数据库，就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，hbase在Hadoop之上提供了类似于Bigtable…

最近天天在实验室捣鼓一个大数据的项目，前期虽说数据量不是很大，但也算是跑了一个11台机器的集群。在实施之前就预料到了肯定是艰难险阻。毕竟万事开头难，然后中间难，最后结尾难 😢 本文记录下在进行 hbase…

今天公司的游戏接入咪咕的SDK有个要求 就是一个计费点只能购买一次 对于这种需要存储数据量要求极低的 我第一想到的是文件存储 但是相对来说比较麻烦 于是android五大存储方式 网络存储 文件存储 SQLite存储 显…

        SQLite数据库以其轻便、灵活使其非常适合在移动端使用。如果我们操作的数据量比较少的时候几十毫秒或者几百毫秒就可以完成。但量变引起质变这一哲学定律在无处不在。 &…

微信版的链接地址 文章摘要：当单表数据达到千万以上时，通过加索引或者表分区优化提升的效果就比较有限了，应该如何应对呢？？？ 当MySQL数据库的单表数据量达到千万级别以上时，不管是业务逻辑的查询，还是更新，或者删除都会使…

前言： 对于目前的iOS应用，大的数据量操作是一个不可避免的问题，本文仅对sqlite数据库大数据量操作进行优化策略： 优化规则： 1.对查询进行优化, 要尽量避免全表扫描, 首先应考虑在where及order by涉 …

1、索引的作用 索引通俗来讲就相当于书的目录，当我们根据条件查询的时候，没有索引，便需要全表扫描，数据量少还可以，一旦数据量超过百万甚至千万，一条查询sql执行往往需要几十秒甚至更多，5秒以上就已经让人难以忍受了。 &n…

索引是什么 可以理解为排好序的方便快速查找的一种数据结构，索引有很多种，这里介绍BTree类型的索引。 索引虽然可以提高查询速度，但是索引也是一张表，是要站内存空间的，并且索引会降低更新表的速度，因为要维护索引，所以在更…