亿级订单数据分库分表的一些想法

 

亿级订单数据分库分表的一些想法

标签： 亿级订单数据分库分表

2016-09-21 12:06  317人阅读  评论(0)  收藏  举报

  分类：

数据库（8） 

版权声明：本文为博主原创文章，未经博主允许不得转载。

前提：

    公司年1亿～10亿订单，需要满足未来3～5年数据存储。所有物理或性能上的提高都无法满足业务需求。

思路：

    使用多个库创建多张表，如1024张表（单库或少量库会存在TPS瓶颈），这样每张表只要保存约100万数据。

解决方案：

    1、快速查询用户所有订单数据（单用户的所有订单数据在一张表中）

        根据用户id进行hash得到hash_code，然后根据hash_code%1024定位表名。

    2、（不知道用户id的情况下）根据订单id查询订单数据

        有人提供方法：建立用户id与订单号的映射关系表，通过该表找到用户id，然后找到表名。如果订单有100亿条，这个映射张也需要存储100亿条数据，同样存在问题。

订单号中嵌入用户id的hash_code,这样只要提取订单号中的hash_code就可以根据该hash_code找到表名。

    3、统计各业务线中的订单数据

        创建业务订单表，同步订单数据到业务订单表中（有时候不是所有业务线都需要统计）。