亿级订单数据分库分表的一些想法

前提:

    公司年1亿~10亿订单,需要满足未来3~5年数据存储。所有物理或性能上的提高都无法满足业务需求。

思路:

    使用多个库创建多张表,如1024张表(单库或少量库会存在TPS瓶颈),这样每张表只要保存约100万数据。

解决方案:

    1、快速查询用户所有订单数据(单用户的所有订单数据在一张表中)

        根据用户id进行hash得到hash_code,然后根据hash_code%1024定位表名。

    2、(不知道用户id的情况下)根据订单id查询订单数据

        有人提供方法:建立用户id与订单号的映射关系表,通过该表找到用户id,然后找到表名。如果订单有100亿条,这个映射张也需要存储100亿条数据,同样存在问题。

订单号中嵌入用户id的hash_code,这样只要提取订单号中的hash_code就可以根据该hash_code找到表名。

    3、统计各业务线中的订单数据

        创建业务订单表,同步订单数据到业务订单表中(有时候不是所有业务线都需要统计)。

 

沟通交流请关注公众号。

你可能感兴趣的:(数据库)