漫画:什么是外部排序?

漫画:什么是外部排序?_第1张图片
漫画:什么是外部排序?_第2张图片
漫画:什么是外部排序?_第3张图片
漫画:什么是外部排序?_第4张图片
漫画:什么是外部排序?_第5张图片
漫画:什么是外部排序?_第6张图片
排序的时候我们可以选择快速排序或归并排序等算法。为了方便,我们把排序好的2G有序数据称之为有序子串吧。接着我们可以把两个小的有序子串合并成一个大的有序子串。
漫画:什么是外部排序?_第7张图片

注意:读取的时候是每次读取一个int数,通过比较之后在输出。

按照这个方法来回合并,总共经过三次合并之后就可以得到8G的有序子串。
漫画:什么是外部排序?_第8张图片
漫画:什么是外部排序?_第9张图片
漫画:什么是外部排序?_第10张图片
接下来把12个数据分成4份,然后排序成有序子串
漫画:什么是外部排序?_第11张图片
然后把子串进行两两合并
漫画:什么是外部排序?_第12张图片
输出哪个元素,就在那个元素所在的有序子串再次读入一个元素
漫画:什么是外部排序?_第13张图片
继续
漫画:什么是外部排序?_第14张图片
重复直到合并成一个包含6个int的有序子串
漫画:什么是外部排序?_第15张图片
再把两个包含6个int的有序子串合并成一个包含12个int数据的最终有序子串
漫画:什么是外部排序?_第16张图片
漫画:什么是外部排序?_第17张图片

优化策略

漫画:什么是外部排序?_第18张图片

解释下:例如对于数据2,我们把无序的12个数据分成有序的4个子串需要读写各一次,把2份3个有序子串合并成6个有序子串读写各一次;把2份6个有序子串合并从12个有序子串读写各一次,一共需要读写各3次。

漫画:什么是外部排序?_第19张图片
漫画:什么是外部排序?_第20张图片
漫画:什么是外部排序?_第21张图片

多路归并

为了方便讲解,我们假设内存一共可以装4个int型数据。

漫画:什么是外部排序?_第22张图片
漫画:什么是外部排序?_第23张图片
漫画:什么是外部排序?_第24张图片
漫画:什么是外部排序?_第25张图片
漫画:什么是外部排序?_第26张图片
漫画:什么是外部排序?_第27张图片
漫画:什么是外部排序?_第28张图片

置换选择

漫画:什么是外部排序?_第29张图片
漫画:什么是外部排序?_第30张图片
漫画:什么是外部排序?_第31张图片
漫画:什么是外部排序?_第32张图片
漫画:什么是外部排序?_第33张图片
漫画:什么是外部排序?_第34张图片
漫画:什么是外部排序?_第35张图片
例如我们可以从12个数据读取3个存到内存中,然后从内存中选出最小的那个数放进子串p1里;

之后再从在从剩余的9个数据读取一个放到内存中,然后再从内存中选出一个数放进子串p1里,这个数必须满足比p1中的其他数大,且在内存中尽量小

这样一直重复,直到内存中的数都比p1中的数小,这时p1子串存放结束,继续来p2子串的存放。例如(这时假设内存只能存放3个int型数据):

12个无序的int数据
漫画:什么是外部排序?_第36张图片
读入3个到内存中,且选出一个最小的到子串p1
漫画:什么是外部排序?_第37张图片
从内存中再次读取一个元素86
漫画:什么是外部排序?_第38张图片
从内存中再次读取一个元素3
漫画:什么是外部排序?_第39张图片
从内存中再次读取一个元素24
漫画:什么是外部排序?_第40张图片
从内存中再次读取一个元素8
漫画:什么是外部排序?_第41张图片
这个时候,已经没有符合要求的数了,且内存已满,进而用p2子串来存放,以此类推。

通过这种方法,p1子串存放了4个数据,而原来的那种方法p1子串只能存放3个数据。
漫画:什么是外部排序?_第42张图片
漫画:什么是外部排序?_第43张图片

不知道堆排序的可以看下我之前写的文章 : 堆排序是什么鬼?

从12个数据中读取3个数据,构建成一个最小堆,然后从堆顶选择一个数写入到p1中。

之后再从剩余的9个数中读取一个数,如果这个数比刚才那个写入到p1中的数大,则把这个数插入到最小堆中,重新调整最小堆结构,然后在堆顶选一个数写入到p1中。

否则,把这个数暂放在一边,暂时不处理。之后一样需要调整堆结构,从堆顶选择一个数写入到p1中。

这里说明一下,那个被放在一边的数是不能再放入p1中的了,因为它一定比p1中的数都要小,所以它会放在下一个子串中

看这些文字会让人头大,我画图解释下吧。

从12数据读取3个数据
漫画:什么是外部排序?_第44张图片
构建最小堆,且选出目标数
漫画:什么是外部排序?_第45张图片
读入下一个数86
漫画:什么是外部排序?_第46张图片
读入下一个数3,比70小,暂放一边,不加入堆结构中
漫画:什么是外部排序?_第47张图片
读入下一个数据24,比81小,不加入堆结构
漫画:什么是外部排序?_第48张图片
读入下一个数据8,比86小,不加入堆结构。此时p1已经完成了,把那些刚才暂放一边的数重新构成一个堆,继续p2的存放。
漫画:什么是外部排序?_第49张图片
以此类推…
最后生成的p2如下:
漫画:什么是外部排序?_第50张图片
漫画:什么是外部排序?_第51张图片
漫画:什么是外部排序?_第52张图片
漫画:什么是外部排序?_第53张图片
漫画:什么是外部排序?_第54张图片
这种方法适合要排序的数据太多,以至于内存一次性装载不下。只能通过把数据分几次的方式来排序,我们也把这种方法称之为外部排序

更多排序算法文章

1. 漫画:什么是冒泡排序算法?

2. 漫画:什么是选择排序算法?

3. 漫画:什么是插入排序算法?

4. 漫画:什么是希尔排序算法?

5. 漫画:什么是归并排序算法?

6. 漫画:什么是快速排序算法?

7. 漫画:什么是堆排序算法?

8. 漫画:什么是基数排序算法?

9. 漫画:什么是外部排序?

10. 什么是计数排序?

11. 十大排序算法极简汇总篇

推荐阅读

下载破 2w+,在校生必看,《程序员内功修炼》第二版出炉

从双非到大厂,帅地写了一本原创PDF送给大家

一个帮你拿offer的校招网站

算法刷题路线(系统+全面)

作者简介:我是帅地,校招拿到过不少大厂offer,毕业去了腾讯研发岗,毕业半年整到人生第一个 100 万,目前专注于写大学规划 + 校招求职相关的内容,著有个人原创网站 PlayOffer。

你可能感兴趣的:(算法,排序算法,数据结构)