位图排序

简介:
《编程珠玑》第一章第一题就相当的精彩,做个笔记。题目如下:
输入:   一个包含n个正整数的文件,每个正整数小于n,n等于10的7次方(一千万)。并且文件内的正整数没有重复和关联数据。

输出:  输入整数的升序排列
 
约束: 限制在1M左右内存,充足的磁盘空间

    假设整数占32位,1M内存可以存储大概250000个整数,第一个方法就是采用基于磁盘的合并排序算法,第二个办法就是将0-9999999切割成40个区间,分40次扫描(10000000/250000),每次读入250000个在一个区间的整数,并在内存中使用快速排序。书中提出的第三个解决办法是采用bitmap(或者称为bit vector)来表示所有数据集合(注意到条件,数据没有重复),这样就可以一次性将数据读入内存,减少了扫描次数。算法的伪代码如下:
阶段1:初始化一个空集合
     for i=[0,n)
           bit[i]=0;
阶段2:读入数据i,并设置bit[i]=1
    for each i in the input file
           bit[i]=1;
阶段3:输出排序的结果
   for i=[0,n)
          if bit[i]==1
              write i on the output file

这个算法的时间复杂度在O(n),用c语言写的版本可以在10秒内完成任务!c语言的源码在该书主页上有,这里给一个java的测试版,加上我的理解注释:

/**
 * Created by IntelliJ IDEA.
 * User: zhuangxd
 * Date: 2008-1-7
 * Time: 14:30:44
 
*/
public   class  BitSortTest {
    
private   static   final   int  BITSPERWORD  =   32 ;   // 整数位数
     private   static   final   int  SHIFT  =   5 ;
    
private   static   final   int  MASK  =   0x1F ;   // 5位遮蔽 0B11111
     private   static   final   int  N  =   10000000 ;
    
// 用int数组来模拟位数组,总计(1 + N / BITSPERWORD)*BITSPERWORD位,足以容纳N
     private   static   int [] a  =   new   int [( 1   +  N  /  BITSPERWORD)];

    
public   static   void  main(String[] args) {
        bitsort(
new   int []{ 1 100 2 10000 9999 4567 78902 });
    }

    
public   static   void  bitsort( int [] array) {
        
for  ( int  i  =   0 ; i  <  N; i ++ )
            clr(i);   
// 位数组所有位清0
         for  ( int  i  =   0 ; i  <  array.length; i ++ )
            set(array[i]);  
// 阶段2
         for  ( int  i  =   0 ; i  <  N; i ++ )
            
if  (test(i))
                System.out.println(i);
    }

    
// 置a[i>>SHIFT]的第(i & MASK)位为1, 也就是位数组的第i位为1
     public   static   void  set( int  i) {
        a[i 
>>  SHIFT]  |=  ( 1   <<  (i  &  MASK));
    }

    
// 置a[i>>SHIFT]的第(i & MASK)位为0,也就是位数组的第i位为0
     public   static   void  clr( int  i) {
        a[i 
>>  SHIFT]  &=   ~ ( 1   <<  (i  &  MASK));
    }

    
// 测试位数组的第i位是否为1
     public   static   boolean  test( int  i) {
        
return  (a[i  >>  SHIFT]  &  ( 1   <<  (i  &  MASK)))  ==  ( 1   <<  (i  &  MASK));
    }
}
文章转自庄周梦蝶  ,原文发布时间2008-01-07
目录
相关文章
|
19天前
|
存储 机器学习/深度学习 图形学
位图秘境:解析位图表示法及其在文件系统中的应用(一)
位图秘境:解析位图表示法及其在文件系统中的应用
43 0
|
19天前
|
存储 机器学习/深度学习 算法
位图秘境:解析位图表示法及其在文件系统中的应用(二)
位图秘境:解析位图表示法及其在文件系统中的应用
55 0
|
19天前
|
存储 算法 搜索推荐
位图与布隆过滤器
位图与布隆过滤器
49 0
|
19天前
|
存储 算法 Linux
C++ 哈希的应用【位图】
C++ 哈希的应用【位图】
30 0
|
7月前
|
存储 机器学习/深度学习 算法
C++位图和布隆过滤器
C++位图和布隆过滤器
|
10月前
|
存储 C++ 容器
哈希的应用——位图
所谓位图,就是用每一位来存放某种状态,适用于海量数据,数据无重复的场景。通常是用来判断某个数据存不存在的,其本质也是一种hash。但是其占用空间很少。
|
存储 安全 索引
Bitmaps(位图)
什么是 Bitmaps Bitmaps 并不是实际的数据类型,而是定义在String类型上的一个面向字节操作的集合。因为字符串是二进制安全的块,他们的最大长度是512M,最适合设置成2^32个不同字节。 Bitmaps 的最大优势之一在存储信息时极其节约空间。例如,在一个以增量用户ID来标识不同用户的系统中,记录用户的四十亿的一个单独bit信息(例如,要知道用户是否想要接收最新的来信)仅仅使用512M内存。
 Bitmaps(位图)
|
存储 NoSQL Redis
Bitmaps-位图
Bitmaps-位图
134 0
Bitmaps-位图
|
机器学习/深度学习
位图排序思想及代码详解
输入:一个最多包含n个正整数的文件,每个数都小于n,其中n=10^7。如果在输入文件中有任何重复整数出现就是致命错误。没有其他数据与该整数相关联 输出:按升序排列的 输入整数的列表。 约束:最多有(大约)1MB的内存空间可用,有充足的磁盘存储空间可用。
873 0