基础野:细说浮点数

简介:

Brief                              

  本来只打算理解JS中0.1 + 0.2 == 0.30000000000000004的原因,但发现自己对计算机的数字表示和运算十分陌生,于是只好恶补一下。

 本篇我们一起来探讨一下基础——浮点数的表示方式和加减乘除运算。

  在深入前有两点我们要明确的:

  1. 在同等位数的情况下,浮点数可表示的数值范围比整数的大;

  2. 浮点数无法精确表示其数值范围内的所有数值,只能精确表示可用科学计数法m*2e表示的数值而已;

     (如0.5的科学计数法是2-1,则可被精确存储;而0.2则无法被精确存储)

  3. 浮点数不仅可表示有限的实数,还可以表示有限的整数。

 

Encode                            

  20世纪80年代前每个计算机制造商都自定义自己的表示浮点数的规则,及浮点数执行运算的细节。而且不太关注运算的精确性,而是更多地关注速度和简便性。

  1985年左右推出IEEE 754标准的浮点数表示和运算规则,才让浮点数的表示和运算均有可移植性。(IEEE,读作Eye-Triple-Eee,电器与电子工程师协会)

  上述的IEEE 754称为IEEE 754-1985 Floating point,直到2008年对其进行改进得到我们现在使用的IEEE 754-2008 Floating point标准。

  IEEE 754的二进制编码由3部分组成,分别是sign-bit(符号位),biased-exponent(基于偏移的阶码域)和significant(尾数/有效数域)。

     Sign-bit:0表示正,1表示负。占1bit;

     Biased-exponent:首先exponent表示该域用于表示指数,也就是数值可表示数值范围,而biased则表示它采用偏移的编码方式。那么什么是采用偏移的编码方式呢?也就是位模式中没有设立sign-bit,而是通过设置一个中间值作为0,小于该中间值则为负数,大于改中间值则为正数。IEEE 754中规定bias = 2^e-1 - 1,e为Biased-exponent所占位数;
     Significant:表示有效数,也就是数值可表示的精度。(注意:Significant采用原码编码;假设有效数位模式为0101,那么其值为0*2-1+1*2-2+0*2-3+1*2-4,即有效数域的指数为负数)
     另外IEEE 754还提供4个精度级别的浮点数定义(单精度、双精度、延生单精度和延生双精度),单精度和双精度具体定义如下:

Level Width(bit) Range at full precision Width of biased-exponent(bit) Width of significant(bit)
Single Precision 32 1.18*10-38 ~ 3.4*1038 8 23
Double Precision 64 2.23*10-308 ~ 1.80*10308 11 52

     为了简便,下面以Single Precision来作叙述。
    

     现在我们了解到32bit的浮点数由3部分组成,那么它们具体又有怎样的组合规则呢?具体分为4种:

     Normalized(规格化)

        编码规则

          1. biased-exponent != 0 && biased-exponent != 2e-1;

          2. exponent = biased-exponent - Bias,其中exponent是指实际的指数值;

          3. significant前默认含数值为1的隐藏位(implied leading 1),即若significant域存储的是0001,而实际值是10001。

     Denormalized(非规格化)

        用于表示非常接近0的数值和+0和-0。

    +0的位模式为:0-00000000-00000000000000000000000

    -0的位模式为: 1-00000000-00000000000000000000000

    编码规则

     1. biased-exponent == 0 ;

          2. exponent = 1 - Bias,其中exponent是指实际的指数值;

          3. significant前默认含数值为0的隐藏位(implied leading 1),即若significant域存储的是0001,而实际值是00001。

     Infinity(无限大)

        用于表示溢出。

        编码规则

     1. biased-exponent == 2e-1 ;

          2. significant == 0。

        运算结果为Infinity的表达式

           1. Infinity == N/0,其中N为任意正数;

           2. -Infinity == N/-0,其中N为任意正数;

    3. Infinity == Infinity * N,其中N为任意正数。

     NaN(非数值)

   用于表示 结果既不是 实数 又不是 无穷。

        编码规则

     1. biased-exponent == 2e-1 ;

          2. significant != 0。

   运算结果为NaN的表达式

     1. Math.sqrt(-1)

     2. Infinity - Infinity

     3. Infinity * 0

       4. 0/0

        注意

    1. NaN与任何数值作运算,结果均为NaN;

    2. NaN != NaN;

    3. 1 == Math.pow(NaN, 0)。

  Rounding modes(aka Rounding scheme,舍入模式)

      由于浮点数无法精确表示所有数值,因此在存储前必须对数值作舍入操作。具体分为以下5种舍入模式

  1. Round to nearest, ties to even(IEEE 754默认的舍入模式)

    舍入到最接近且可以表示的值,当存在两个数一样接近时,取偶数值。(如2.4舍入为2,2.6舍入为3;2.5舍入为2,1.5舍入为2。)

         Q:为什么会当存在两个数一样接近时,取偶数值呢?

      A:由于其他舍入方式均令结果单方向偏移,导致在运算时出现较大的统计偏差。而采用这种偏移则50%的机会偏移两端方向,从而减少偏差。

  2. Round to nearest, ties to zero

    舍入到最接近且可以表示的值,当存在两个数一样接近时,取离0较远的数值

      3. Round to infinity

    向正无穷方向舍入

      4. Round to negative infinity

    向负无穷方向舍入

  5. Round to zero

    向0方向舍入

 

Overflow                            

  到这里我们对浮点数的表示方式已经有一定程度的了解了,也许你会迫不及待想了解它的运算规则,但在这之前我想大家应该要想理解溢出和如何判断溢出,不然无法理解后续对运算的讲解。

  Q1:何为溢出?

  A1:溢出,就是运算结果超出可表示的数值范围。注意:进位、借位不一定会产生溢出。

复制代码
发生溢出:
4位有符号整数 7+7
  0111
+ 0111
  1110 => -2
只有最高数值位发生进位,因此发生溢出

没有发生溢出:
4位有符号整数 7-2
  0111
+ 1110
 10101 => 取模后得到5
符号位和最高数值位均发生进位,因此没有发生溢出
复制代码

  Q2:如何判断溢出?

  A2:有两种方式判断溢出,分别是 进位判断法 和 双符号判断法。

         进位判断法

      前提:采用单符号位,即+4的二进制位模式为0100。

    无溢出:符号位 和 数值域最高位 一起进位或一起不发生进位。

           溢出:符号位 或 数值域最高位 其中一个发生进位。

         双符号判断法

    前提:采用双符号位,即+4的二进制位模式为00100。

           无溢出:两符号位相同。

           上溢出:两符号位为01。

           下溢出:两符号位为10。

  Q3:溢出在有符号整数和浮点数间的区别?

  A3:对于有符号整数而言,溢出意味着运算结果将与期待值不同从而导致错误;

        对于浮点数而言,会对上溢出和下溢出进行特殊处理,从而返回一个可被IEEE 754表示的浮点数。

        因此对于有符号整数的运算我们采用进位判断法判断溢出即可,而对于浮点数则需要采用双符号判断法了。

  Q4:浮点数运算中上溢出和下溢出具体的特殊处理是什么啊?

  A4:首先浮点数运算中仅对阶码进行溢出判断,当阶码出现下溢出时运算结果为0(符号取决于符号位);当阶码出现上溢出时运算结果为Infinity(符号取决于符号位)。

 

  PS:发生溢出时,当前程序会被挂起,并发送溢出中断信号量,此时溢出中断处理程序接收信号量后会做对应的处理

 

Addition & Subtraction                    

  恭喜你还没被上述的前置知识搞晕而选择X掉网页,下面我们终于可以着手处理运算问题,顺便验证一下自己对上述内容是否真的理解了。

  步骤:

    1. 对0、Infinity和NaN操作数作检查

    若有一个操作数为NaN则直接返回NaN;

    若有一个操作数为0则直接返回另一个操作数;

    若有一个操作数为Infinity,

      若另一个操作数也是Infinity且符号相同则返回第一个操作数;

      若另一个操作数也是Infinity且符号不同则返回NaN;

      若其他情况则返回Infinity。

        2. 对阶,若两操作数的阶码不相等,则对阶(小数点对齐)。

     由于尾数右移所损失的精度比左移的小,因此小阶向大阶看齐。

        3. 符号位+尾数(包含隐藏位)执行加减法。

            按有符号整数加减法进行运算,并采用双符号法判断是否溢出。

        4. 规格化。

            向右规格化:若步骤3出现溢出,则尾数右移1位,阶码+1;

            向左规格化:若步骤3没有出现溢出,且数值域最高位与符号位数值相同,则尾数左移1位且阶码-1,直到数值域最高位为1为止。

        5. 舍入处理

   6. 溢出判断

     由于规格化时可能会导致阶码发生溢出

              若无发生溢出,则运算正常结束。

              若发生上溢出,则返回Infinity。

              若发生下溢出,则返回0。

       示例1,0.75+(-0.75) = 0:

0.75+(-0.75) = 0

以8位存储,尾数采用原码编码
0.75  存储位模式 0-0110-100
-0.75 存储位模式 1-0110-100

1. 对阶
阶码一样跳过。

2. 符号位+尾数(含隐藏位)相加
由于尾数以有符号数的方式进行运算,因此要对尾数进行取补操作
  00-1100
+11-0100
 100-0000
 对符号位截断后得到00-0000

3. 规格化 
根据符号位相同,则执行左规格化操作,也就是尾数不断向左移而阶码不断减1,直到尾数最高位为1为止。

4. 舍入处理
000

5.溢出判断 
  在执行规格化时发生阶码下溢出,整体结果返回0-0000-000.
View Code

       示例2,0.75-0.25 = 0.5:

0.75-0.25 = 0.5

以8位存储,尾数采用原码编码
0.75  存储位模式 0-0110-100
0.25  存储位模式 0-0101-000

1. 对阶
0.25的阶码小于0.75相同,因此0.25向0.75的看齐。
0-0110-100

2. 尾数相加(采用双位符号法),减法转换为加法,对0.75和-0.25取补
  00-1100
+11-1100
 100-1000
 对符号位截断后得到00-1000

3. 规格化 
根据符号位相同,则执行左规格化操作,也就是尾数不断向左移而阶码不断减1,直到尾数最高位为1为止。

4. 舍入处理
1000

5. 溢出判断
阶码没有发生溢出,正常返回运算结果0-0110-000(注意:舍入处理后数值域的最高位是位于隐藏位的)
View Code

       示例3, 0.25-0.75 = -0.5:

 

Comparison                          

  比较运算(cmp指令)实际上就是对两操作数做减法,然后通过标志寄存器(80x86的rflags)中的CF(Carry flag)、ZF(Zero flag)、OF(Overflow flag)、SF(Sign flag)状态标志来判断两者的关系。

  对于无符号数A与B而言,则是通过CF和ZF来判断。

      1. 若CF为1,表示A-B时A发生借位操作,那么可以判定 A<B

      2. 若CF为0且ZF不为0,表示A-B时没有发生借位操作,那么可以判定 A>B

      3. 若ZF为0,则可判定A==B

  对于有符号数C和D而言,则是通过ZF、OF和SF来判断。

      1. 若ZF为1,则可判定C == D

      2. 若SF为0,OF为0,表示结果为正数且没有发生溢出,则C>D

      3. 若SF为0,OF为1,表示结果为正数且发生溢出,则C<D

      4. 若SF为1,OF为0,表示结果为负数且没有发生溢出,则C<D

      5. 若SF为1,OF为1,表示结果为负数且发生溢出,则C>D

  而对于浮点数而言,由于阶码域采用的是biased-exponent的编码方式,因此在进行比较时我们可以将整个浮点数看作有符号数来执行减法运算即可,而不必执行Addition/Subtraction那样繁琐的运算步骤。

 

Multiplication                        

  步骤:

    1. 对0、Infinity和NaN操作数作检查

    若有一个操作数为NaN则直接返回NaN;

    若有一个操作数为0则直接返回另一个操作数;

    若有一个操作数为Infinity,

      若另一个操作数也是Infinity且符号相同则返回第一个操作数;

      若另一个操作数也是Infinity且符号不同则返回NaN;

      若其他情况则返回Infinity。

   2. 计算阶码(公式:e = e1 + e2 - Bias)

     公式推导过程:

∵ E1 = e1 - Bias
∵ E2 = e2 - Bias
∴ E = E1+E2 = e1 + e2 - 2*Bias
∵ e = E + Bias

∴ e = e1 + e2 - Bias
对非规格化e1为1
View Code

              注意:计算阶码时,是执行无符号数的加减法。

       3. 尾数相乘

              注意:尾数相乘时,是执行无符号数的乘法,并且不对结果进行截断。

       4. 结果左规格化,尾数左移,且阶码减1,直到最高位为1为止

   5. 舍入处理

   6. 溢出判断

     由于规格化时可能会导致阶码发生溢出

              若无发生溢出,则运算正常结束。

              若发生上溢出,则返回Infinity。

              若发生下溢出,则返回0。

   7. 符号位执行 异或 运算

       示例,0.5*(-0.25) = -0.125:

0.5*(-0.25) = -0.125

以8位存储,尾数采用原码编码
0.5  存储位模式 0-0110-000
-0.25  存储位模式 1-0101-000

1. 计算阶码(公式e1+e2-Bias)
  0110
+0101
  1011
+1001
 10100 取模得到 0100

2. 尾数相乘
1000*1000
1000<<(3+1) - 1000<<(3)
  1000000
- 0100000
减法转换为加法
  1000000
+1100000
10100000 取模得到0100000

3. 左规格化
0100000左移1位得到 100000
阶码-1得到 0011

4. 舍入处理
尾数为1000

5. 溢出判断
无溢出

6. 符号位异
0 xor 1 = 1

结果
1-0011-000
View Code

 

Divsion                            

 步骤:

    1. 对0、Infinity和NaN操作数作检查

    若有一个操作数为NaN则直接返回NaN;

    若有一个操作数为0则直接返回另一个操作数;

    若有一个操作数为Infinity,

      若另一个操作数也是Infinity且符号相同则返回第一个操作数;

      若另一个操作数也是Infinity且符号不同则返回NaN;

      若其他情况则返回Infinity。

   2. 计算阶码(公式:e = e1 - e2 + Bias + m-1) m为尾数的位数

     公式推导过程:

∵E1 = e1 - Bias
∴E2 = e2 - Bias
∴E = E1-E2 = e1 - e2
∵e = E + Bias

∴e = e1 - e2 + Bias
∵除法会消权,因此通过移位去除负指数以便后续计算
∴e = e1 - e2 + Bias + m-1,其中m为尾数的位数
对非规格化e1、e2为1
View Code

              注意:计算阶码时,是执行无符号数的加减法。

       3. 尾数相除

              注意:尾数相除时,是执行无符号数的除法,并且不对结果进行截断。

       4. 结果左规格化,尾数左移,且阶码减1,直到最高位为1为止

   5. 舍入处理

   6. 溢出判断

     由于规格化时可能会导致阶码发生溢出

              若无发生溢出,则运算正常结束。

              若发生上溢出,则返回Infinity。

              若发生下溢出,则返回0。

   7. 符号位执行 异或 运算

       示例,0.5/(-0.25) = -2:

0.5/(-0.25) = -2

以8位存储,尾数采用原码编码
0.5  存储位模式 0-0110-000
-0.25  存储位模式 1-0101-000

2. 计算阶码(公式e1-e2+Bias+(m-1))
  0110
+1011
  10001
+00111
  11000
+00011
  11011 
取模得到 1011

3. 尾数相除
1000/1000 = 1000 >> 3 得到0001

4. 左规格化
0001左移3位得到 1000
阶码-3得到 1000

5. 舍入处理
尾数为1000

6. 溢出判断
无溢出

7. 符号位异
0 xor 1 = 1

结果
1-1000-000
View Code

 

Conclusion                          

  总算写完了:)本文以单精度作为叙述对象,为简化手工运算各示例均以8bit浮点数作为讲解,其实32bit和64bit的浮点数表示和运算规则与其相同,理解规则就OK了。

  看完这么多原理性的东西,是时候总结一下我们对浮点数应有的印象了:

  1. 浮点数可表示的值范围比同等位数的整数表示方式的值范围要大得多;

  2. 浮点数无法精确表示其值范围内的所有数值,而有符号和无符号整数则是精确表示其值范围内的每个数值;

  3. 浮点数只能精确表示m*2e的数值;

  4. 当biased-exponent为2e-1-1时,浮点数能精确表示该范围内的各整数值;

  5. 当biased-exponent不为2e-1-1时,浮点数不能精确表示该范围内的各整数值。

      例如:10000000000000001281000000000000000129以双精度浮点数表示时,均为

          0-10000111010-11011110000010110110101100111010011101100100000000001。

              若以64bit无符号整数表示时,1000000000000000128为 0000110111100000101101101011001110100111011001000000000010000000;

                                                     1000000000000000129为 0000110111100000101101101011001110100111011001000000000010000001。

     例子源自:http://es5.github.io/#x15.7.4.5

  尊重原创,转载请注明来自:http://www.cnblogs.com/fsjohnhuang/p/5109766.html 肥子John^_^

 

Thanks                            

https://en.wikipedia.org/wiki/IEEE_754-1985

http://geeklu.com/2011/03/ieee754-floating-point-arithmetic/

http://blog.csdn.net/hillchan31/article/details/7565782

http://blog.csdn.net/jn1158359135/article/details/7761011

http://laokaddk.blog.51cto.com/368606/284280/

《深入理解计算机系统》

如果您觉得本文的内容有趣就扫一下吧!捐赠互勉!

3
0
« 上一篇: 基础野:细说有符号整数
» 下一篇: JS魔法堂:再识Number type
posted @ 2016-01-09 11:02 ^_^肥仔John 阅读( 2862) 评论( 1) 编辑 收藏
  
#1楼 2016-01-11 15:53 turtle_2  
学术研究的有点深,佩服!
相关文章
|
计算机视觉
数字图像处理实验(七)| 形态学图像处理{生成结构元素strel、腐蚀运算imerode、膨胀运算imdilate、开运算imopen、闭运算imclose}(附代码和实验截图、汉字视力表项目、总结)
数字图像处理实验(七)| 形态学图像处理{生成结构元素strel、腐蚀运算imerode、膨胀运算imdilate、开运算imopen、闭运算imclose}(附代码和实验截图、汉字视力表项目、总结)
706 0
数字图像处理实验(七)| 形态学图像处理{生成结构元素strel、腐蚀运算imerode、膨胀运算imdilate、开运算imopen、闭运算imclose}(附代码和实验截图、汉字视力表项目、总结)
|
4月前
|
机器学习/深度学习 存储 人工智能
矩阵乘法运算:在这看似枯燥的数字组合中,究竟蕴含着怎样令人称奇的奥秘?
【8月更文挑战第19天】矩阵乘法不仅是数学概念,还在工程、图像处理及AI等领域发挥核心作用。例如,通过矩阵乘法可精确实现图像变换;在神经网络中,它帮助模型学习和优化以识别图像和理解语言。两个矩阵A(m×n)与B(n×p)相乘得C(m×p),其中C[i,j]为A的第i行与B的第j列元素乘积之和。尽管面临维度匹配等挑战,矩阵乘法仍在持续推动技术创新。下次享受智能服务时,不妨想想背后的矩阵乘法吧。
77 3
|
5月前
|
编译器 C++
C++从遗忘到入门问题之C++中的浮点数类型问题如何解决
C++从遗忘到入门问题之C++中的浮点数类型问题如何解决
MATLABA快速入门(六):数值微积分
MATLABA快速入门(六):数值微积分
62 0
|
算法 Java
数学建模常用算法:人工鱼群算法(AFAS)求解二元函数最小值+限定x,y范围测试【java实现--详细注释+Matlab绘制小鱼游动过程】
数学建模常用算法:人工鱼群算法(AFAS)求解二元函数最小值+限定x,y范围测试【java实现--详细注释+Matlab绘制小鱼游动过程】
161 0
|
机器学习/深度学习
白话向量点积
点积(Dot Product)是机器学习中最常见的向量操作。本文将通过简洁易懂的语言配合大量图形为大家介绍点积运算及其背后的数学意义。
284 0
|
存储 缓存 并行计算
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门(2)
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门
288 0
|
存储 并行计算 异构计算
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门(3)
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门
208 0
|
机器学习/深度学习 缓存 自然语言处理
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门
|
存储 并行计算 异构计算
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门(4)
如何高效实现矩阵乘?万文长字带你从CUDA初学者的角度入门
235 0