correctly rounded sqrt() asm for x86 (i387)
authorRich Felker <dalias@aerifal.cx>
Thu, 15 Mar 2012 05:29:03 +0000 (01:29 -0400)
committerRich Felker <dalias@aerifal.cx>
Thu, 15 Mar 2012 05:29:03 +0000 (01:29 -0400)
commit809556e60a3359f646946879dd94c4760e5b8e84
tree23afab7c3cd180406757b99efda0363de99af703
parente0a54e6725eaa0b5aeb28e9815c310f70068d308
correctly rounded sqrt() asm for x86 (i387)

the fsqrt opcode is correctly rounded, but only in the fpu's selected
precision mode, which is 80-bit extended precision. to get a correctly
rounded double precision output, we check for the only corner cases
where two-step rounding could give different results than one-step
(extended-precision mantissa ending in 0x400) and adjust the mantissa
slightly in the opposite direction of the rounding which the fpu
already did (reported in the c1 flag of the fpu status word).

this should have near-zero cost in the non-corner cases and at worst
very low cost.

note that in order for sqrt() to get used when compiling with gcc, the
broken, non-conformant builtin sqrt must be disabled.
src/math/i386/sqrt.s