浮點數與零的比較

來源:互聯網
上載者:User

一些筆試、面試寶典之類的書,經常提到浮點數與零的比較。

大概是這樣if(f - 0.0f  < 0.0000001f){},意思是對浮點數的處理,應該是有一個精度值。

對這個問題,也會留意,但體會不深。

 

今天,總算讓我碰到了。

比如說,一個在100:1下的數值A是10;轉變為1000:1的時候,A應該變成B,B是1,但是在電腦儲存的時候的數值B卻是0.999768······(大概是這樣的數)。(A、B都是float類型)

而在一個運算中,需要對B取整,本來,我的期望值是1,結果卻是0。

另一個運算中,令B減去1,我的期望是0,結果卻是-0.000232。

這兩個錯誤,才讓我深刻體會到浮點數的處理,應該有一個精度限制。

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.