Результаты поиска по запросу "floating-point-precision"
простые числа с плавающей точкой теряют точность
Я использую Delphi XE2 Update 3. Есть проблемы точности даже с простейшими числами с плавающей запятой (например,3,7). Учитывая этот код (32-битное консольно...
Преобразование Int в Float теряет точность для больших чисел в Swift
XCode 6.3.1 Swift 1.2
Является ли это действительным сравнением с плавающей запятой, которое учитывает определенное количество десятичных знаков?
Я пишу метод расширения для сравнения двух чисел с использованием заданного количества десятичных знаков (значащих цифр), чтобы определить, равны ли они вместо допуска или разницы в процентах. Просматривая другие вопросы, касающиеся сравнения с ...
Как сделать так, чтобы цифры не отображались в научной форме?
Я хочу записать массив чисел с плавающей точкой в файлы <?php $x=[0.000455,0.000123,0.00005690330203]; $fname='test.txt'; $str=''; foreach($x as $elem){ $str .= "$elem\n"; } file_put_contents($fname,$str); ?>но в test.txt я вижу 0.000455 ...
Получить следующий наименьший двухместный номер
В рамках модульного теста мне нужно проверить некоторые граничные условия. Один метод принимаетSystem.Double аргумент. Есть ли способ получитьследующего Наименьшее двойное значение? (то есть уменьшить значение мантиссы на 1 единицу)? Я подумал ...
Java - максимальная потеря точности за одно двойное сложение / вычитание
Можно ли даже приблизительно определить, какой будет максимальная потеря точности при работе с двумя
Как распространяется ошибка с плавающей точкой при выполнении математических операций в C ++?
Допустим, мы объявили следующие переменные