Вопросы с меткой [числа-с-плавающей-точкой]
Метка используется, когда в вопросе упоминаются проблемы или работа с числами с плавающей точкой, например: 1.34, 53.185, 1.25 и т.д.
89
вопросов
-1
голос
0
ответов
39
показов
Почему DPD, Decimal64 и т.д. не имеют поддержки на уровне процессора, как с float point numbers? [дубликат]
В языках, где существует Decimal (C#, Python), он медленнее, чем float/double, потому что не поддерживается на аппаратном уровне в большинстве процессоров. Так почему же DPD, BID, Decimal64 и т. д. не ...
0
голосов
1
ответ
26
показов
rot2d ломает и изменяет позицию [закрыт]
я пишу с нуля 3д движок со своей координатной системой и я застрял на повороте точек. Если смотреть на этот куб достаточно долго, то можно увидеть, что он превращается в параллелепипед.
import pygame
...
2
голоса
0
ответов
56
показов
Как побитово работают числа с фиксированной точностью в PostgreSQL?
Задача - представить полное побитовое представление числа с фиксированной точностью. Скажем, numeric(5,2).
С плавающей точкой имеет стандарт IEEE 754, поэтому легко понять, что 15.718 в real - это (-1)...
0
голосов
1
ответ
60
показов
Проблема с отображением значений -nan(ind)
При вводе значения x выводятся некоторые значения y в виде -nan(ind), и также переменная h почему-то равна 0.10000000...01, хотя должна быть равна 0.1.
#include <iostream>
#include <cmath>
...
0
голосов
2
ответа
39
показов
Kotlin как собрать Float из UByte?
Kotlin. Есть пакет с принятыми данными, побайтно, лежит в массиве var packet = Array<UByte>(20)
Как сказать компилятору что байты packet[2], packet[3], packet[4] и packet[5] это одно число в ...
0
голосов
1
ответ
186
показов
Python неправильно считает. Как это исправить?
Я пишу
print(0.1 + 0.2 + 0.3)
Вывод:
0.6000000000000001
Как это исправить?
Я пробовал написать
from decimal import *
print(Decimal(0.1) + Decimal(0.2) + Decimal(0.3))
и получил вывод
0....
0
голосов
2
ответа
90
показов
Как убрать нули в дробной части?
Как сделать так, чтобы:
3.00 стало 3
4.20 стало 4.2
1.5600 стало 1.56
12.345000000 стало 12.345
и так далее...
?
0
голосов
0
ответов
33
показа
Вещественное деление двух чисел с помощью сопроцессора, затем вывод результата на экран. Компилятор TASM
Уже несколько дней хочу научится орудовать вещественными числами, нужно для лабораторной. Даже нашёл алгоритм вывода на экран, понял его, и думал, что всё заработает. Программа принимает 2 числа, для ...
0
голосов
0
ответов
65
показов
Поиск числа с плавающей точкой в строке
#include <iostream>
#include <string>
#include <cstdlib>
#include <Windows.h>
double getVolume(double a, double b, double c) {
return (a * b * c);
}
int main()
{
...
0
голосов
1
ответ
57
показов
Подскажите, что не так? Выдает a = -nan(ind) [закрыт]
#include <iostream>
#include <cmath>
using namespace std;
const double P = 3.14159265;
double calculateA(double x, double y, double z)
{
double z1 = fabs(P * z / 180 - 1);
double a = (8....
4
голоса
1
ответ
248
показов
Сравнение эффективности float и double
Сегодня в обычном вопросе в комментариях в очередной раз всплыл вопрос, использовать ли float или double; мотивация при этом была та же, что возникала уже не раз: float должен работать быстрее.
...
5
голосов
3
ответа
710
показов
Сложение вещественных чисел с разными знаками
Пытаюсь понять, как происходит сложение вещественных чисел в формате binary32 (он же single precision или просто float в большинстве языков программирования), но немного не понимаю, почему ожидаемый ...
12
голосов
0
ответов
412
показов
При переводе числа int во float и обратно теряется точность числа
Вопрос на злобу дня освежить знания о числе с плавающей точкой и потренировать перевод этого числа в двоичную систему и обратно.
В документах оракла в пункте 5.1.2 приводится пример с потерей данных ...
0
голосов
1
ответ
417
показов
Как не терять центи при рассчете средств
Я храню значение в базе как int64 и оперирую int64, а не float, перемножаю на 100 и округляю до ближайшего. Но насколько я понял, при расчете налогов когда идет перемножение/деление я теряю цент, а ...
0
голосов
2
ответа
78
показов
Как складывать числа с очень малой дробной частью?
Скажите, как складывать числа с очень малой дробной частью и сохранять их в переменой.
Например, у меня переменная num содержит значение - 0.00000000.
Я хочу сделать так, чтобы она могла увеличиваться,...
1
голос
1
ответ
297
показов
delphi как сохранить значение single c округление до 2 цифр после запятой в компоненте
Создал компонент
TTestSingle = class (TComponent)
private
FValue: Single;
published
property Value: Single read FValue write FValue;
end;
Повесил на форму задал значение 1,222
...
0
голосов
3
ответа
492
показа
Как округлить число после запятой?
Есть число - 0.0000049999999999999996
Как его можно округлить до 0.000005?
0
голосов
0
ответов
38
показов
Почему cpp округляет double? [дубликат]
Выполняю следующий код, в num4 получаю 100.3
int main()
{
double num1 = 100.10;
double num2 = 0.002;
double num3 = num1 * num2;
double num4 = num1 + num3; //100.3
...
0
голосов
0
ответов
141
показ
Функция стандартной библиотеки для сравнения вещественных чисел С/С++
Приходится часто делать сравнения с вещественными числами, и выполняю эту операцию следующим образом:
fabs(matrix_[i][j] - other.matrix_[i][j]) > EPS
Ранее я случайно находил метод который ...
-3
голоса
1
ответ
2k
показов
Задача: "Банковские счета"
Некоторый банк хочет внедрить систему управления счетами клиентов, поддерживающую следующие операции:
-пополнение счёта клиента;
-снятие денег со счёта;
-запрос остатка средств на счёте;
-перевод ...
-1
голос
1
ответ
151
показ
си после расчета функции на вывод я получаю значение -nan [закрыт]
при программировани на си столкнулся с проблеммой, есть простая программа, при определенных значениях b в переменную l присваивается значение -nan, как можно в дальнейшем проверить что в l находится ...
0
голосов
0
ответов
126
показов
CUDA. Почему при вычислениях на GPU скорость операций с float и double примерно одинакова?
Я проводил исследование эффективности использования GPU и CPU, float и double для решения больших и сверхбольших разреженных СЛАУ и столкнулся с расхождением ожидаемых и полученных результатов.
...
0
голосов
1
ответ
174
показа
JS. Представить целое число как дробный остаток?
Первое, что пришло на ум:
function f(int){
return parseFloat("0."+int);
}
Но этот способ довольно медленный.
Может есть способ сделать это на уровне битов?
0
голосов
1
ответ
237
показов
Почему не работает сложение больших и малых чисел с плавающей точкой? [дубликат]
В общем решаю задачу и не пойму почему при командах A и D координаты не изменяются.
Начальные координаты (x = 0,001 а.с.; y = 0). Тем не менее, необходимо учитывать координаты с точностью до метра. ...
0
голосов
1
ответ
53
показа
нужно вывести 4.000, а программа выводит 4
#include <iostream>
#include <cmath>
int main() {
double a = 4.000;
std::cout << a ; // выводит 4, а нужно 4.000
return 0;
}
4
голоса
2
ответа
291
показ
Почему у double и float ошибка накапливается не равномерно?
Может кто объяснить, почему ошибка накапливается не равномерно, а довольно странными скачками?
Сейчас я экспериментирую с накапливанием ошибки для float и double.
Я провожу вычисления по следующей ...
1
голос
1
ответ
292
показа
invalid operands of types ‘float’ and ‘float’ to binary ‘operator%’
не могу понять в чём ошибка.
float a_t_pitch = 30.0;
...
if((a_t_pitch % float(30)) == 0.0)
При сборке пишет :
/compass_widget.cpp:76: ошибка: invalid operands of types ‘float’ and ‘float’ to ...
0
голосов
1
ответ
44
показа
Как исправить неточности конвертации строки в число в R?
options(scipen=999)
options(digits=20)
> v5=w$V5
> v5
[1] "0.00545364023412378000000000" "0.00000000000000000000000000" "0.01179655021791500000000000" "0....
0
голосов
1
ответ
190
показов
Ошибка сегментирования, Ассемблерная вставка в язык СИ
При компилировании выдает ошибку сегментирования:
#include <stdio.h> /*средства ввода-вывода для общения с человеком*/
#include <stdlib.h> /*базовые функции программ*/
#include <stdint....
3
голоса
1
ответ
80
показов
Почему при нахождении сум в прямом и обратном порядке ответ разный?
Почему при нахождении сумм в прямом (значение в переменной s1) и обратном порядке (s2) ответ разный?
#include <stdlib.h>
#include <stdio.h>
int main() {
float s1, s2;
long long ...
0
голосов
0
ответов
400
показов
Считываю числа в Decimal вот так: b=Decimal(input()). Ошибка b=Decimal(input()) decimal.InvalidOperation: [<class 'decimal.ConversionSyntax'>]
Пытаюсь подсчитать сумму максимальной возрастающей подпоследовательности из дробных чисел, взодные данные выглядят примерно так:
62.956673602019
7.707514622586
Использую вот такой код:
#в конец ...
3
голоса
2
ответа
4k
показов
Определение машинного эпсилон для типов double и float в С++
Поставлена стандартная для новичка задача - определить машинный эпсилон для типов данных float и double на C++. Код для float выглядит так:
i = 0;
epsilon_f = 1.0;
while(1.0 + ...
-1
голос
1
ответ
34
показа
Not overwriting variable y
Не меняеться значение переменной 'у' в цикле while
#include <iostream>
#include <string>
using namespace std;
int main()
{
int n, k, x, i;
double y;
cout << "Enter ...
0
голосов
1
ответ
2k
показов
Вывод числа с плавающей точкой с точностью, заданной переменной [дубликат]
Надо вывести число с точностью, заданной переменной
num = 12.123456789
n = 3
Out:
12.123
Встречала такое решение:
print("%.3f" % num)
Но там точность указывается непосредственно, как ...
0
голосов
1
ответ
141
показ
Как показать, что выводится float, если он хранит только целую часть?
На самом деле лучше показать на примере:
int a = 5;
float b = 5.7;
float c = 7;
std::cout << a << " " << b << " " << c;
По факту получается 5 5.7 7, ...
1
голос
1
ответ
2k
показов
Как возвести в квадрат число с плавающей точкой , чтобы программа не выходила за пределы double, но и работала верно?
В этой программе вводим сначал n-количество чисел, которые будем вводить , а затем n чисел вводим. Суть в том , что при вводе чисел таких как 3.е165 программа выводит inf т.к. выходим за пределы ...
0
голосов
1
ответ
1k
показов
Метод деления отрезка пополам
В правильно написанной программе число вычислений функции отличается от числа итераций метода на 2. Как исправить программу, чтобы программа правильно работала?
#include <stdio.h>
#include <...
1
голос
1
ответ
98
показов
Вычисление синуса через ряд Тейлора [дубликат]
Помогите пожалуйста исправить программу. Учитель просит убрать цикл вычитания пи в основной функции. Я не знаю, как написать программу, чтобы получать правильные результаты при любых значениях x после ...
1
голос
0
ответов
89
показов
Cравнить погрешность вычисления с шагом сетки для него
Вот какое было полнон условие задачи: Определить максимальный по модулю член ряда и сравнить погрешность вычисления с шагом сетки для него. Я написал программу для нахождения масимального элемента ...
1
голос
0
ответов
151
показ
Cуммирование рядов. Эффект потери точности
Это программа для вычисления суммы ряда для экспоненты. Учитель задал 2 вопроса: Кто виноват и Что делать ?
Кто виноват? Эффект потери точности(Нужно пояснить, откуда эффект потери точности)
Что ...
0
голосов
1
ответ
79
показов
Когда остановится такой цикл? В си [закрыт]
double x=1.0;
do
{
x/=2.0;
}
while( 1.0+x>1.0 );
}
3
голоса
1
ответ
258
показов
Когда остановится цикл?
double x=1;
while( x+1>x )
x++;
0
голосов
2
ответа
287
показов
Почему не выводит в консоль числа в классическом, вещественном представлении при значении E <= -4 или E >= 7?
Уважаемые, подскажите пожалуйста, почему при выводе в консоль чисел, со степенью экспоненты меньшей или равной -4, вывод происходит в экспоненциальной форме? Т. е. если написать:
public class Solution ...
1
голос
2
ответа
410
показов
Сравнение чисел с плавающей запятой с ограниченной точностью
Нужно сравнить следующие пары чисел с точностью до 4-х значащих цифр.
1134 и 1132
9933 и 9932
11344 и 11342
99343 и 99342.
Соответственно, в первых двух случаях числа получаются неравными, а в ...
0
голосов
1
ответ
386
показов
Линейные алгоритмы. В чём ошибка? C#
Код должен на основе входных данный x=3.981x10^-2 y=–1.625x10^3 z== 0.512 находить a. a должен получится
a = 1.26185. Но у меня результат a= 2,906636. Подскажите где в коде ошибка. Я думаю напутал ...
1
голос
1
ответ
48
показов
Ограничение точности вычислений
Есть такой вопрос: почему точность вычислений ограничена именно седьмым знаком после запятой(на скрине видно, что начиная именно со значения pi=3.1415927 значение площади не меняется). Единственный ...
1
голос
0
ответов
237
показов
Задать точность вывода числа с плавающей точкой в ostream
Мотивировано вот этим ответом.
Если в С можно легко вывести число с плавающей точкой с конкретным числом знаков именно после точки - через %.##lf, то как правильно поступить в C++ с потоками?
...
1
голос
1
ответ
2k
показов
Десятичный разделитель в IntellJ IDEA
Подскажите, пожалуйста, где в настройках IntellJ IDEA выставляется десятичный разделитель?
У меня это по умолчанию "," Т. е. если я использую методы класса Scanner, то при вводе вещественных ...
0
голосов
1
ответ
251
показ
Почему некорректно работает разность 2-х переменных типа double? [дубликат]
import java.util.Scanner;
public class Main {
public static void main(String[] args) {
Scanner scanner = new Scanner(System.in);
double firstDouble = scanner.nextDouble();
...
1
голос
2
ответа
47
показов
Почему не выдаёт ошибку компиляции? Системы счисления
Т. е. автор этих строк говоря о том, что данное число "просто не влезет" в тип float, говорит о том, что его точность будет потеряна?
public class Main {
public static void main(String[]...