Вопросы с тегом точность - PullRequest

Вопросы с тегом точность

0 голосов
3 ответов

Эй, я делаю функцию, которая возвращает количество десятичных, целых или ОБЩИХ чисел, которые есть,...

Griffin / 16 мая 2011
22 голосов
3 ответов

У меня есть следующий код: float f = 0.3f; double d1 = System.Convert.ToDouble(f); double d2 =...

JoshG / 13 мая 2011
14 голосов
3 ответов

У меня проблема с потерей точности. Я импортировал набор значений из файла CSV в MATLAB 7,...

wishi / 11 мая 2011
1 голос
1 ответ

в моем гибком приложении я получаю данные из базы данных ..... (т.е.) в виде цены десятичное (18,4)...

ConquistadorAravinth / 09 мая 2011
5 голосов
1 ответ

Мне было бы интересно увеличить предел с плавающей запятой для расчета qnorm / pnorm от их текущего...

Tal Galili / 09 мая 2011
4 голосов
2 ответов

Я храню значения Lat и Long в типе GEOMETRY в MySql.К сожалению, кажется, что он округляется до 4...

George Johnston / 06 мая 2011
3 голосов
1 ответ

С этим вопросом Пи в C # Я кодировал приведенный ниже код и выводил с последними 6 цифрами как 0....

Karthik Ratnam / 05 мая 2011
3 голосов
1 ответ

a = np.random.random((512,512,3)).astype(np.float32) b = np.ones((512,512,1), dtype=np.int32) c = a...

Dat Chu / 04 мая 2011
0 голосов
1 ответ

У меня следующая структура mySQL id double PK datenum double(12,11) Timestamp varchar(25)...

OHLÁLÁ / 03 мая 2011
2 голосов
1 ответ

Вот тестовая программа, которая приносит мне горе: #include <xmmintrin.h> #include <stdio

Dimitri Tcaciuc / 02 мая 2011
4 голосов
2 ответов

Если вы введете 78764357878563812 в Chrome или Safari, вы получите Если вы делаете for(var i = 0; i...

tyoc213 / 28 апреля 2011
11 голосов
5 ответов

Я работаю с приложением, которое полностью основано на double, и у меня возникли проблемы с одним...

Edward Q. Bridges / 22 апреля 2011
28 голосов
5 ответов

Контрольный пример: NSLog(@"%f", M_PI); NSLog(@"%@", [NSString...

Ariel Malka / 20 апреля 2011
5 голосов
4 ответов

Я задавал вопрос об этом классе раньше, но вот еще раз. Я создал сложный класс: public class...

Timo Willemsen / 18 апреля 2011
4 голосов
4 ответов

Я пытаюсь прочитать двоичный файл с JavaScript, который содержит много 16-битных чисел с плавающей...

Toji / 15 апреля 2011
1 голос
1 ответ

Когда младшие значащие значения типа double отличны от нуля, он отображается с различной точностью...

narduk / 11 апреля 2011
1 голос
2 ответов

У меня есть несколько столбцов в хранилище данных с точностью до десятичного знака. Я хочу...

Sonic Soul / 06 апреля 2011
14 голосов
3 ответов

Как я могу реализовать четырехкратную точность (128-битную арифметику) в MATLAB при решении...

Dev / 06 апреля 2011
2 голосов
4 ответов

Я сейчас пишу приложение для калькулятора.Я знаю, что двойной не лучший выбор для хорошей...

The Dude / 06 апреля 2011
5 голосов
3 ответов

Я подтвердил, что в сервис поступает правильное значение «2,87» и, согласно диаграмме EF, тип поля...

punkouter / 05 апреля 2011
3 голосов
10 ответов

Я пытаюсь улучшить производительность своей функции. Профилировщик указывает на код во внутреннем...

KindDragon / 01 апреля 2011
9 голосов
3 ответов

double в C # недостаточно точны для моих нужд. Я пишу фрактальную программу, и после увеличения в...

simonalexander2005 / 29 марта 2011
0 голосов
2 ответов

Учитывая этот пример кода: start = time.clock() while (abs(x**2 - userInput) > epsilon): x = 0.5...

Trufa / 25 марта 2011
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...