Как / в какой программе обрабатывать большое количество данных (наблюдений)? - PullRequest
0 голосов
/ 07 февраля 2020

У меня есть проект, в котором моя вселенная данных оплачивается в Oracle SQL. Разрабатывается и составляет около 86 миллионов строк, конечно, я хочу применить методологию, чтобы уменьшить количество наблюдений, таких как кластеры, и чтобы чтобы получить это я использую сервер с объемом оперативной памяти 248 ГБ и Rstudio. Проблема в отправке данных из SQL в Rstudio, процесс завершился сбоем во времени, и я также не смог получить данные.

Я изучаю другие варианты (в качестве альтернативы Rstudio) для получения данных из SQL. Кто-нибудь из вас имеет представление о том, как я могу получить данные и, возможно, улучшить время консультации? Я понимаю, что SQL дает вам только предварительный просмотр данных, поэтому они работают быстро, и, возможно, есть такая опция в Rstudio, Python или любом другом программном обеспечении, но я не очень знаком с этим. Я действительно ценю любую идею.

С уважением,

...