Как улучшить тестирование программы (поток данных и расчет) при помощи графического процессора DataFame в python - PullRequest
0 голосов
/ 02 сентября 2018

BackGround:

Теперь у моей программы есть четыре кадра данных Pandas для хранения и накопления данных в оперативной памяти. Поток данных в миллионы миллиардов (данные о ценах на акции), хранящиеся в оперативной памяти, построчно переходят в кадры данных. Каждый раз каждый фрейм данных должен рассчитываться сотни раз.

Поток чата:

dataline-->DataFrame1(caculate)-->result-->DataFrame2(caculate)-->result-->
  DataFrame4(caculate)-->result-->DataFraem1(caculate)-->resulte-->DataFrame3(caculate)-->......finished-->result+new dataline --> same as last time

Мой вопрос:

моя программа невероятно медленная, я нахожу, что каждый калькулятор кадров данных проводит обычное время, например, 0,5 мс, однако общее время неприемлемо. Я хочу, чтобы я мог поместить dataframe непосредственно в GPU и позволить потоку данных идти непосредственно в DataFrame. как это сделать? или есть какой-нибудь другой способ позволить программе быстро?

Искренне прошу совета

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...