Выбирайте r результатов из n возможностей эффективно в Pandas - PullRequest
0 голосов
/ 30 января 2019

У меня есть данные за 50 лет.Мне нужно выбрать комбинацию из 30 лет, чтобы соответствующие значения достигли определенного порогового значения, но возможное число комбинаций для 50C30 должно составить 47129212243960.Как рассчитать это эффективно?

          Prs_100      
  Yrs                                                 
  2012  425.189729  
  2013  256.382494  
  2014  363.309507  
  2015  578.728535  
  2016  309.311562  
  2017  476.388839  
  2018  441.479570  
  2019  342.267756  
  2020  388.133403  
  2021  405.007245  
  2022  316.108551  
  2023  392.193322  
  2024  296.545395  
  2025  467.388190  
  2026  644.588971  
  2027  301.086631  
  2028  478.492618  
  2029  435.868944  
  2030  467.464995  
  2031  323.465049  
  2032  391.201598  
  2033  548.911349  
  2034  381.252838  
  2035  451.175339  
  2036  281.921215  
  2037  403.840004  
  2038  460.514250  
  2039  409.134409  
  2040  312.182576 
  2041  320.246886  
  2042  290.163454  
  2043  381.432168  
  2044  259.228592  
  2045  393.841815  
  2046  342.999972  
  2047  337.491898  
  2048  486.139010  
  2049  318.278012  
  2050  385.919542  
  2051  309.472316  
  2052  307.756455  
  2053  338.596315  
  2054  322.508536  
  2055  385.428138  
  2056  339.379743  
  2057  420.428529  
  2058  417.143175 
  2059  361.643381  
  2060  459.861622  
  2061  374.359335

Мне нужна только та 30-летняя комбинация, среднее значение которой Prs_100 достигает определенного порогового значения, и я могу отказаться от расчета дальнейших результатов. При поиске SO я нашелособый подход с использованием алгоритма apriori, но не смог определить значения поддержки в нем.

Я использовал метод комбинаций python

 list(combinations(dftest.index,30))

, но он не работалв данном случае.

Ожидаемый результат. Допустим, я нашел набор на 30 лет, среднее значение которого Prs_100 превышает 460, затем я сохраню результат этих 30 лет, и он будетбыть моим желаемым результатом тоже.Как это сделать?

Ответы [ 2 ]

0 голосов
/ 30 января 2019

Мой предыдущий ответ был вне базы, поэтому я попробую еще раз.Из повторного прочтения вашего вопроса похоже, что вы ищете один результат за 30 лет, где среднее значение значений Prs_100 превышает 460.

Следующий код может сделать это, но когда я его запустил, у меня былоначались трудности после 415 для среднего значения.

После запуска вы получите список лет 'список_ лет' и список значений 'Prs_100_list', удовлетворяющих критериям среднего значения> 460 (415 в приведенном ниже примере).

Вот мойкод, надеюсь, это в области того, что вы ищете.

from math import factorial
import numpy as np
import pandas as pd
from itertools import combinations
import time

# start a timer
start = time.time()

# array of values to work with, corresponding to the years 2012 - 2062
prs_100 = np.array([
       425.189729, 256.382494, 363.309507, 578.728535, 309.311562,
       476.388839, 441.47957 , 342.267756, 388.133403, 405.007245,
       316.108551, 392.193322, 296.545395, 467.38819 , 644.588971,
       301.086631, 478.492618, 435.868944, 467.464995, 323.465049,
       391.201598, 548.911349, 381.252838, 451.175339, 281.921215,
       403.840004, 460.51425 , 409.134409, 312.182576, 320.246886,
       290.163454, 381.432168, 259.228592, 393.841815, 342.999972,
       337.491898, 486.13901 , 318.278012, 385.919542, 309.472316,
       307.756455, 338.596315, 322.508536, 385.428138, 339.379743,
       420.428529, 417.143175, 361.643381, 459.861622, 374.359335])

# build dataframe with prs_100 as index and years as values, so that  years can be returned easily.
df = pd.DataFrame(list(range(2012, 2062)), index=prs_100, columns=['years'])

df.index.name = 'Prs_100'

# set combination parameters
r =  30
n = len(prs_100)

Prs_100_list = []
years_list = []
count = 0    

for p in combinations(prs_100, r):
    if np.mean(p) > 391 and np.mean(p) < 400:
        Prs_100_list.append(p)
        years_list.append(df.loc[p,'years'].values.tolist())
        # build in some exit
        count += 1
        if count > 100: 
            break
0 голосов
/ 30 января 2019

Вы можете использовать numpy's random.choice:

In [11]: df.iloc[np.random.choice(np.arange(len(df)), 3)]
Out[11]:
         Prs_100
Yrs
2023  392.193322
2047  337.491898
2026  644.588971
...