Как получить использование памяти во время выполнения с помощью C ++? - PullRequest
75 голосов
/ 21 марта 2009

Мне нужно получить VIRT и RES использования mem во время выполнения моей программы и отобразить их.

Что я пробовал до сих пор:

getrusage (http://linux.die.net/man/2/getrusage)

int who = RUSAGE_SELF; 
struct rusage usage; 
int ret; 

ret=getrusage(who,&usage);

cout<<usage.ru_maxrss;

но я всегда получаю 0.

Ответы [ 10 ]

69 голосов
/ 22 марта 2009

В Linux я никогда не нашел решение ioctl () . Для наших приложений мы написали общую служебную программу, основанную на чтении файлов в / proc / pid . Есть ряд этих файлов, которые дают разные результаты. Вот тот вопрос, на котором мы остановились (вопрос был помечен как C ++, и мы обрабатывали ввод-вывод с использованием конструкций C ++, но он должен легко адаптироваться к подпрограммам ввода-вывода C, если вам это нужно):

#include <unistd.h>
#include <ios>
#include <iostream>
#include <fstream>
#include <string>

//////////////////////////////////////////////////////////////////////////////
//
// process_mem_usage(double &, double &) - takes two doubles by reference,
// attempts to read the system-dependent data for a process' virtual memory
// size and resident set size, and return the results in KB.
//
// On failure, returns 0.0, 0.0

void process_mem_usage(double& vm_usage, double& resident_set)
{
   using std::ios_base;
   using std::ifstream;
   using std::string;

   vm_usage     = 0.0;
   resident_set = 0.0;

   // 'file' stat seems to give the most reliable results
   //
   ifstream stat_stream("/proc/self/stat",ios_base::in);

   // dummy vars for leading entries in stat that we don't care about
   //
   string pid, comm, state, ppid, pgrp, session, tty_nr;
   string tpgid, flags, minflt, cminflt, majflt, cmajflt;
   string utime, stime, cutime, cstime, priority, nice;
   string O, itrealvalue, starttime;

   // the two fields we want
   //
   unsigned long vsize;
   long rss;

   stat_stream >> pid >> comm >> state >> ppid >> pgrp >> session >> tty_nr
               >> tpgid >> flags >> minflt >> cminflt >> majflt >> cmajflt
               >> utime >> stime >> cutime >> cstime >> priority >> nice
               >> O >> itrealvalue >> starttime >> vsize >> rss; // don't care about the rest

   stat_stream.close();

   long page_size_kb = sysconf(_SC_PAGE_SIZE) / 1024; // in case x86-64 is configured to use 2MB pages
   vm_usage     = vsize / 1024.0;
   resident_set = rss * page_size_kb;
}

int main()
{
   using std::cout;
   using std::endl;

   double vm, rss;
   process_mem_usage(vm, rss);
   cout << "VM: " << vm << "; RSS: " << rss << endl;
}
45 голосов
/ 18 февраля 2013

Дэвид Роберт Надо добавил хорошую автономную мультиплатформенную функцию C, чтобы получить размер резидентного набора процесса (использование физической памяти) на своем веб-сайте:

/*
 * Author:  David Robert Nadeau
 * Site:    http://NadeauSoftware.com/
 * License: Creative Commons Attribution 3.0 Unported License
 *          http://creativecommons.org/licenses/by/3.0/deed.en_US
 */

#if defined(_WIN32)
#include <windows.h>
#include <psapi.h>

#elif defined(__unix__) || defined(__unix) || defined(unix) || (defined(__APPLE__) && defined(__MACH__))
#include <unistd.h>
#include <sys/resource.h>

#if defined(__APPLE__) && defined(__MACH__)
#include <mach/mach.h>

#elif (defined(_AIX) || defined(__TOS__AIX__)) || (defined(__sun__) || defined(__sun) || defined(sun) && (defined(__SVR4) || defined(__svr4__)))
#include <fcntl.h>
#include <procfs.h>

#elif defined(__linux__) || defined(__linux) || defined(linux) || defined(__gnu_linux__)
#include <stdio.h>

#endif

#else
#error "Cannot define getPeakRSS( ) or getCurrentRSS( ) for an unknown OS."
#endif





/**
 * Returns the peak (maximum so far) resident set size (physical
 * memory use) measured in bytes, or zero if the value cannot be
 * determined on this OS.
 */
size_t getPeakRSS( )
{
#if defined(_WIN32)
    /* Windows -------------------------------------------------- */
    PROCESS_MEMORY_COUNTERS info;
    GetProcessMemoryInfo( GetCurrentProcess( ), &info, sizeof(info) );
    return (size_t)info.PeakWorkingSetSize;

#elif (defined(_AIX) || defined(__TOS__AIX__)) || (defined(__sun__) || defined(__sun) || defined(sun) && (defined(__SVR4) || defined(__svr4__)))
    /* AIX and Solaris ------------------------------------------ */
    struct psinfo psinfo;
    int fd = -1;
    if ( (fd = open( "/proc/self/psinfo", O_RDONLY )) == -1 )
        return (size_t)0L;      /* Can't open? */
    if ( read( fd, &psinfo, sizeof(psinfo) ) != sizeof(psinfo) )
    {
        close( fd );
        return (size_t)0L;      /* Can't read? */
    }
    close( fd );
    return (size_t)(psinfo.pr_rssize * 1024L);

#elif defined(__unix__) || defined(__unix) || defined(unix) || (defined(__APPLE__) && defined(__MACH__))
    /* BSD, Linux, and OSX -------------------------------------- */
    struct rusage rusage;
    getrusage( RUSAGE_SELF, &rusage );
#if defined(__APPLE__) && defined(__MACH__)
    return (size_t)rusage.ru_maxrss;
#else
    return (size_t)(rusage.ru_maxrss * 1024L);
#endif

#else
    /* Unknown OS ----------------------------------------------- */
    return (size_t)0L;          /* Unsupported. */
#endif
}





/**
 * Returns the current resident set size (physical memory use) measured
 * in bytes, or zero if the value cannot be determined on this OS.
 */
size_t getCurrentRSS( )
{
#if defined(_WIN32)
    /* Windows -------------------------------------------------- */
    PROCESS_MEMORY_COUNTERS info;
    GetProcessMemoryInfo( GetCurrentProcess( ), &info, sizeof(info) );
    return (size_t)info.WorkingSetSize;

#elif defined(__APPLE__) && defined(__MACH__)
    /* OSX ------------------------------------------------------ */
    struct mach_task_basic_info info;
    mach_msg_type_number_t infoCount = MACH_TASK_BASIC_INFO_COUNT;
    if ( task_info( mach_task_self( ), MACH_TASK_BASIC_INFO,
        (task_info_t)&info, &infoCount ) != KERN_SUCCESS )
        return (size_t)0L;      /* Can't access? */
    return (size_t)info.resident_size;

#elif defined(__linux__) || defined(__linux) || defined(linux) || defined(__gnu_linux__)
    /* Linux ---------------------------------------------------- */
    long rss = 0L;
    FILE* fp = NULL;
    if ( (fp = fopen( "/proc/self/statm", "r" )) == NULL )
        return (size_t)0L;      /* Can't open? */
    if ( fscanf( fp, "%*s%ld", &rss ) != 1 )
    {
        fclose( fp );
        return (size_t)0L;      /* Can't read? */
    }
    fclose( fp );
    return (size_t)rss * (size_t)sysconf( _SC_PAGESIZE);

#else
    /* AIX, BSD, Solaris, and Unknown OS ------------------------ */
    return (size_t)0L;          /* Unsupported. */
#endif
}

Использование

size_t currentSize = getCurrentRSS( );
size_t peakSize    = getPeakRSS( );

Для получения дополнительной информации посетите веб-сайт, он также предоставляет функцию для получения объема физической памяти системы .

19 голосов
/ 21 марта 2009

Old:

maxrss устанавливает максимально доступный память для процесса. 0 означает, что нет ограничений на процесс. Какие Вы, вероятно, хотите, чтобы не было общих данных использование ru_idrss.

Новое: Кажется, что на самом деле выше не работает, так как ядро ​​не заполняет большинство значений. Что работает, так это получить информацию от proc. Вместо того, чтобы разбирать его самостоятельно, проще использовать libproc (часть procps) следующим образом:

// getrusage.c
#include <stdio.h>
#include <proc/readproc.h>

int main() {
  struct proc_t usage;
  look_up_our_self(&usage);
  printf("usage: %lu\n", usage.vsize);
}

Компилировать с "gcc -o getrusage getrusage.c -lproc"

9 голосов
/ 21 марта 2009

В Linux, если вы можете позволить себе затраты времени выполнения (для отладки), вы можете использовать valgrind с инструментом массива:

http://valgrind.org/docs/manual/ms-manual.html

Это тяжелый вес, но очень полезный.

6 голосов
/ 03 августа 2009

Существующие ответы лучше для того, как получить правильное значение, но я могу хотя бы объяснить, почему getrusage не работает для вас.

man 2 getrusage:

Вышеупомянутая структура [rusage] была взята из BSD 4.3 Reno. Не все поля имеют смысл в Linux. В настоящее время (Linux 2.4, 2.6) поддерживаются только поля ru_utime, ru_stime, ru_minflt, ru_majflt и ru_nswap.

5 голосов
/ 01 октября 2012

Более элегантный способ для метода Дона Уэйкфилда:

#include <iostream>
#include <fstream>

using namespace std;

int main(){

    int tSize = 0, resident = 0, share = 0;
    ifstream buffer("/proc/self/statm");
    buffer >> tSize >> resident >> share;
    buffer.close();

    long page_size_kb = sysconf(_SC_PAGE_SIZE) / 1024; // in case x86-64 is configured to use 2MB pages
    double rss = resident * page_size_kb;
    cout << "RSS - " << rss << " kB\n";

    double shared_mem = share * page_size_kb;
    cout << "Shared Memory - " << shared_mem << " kB\n";

    cout << "Private Memory - " << rss - shared_mem << "kB\n";
    return 0;
}
3 голосов
/ 21 марта 2009

в дополнение к вашему
Вы можете вызвать системную команду ps и получить из нее вывод памяти.
или прочитайте информацию из / proc / pid (см. структуру PIOCPSINFO)

1 голос
/ 04 ноября 2013

На основе решения Дона В., с меньшим количеством переменных.

void process_mem_usage(double& vm_usage, double& resident_set)
{
    vm_usage     = 0.0;
    resident_set = 0.0;

    // the two fields we want
    unsigned long vsize;
    long rss;
    {
        std::string ignore;
        std::ifstream ifs("/proc/self/stat", std::ios_base::in);
        ifs >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore
                >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore >> ignore
                >> ignore >> ignore >> vsize >> rss;
    }

    long page_size_kb = sysconf(_SC_PAGE_SIZE) / 1024; // in case x86-64 is configured to use 2MB pages
    vm_usage = vsize / 1024.0;
    resident_set = rss * page_size_kb;
}
1 голос
/ 10 апреля 2009

Я использую другой способ сделать это, и это звучит реалистично. Я получаю PID процесса с помощью функции getpid (), а затем я использую файл / proc / pid / stat. Я считаю, что 23-й столбец файла статистики - это vmsize (посмотрите на сообщение Дона). Вы можете прочитать vmsize из файла, где вам нужно в коде. Если вам интересно, сколько фрагментов кода может использовать память, вы можете прочитать этот файл один раз перед этим фрагментом и один раз после, и вы можете вычесть их друг из друга.

0 голосов
/ 02 октября 2014

Я искал приложение для Linux для измерения максимального объема используемой памяти. valgrind - отличный инструмент, но он дал мне больше информации, чем я хотел. tstime казалось лучшим инструментом, который я мог найти. Он измеряет «высокопроизводительное» использование памяти (RSS и виртуальное). См. этот ответ .

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...