как libxml2 имеет дело с фрагментацией

Question

Я добавил свои пользовательские распределители для libxml2 в проект, и я вижу список выделенных и бесплатных вызовов. Я пытаюсь проверить, как libxml2 имеет дело с фрагментацией, если вообще это делает. Исполняемый файл программы начинает увеличивать память и не возвращает ее обратно в ОС. Существует документация libxml2, в которой говорится, что это может произойти в случае, если ОС решит, что возвращаемая память слишком мала и слишком много накладных расходов для повторного использования. Моя программа использует множество небольших распределений, используя и освобождая их. В остальной части приложения используются пулы памяти на основе потоков, поэтому нет возможности протекать там, эти пулы получают сброс на каждой итерации вызовов обработчиков. Я использовал следующие функции, чтобы перезаписать распределители по умолчанию, чтобы проверить распределения. Любая помощь в понимании этого может быть полезна. Я попытался найти на сайте фрагментацию памяти, не добившись успеха.

/* the function override the libxml2 default ones **/ 
void cfreeFunc(void* ptr); 
void * cmallocFunc(size_t size); 
void * cmallocAtomicFunc(size_t size); 
void * creallocFunc(void *ptr, size_t size); 
char * cstrdupFunc(const char *str); 

xmlGcMemSetup(cfreeFunc, cmallocFunc, cmallocAtomicFunc, creallocFunc, 
     cstrdupFunc); 

Answer 1

libxml2 предоставляет метод, чтобы переопределить это функции управления памятью - то, что, если бы не это, можно было бы сделать, чтобы решить проблему? Это зависит от ваших функций - и если вы используете sbrk (или malloc, который использует sbrk), вы никогда не возвращаете память. Вы можете попробовать использовать отдельный mmap для каждого отдельного размещения, однако в случае большого количества очень маленьких распределений это значительно увеличит объем памяти. Лучший подход - выделить буферы с помощью mmap и использовать их в качестве папок памяти для будущих распределений.