[sisyphus] Perl memory leaks?

Ivan Adzhubey =?iso-8859-1?q?iadzhubey_=CE=C1_rics=2Ebwh=2Eharvard=2Eedu?=
Пн Мар 3 18:20:03 MSK 2008


On Monday 03 March 2008 09:55:42 am Alexey Tourbin wrote:
> On Mon, Mar 03, 2008 at 12:04:00AM -0500, Ivan Adzhubey wrote:
> > Никто не замечал утечек памяти в перле в последнее время? У меня падает
> > скрипт с Cannot allocate memory, на операции открытия pipe:
>
> Может быть, где-то есть попытка создать Очень Большую Переменную (то
> есть поместить содержимое большого файла в переменную).  В ядре может
> быть ограничение на размер непрерывного куска памяти, который можно
> подыскать для malloc'а.  То есть malloc(100M) может отвалить, даже
> если в системе кумулятивно совободно больше 100M.
>
> vsu лучше знает, как сейчас с этим дело обстоит.

Похоже таки да - пытается считать большой файл в память. При этом реально 
память заканчивается так как скрипт съедает все 2 гигабайта перед тем как 
упасть, я топом следил. Странно, что если обрабатывать те же 50000 файлов 
циклами по 1000, то все работает. А если запустить цикл сразу на 50000 - 
падает на одном и том же файле. В общем к нашей сборке перла это отношения не 
имеет, буду дальше разбираться.

--Иван




Подробная информация о списке рассылки Sisyphus