[sisyphus] Perl memory leaks?
Ivan Adzhubey
=?iso-8859-1?q?iadzhubey_=CE=C1_rics=2Ebwh=2Eharvard=2Eedu?=
Пн Мар 3 18:20:03 MSK 2008
On Monday 03 March 2008 09:55:42 am Alexey Tourbin wrote:
> On Mon, Mar 03, 2008 at 12:04:00AM -0500, Ivan Adzhubey wrote:
> > Никто не замечал утечек памяти в перле в последнее время? У меня падает
> > скрипт с Cannot allocate memory, на операции открытия pipe:
>
> Может быть, где-то есть попытка создать Очень Большую Переменную (то
> есть поместить содержимое большого файла в переменную). В ядре может
> быть ограничение на размер непрерывного куска памяти, который можно
> подыскать для malloc'а. То есть malloc(100M) может отвалить, даже
> если в системе кумулятивно совободно больше 100M.
>
> vsu лучше знает, как сейчас с этим дело обстоит.
Похоже таки да - пытается считать большой файл в память. При этом реально
память заканчивается так как скрипт съедает все 2 гигабайта перед тем как
упасть, я топом следил. Странно, что если обрабатывать те же 50000 файлов
циклами по 1000, то все работает. А если запустить цикл сразу на 50000 -
падает на одном и том же файле. В общем к нашей сборке перла это отношения не
имеет, буду дальше разбираться.
--Иван
Подробная информация о списке рассылки Sisyphus