Форум QUIK [тема: Открытие файла и память]

Открытие файла и память

Mon, 26 Oct 2020 17:53:35 +0300

Открытие файла и память в форуме Программирование на языке Lua.

====quote====
s_mike@rambler.ru написал:

====quote====
Старатель написал:
Что интересно, если переменную удалить сразу после использования, то скрипт станет занимать больше памяти.
====code====

      local   a   =     0  
 print (collectgarbage(  "count"  ))    --> 23.4453125

=============
====code====

      local   a   =     0  
a   =     nil  
 print (collectgarbage(  "count"  ))    --> 23.453125

=============
=============
рaзница в 8 байт. Как раз длина строчки a = nil )
=============
a=nil - не удаляет переменную, а присваивает ей значение nil
а скрипт естественно длиннее на строку a=nil.
------------------------------------
Чудес не бывает, бывает лишь отсутствие знаний.
26.10.2020 17:53:35, nikolz.

Открытие файла и память

Mon, 26 Oct 2020 01:11:52 +0300

Открытие файла и память в форуме Программирование на языке Lua.

====quote====
Старатель написал:
Что интересно, если переменную удалить сразу после использования, то скрипт станет занимать больше памяти.
====code====

   local  a  =   0 
 print (collectgarbage( "count" ))   --> 23.4453125

=============
====code====

   local  a  =   0 
a  =   nil 
 print (collectgarbage( "count" ))   --> 23.453125

=============
=============
рaзница в 8 байт. Как раз длина строчки a = nil )
26.10.2020 01:11:52, s_mike@rambler.ru.

Открытие файла и память

Sun, 25 Oct 2020 23:39:04 +0300

Открытие файла и память в форуме Программирование на языке Lua.
Что интересно, если переменную удалить сразу после использования, то скрипт станет занимать больше памяти.
====code====

local a = 0
print(collectgarbage("count"))  --> 23.4453125

=============
====code====

local a = 0
a = nil
print(collectgarbage("count"))  --> 23.453125

=============
25.10.2020 23:39:04, Старатель.

Открытие файла и память

Mon, 19 Oct 2020 23:42:15 +0300

Открытие файла и память в форуме Программирование на языке Lua.
s_mike@rambler.ru, довёл до 50. Те же яйца. Тут бы понимать принцип. А так в слепую.
19.10.2020 23:42:15, валерий.

Открытие файла и память

Mon, 19 Oct 2020 22:05:18 +0300

Открытие файла и память в форуме Программирование на языке Lua.

====quote====
валерий написал:
Довёл setstepmul до 700 - никакого эффекта.
=============
уменьшать надо )))
19.10.2020 22:05:18, s_mike@rambler.ru.

Открытие файла и память

Mon, 19 Oct 2020 21:19:57 +0300

Открытие файла и память в форуме Программирование на языке Lua.
Довёл setstepmul до 700 - никакого эффекта.
19.10.2020 21:19:57, валерий.

Открытие файла и память

Mon, 19 Oct 2020 18:20:35 +0300

Открытие файла и память в форуме Программирование на языке Lua.
s_mike@rambler.ru, маленький, но без участия такой код за день вырастет с 40КБ до десятка МБ. Оно конечно некритично, но некрасиво. И не знаю сбросится ли память при пересменке, если квик не закрываешь.
Агрессивность сборщика это setstepmul
19.10.2020 18:20:35, валерий.

Открытие файла и память

Mon, 19 Oct 2020 18:07:33 +0300

Открытие файла и память в форуме Программирование на языке Lua.
Игорь, нет, дело не в string.rep. Если поставить единичку вместо 500, то сборщик опять не вызывается. Похоже дело в медленном накоплении мусора. Может как-то можно настроить сборщика на такое, но я погуглил и внятного разъяснения не нашёл. Так что или методом тыка подбирать или просто и грубо установить предел памяти для активации сборщика.
19.10.2020 18:07:33, валерий.

Открытие файла и память

Mon, 19 Oct 2020 18:01:39 +0300

Открытие файла и память в форуме Программирование на языке Lua.
Io.open создаёт в памяти объект - дескриптор. Даже после закрытия этот объект остаётся в памяти до момента прохода сборщиком мусора.

обьект маленький, поэтому при стандартных настройках сборщика (200%) нет необходимости его чистить. Когда количество таких дескрипторов станет достаточно большим, сборщик их все уберет. Либо увеличивайте агрессивность сборщика, либо вызывайте его принудительно, но лучше не делайте вообще ничего, все будет хорошо и без вашего участия.
19.10.2020 18:01:39, s_mike@rambler.ru.

Открытие файла и память

Mon, 19 Oct 2020 17:13:26 +0300

Открытие файла и память в форуме Программирование на языке Lua.

====quote====
валерий написал:
Странно, но ему похоже не нравится именно, когда в файл ничего не пишешь.
=============
Похоже что string.rep("asd,qwe\n",500) вызывает сборщик мусора, можно и не писать ничего. А обязательно файл открывать в функции? Может просто раз открыть а внутри f:flush делать - тогда и коллектор не нужен. Видимо сам io.open постоянно аллоцирует память.
19.10.2020 17:13:26, Игорь.

Открытие файла и память

Mon, 19 Oct 2020 11:55:42 +0300

Открытие файла и память в форуме Программирование на языке Lua.
А вот так сборщик работает хорошо - память сбрасывает: ====code====

local stopped = false

function OnStop(flag)
    stopped = true
end

function f11()
   local fpath = getScriptPath() .. "\\tos11.log"
   local f = io.open(fpath, "w+")
   local fstr = string.rep("asd,qwe\n",500)
   f:write(fstr)
   f:flush()
   f:close()
   f = nil
   fstr = nil
end

function main()
    while not stopped do
      f11()
      sleep(100)
    end
end

============= Странно, но ему похоже не нравится именно, когда в файл ничего не пишешь.
19.10.2020 11:55:42, валерий.

Открытие файла и память

Mon, 19 Oct 2020 01:55:49 +0300

Открытие файла и память в форуме Программирование на языке Lua.
UPD. Не успевает коллектор. Вот так не течет
====code====

local stopped = false

function OnStop(flag)
    stopped = true
end

function f11()
   local fpath = getScriptPath() .. "\\tos11.log"
   local f = io.open(fpath, "w+")
   f:close()
   f = nil
end

function main()
    while not stopped do
      f11()
      sleep(100)
      collectgarbage("step")
    end
end

=============
19.10.2020 01:55:49, Anton.

Открытие файла и память

Mon, 19 Oct 2020 01:35:37 +0300

Открытие файла и память в форуме Программирование на языке Lua.

====quote====
валерий написал:
так вопрос-то именно в том откуда здесь вообще может взяться garbage?
=============
Так-то мусора полно. Объект файл один уже чего стоит, он ведь не кэшируется, открыли-закрыли - в мусор. Строка от getScriptPath сразу после использования - в мусор, fpath сразу после использования - в мусор. По-хорошему оно должно рано или поздно начисто все прибираться, иначе либо не успевает коллектор (вполне, кстати, возможно), либо где-то подтекает все-таки.
19.10.2020 01:35:37, Anton.

Открытие файла и память

Sun, 18 Oct 2020 22:08:25 +0300

Открытие файла и память в форуме Программирование на языке Lua.

====quote====
Игорь написал:
Запустил такой код в Луа 5.3. - также потихоньку растет, но периодически чуть-чуть уменьшается видимо от сборки мусора.
=============
Но это не связано с f11(), там память растет и просто при вызове collectgarbage("count") :(

18.10.2020 22:08:25, Игорь.

Открытие файла и память

Sun, 18 Oct 2020 20:59:54 +0300

Открытие файла и память в форуме Программирование на языке Lua.

====quote====
валерий написал:
Игорь, так вопрос-то именно в том откуда здесь вообще может взяться garbage? Может не догоняю?
=============
Кто бы знал. Я не спец в Луа. ====code====

local fpath = "f:\\temp\\tos11.log"

function sleep(s)
  local ntime = os.time() + s
  repeat until os.time() > ntime
end

function f11()
   local f = io.open(fpath, "w+")
   if f then f:close() end
end

while true do
  f11()
  print(collectgarbage("count"))
  sleep(1)
end

============= Запустил такой код в Луа 5.3. - также потихоньку растет, но периодически чуть-чуть уменьшается видимо от сборки мусора.
18.10.2020 20:59:54, Игорь.

Открытие файла и память

Sun, 18 Oct 2020 19:16:15 +0300

Открытие файла и память в форуме Программирование на языке Lua.
Игорь, так вопрос-то именно в том откуда здесь вообще может взяться garbage? Может не догоняю?
18.10.2020 19:16:15, валерий.

Открытие файла и память

Sun, 18 Oct 2020 19:09:33 +0300

Открытие файла и память в форуме Программирование на языке Lua.
Владимир, открывать и закрывать файл нужно там где нужно. Впрочем и в main те же яйца.
18.10.2020 19:09:33, валерий.

Открытие файла и память

Sun, 18 Oct 2020 17:18:56 +0300

Открытие файла и память в форуме Программирование на языке Lua.
валерий, да вроде все правильно, попробовал, чем меньше слип тем быстрее утекает. Как вариант периодически вызывать collectgarbage("collect")
18.10.2020 17:18:56, Игорь.

Открытие файла и память

Sun, 18 Oct 2020 16:03:27 +0300

Открытие файла и память в форуме Программирование на языке Lua.
валерий, Как минимум, открывать и закрывать файл нужно в main, а не раз в 0.1 секунды. Ну и stopped вряд ли должен быть local.
18.10.2020 16:03:27, Владимир.

Открытие файла и память

Sun, 18 Oct 2020 13:51:01 +0300

Открытие файла и память в форуме Программирование на языке Lua.
Вот такой простенький код даёт 1 МБ прироста памяти в час. Некритично, но непонятно почему. Так и должно быть или я что-то делаю не так? ====code====

local stopped = false

function OnStop(flag)
    stopped = true
end

function f11()
   local fpath = getScriptPath() .. "\\tos11.log"
   local f = io.open(fpath, "w+")
   f:close()
   f = nil
end

function main()
    while not stopped do
      f11()
      sleep(100)
    end
end

=============
18.10.2020 13:51:01, валерий.