ram compression?
От: Andrei F.  
Дата: 05.03.08 06:25
Оценка:
Во времена win95 были распространены программы, которые позволяли уменьшать свопинг с помощью сжатия отдельных фрагментов памяти (т.е. вместо того чтобы сбрасывать страницу в своп-файл — оставить ее в оперативной памяти, но сжать)
Интересно, почему сейчас эта идея никем не используется?
Re: ram compression?
От: Курилка Россия http://kirya.narod.ru/
Дата: 05.03.08 06:32
Оценка:
Здравствуйте, Andrei F., Вы писали:

AF>Во времена win95 были распространены программы, которые позволяли уменьшать свопинг с помощью сжатия отдельных фрагментов памяти (т.е. вместо того чтобы сбрасывать страницу в своп-файл — оставить ее в оперативной памяти, но сжать)

AF>Интересно, почему сейчас эта идея никем не используется?

Лучше день потерять, а потом за 5 минут долететь?
Имхо накладные расходы по времени/месту вполне очевидны. Теоретически в системах критичных по скорости имхо проще купить дополнительную планку памяти, чем усложнять механизмы её (пере)распределения. В цифрах конкретных выкладок не приведу, но думаю, врядли этот вопрос совсем не рассматривался осеписателями.
Re[2]: ram compression?
От: Andrei F.  
Дата: 05.03.08 06:37
Оценка: +1
Здравствуйте, Курилка, Вы писали:

К>Лучше день потерять, а потом за 5 минут долететь?

К>Имхо накладные расходы по времени/месту вполне очевидны. Теоретически в системах критичных по скорости имхо проще купить дополнительную планку памяти, чем усложнять механизмы её (пере)распределения. В цифрах конкретных выкладок не приведу, но думаю, врядли этот вопрос совсем не рассматривался осеписателями.

Накладные расходы на сжатие очевидны, но они точно меньше чем расходы на выгрузку страницы на винчестер. Особенно в условиях, когда приложения и так активно работают с винчестером.
К тому же дополнительные ядра на процессоре все равно обычно простаивают без дела
Re[3]: ram compression?
От: Курилка Россия http://kirya.narod.ru/
Дата: 05.03.08 06:50
Оценка:
Здравствуйте, Andrei F., Вы писали:

AF>Здравствуйте, Курилка, Вы писали:


К>>Лучше день потерять, а потом за 5 минут долететь?

К>>Имхо накладные расходы по времени/месту вполне очевидны. Теоретически в системах критичных по скорости имхо проще купить дополнительную планку памяти, чем усложнять механизмы её (пере)распределения. В цифрах конкретных выкладок не приведу, но думаю, врядли этот вопрос совсем не рассматривался осеписателями.

AF>Накладные расходы на сжатие очевидны, но они точно меньше чем расходы на выгрузку страницы на винчестер. Особенно в условиях, когда приложения и так активно работают с винчестером.

И расходы на память будут меньше? У меня вот есть ощущение, что X + Y > X (где Y ненулевое).
И ещё может я, конечно, гоню, но вроде в линухе были какие-то финты ушами, которые позволяют своп в памяти держать. Вполне возможно, что туда можно прикрутить ФС, поддерживающую сжатие.
Правда всё равно в большинстве случаев это экономия на спичках, поэтому рассматривать абстрактно общий случай не очень интересно. А в конкретных системах с хитрыми условиями может приминяться и предложенный тобой вариант. Надо только смотреть что дешевле — купить планку или иметь сношения с нестандартной конфигурацией системы
Re[4]: ram compression?
От: Andrei F.  
Дата: 05.03.08 07:20
Оценка:
Здравствуйте, Курилка, Вы писали:

К>И расходы на память будут меньше? У меня вот есть ощущение, что X + Y > X (где Y ненулевое).


Если данные сжать, то они точно станут меньше по объему.

К>Правда всё равно в большинстве случаев это экономия на спичках, поэтому рассматривать абстрактно общий случай не очень интересно. А в конкретных системах с хитрыми условиями может приминяться и предложенный тобой вариант.


Чтобы рассматривать конкретные случаи, надо иметь какие-то тесты, которые эмулируют работу в условиях нехватки оперативки. Интересно, такие существуют в природе?
Re[5]: ram compression?
От: Курилка Россия http://kirya.narod.ru/
Дата: 05.03.08 07:41
Оценка:
Здравствуйте, Andrei F., Вы писали:

AF>Здравствуйте, Курилка, Вы писали:


К>>И расходы на память будут меньше? У меня вот есть ощущение, что X + Y > X (где Y ненулевое).


AF>Если данные сжать, то они точно станут меньше по объему.


Т.е. в момент распаковки/запаковки у тебя магическим образом мгновенно испарится сжатая/оригинальная версия участка памяти?
В итоге получим, что нам в любом случае надо иметь "страховочный" объём памяти, равный максимальному размеру сжимаемой области памяти. Или делаем "сжатие по месту" надеясь на то, что в ходе паковки/распаковки ничего не произойдёт? Типа "кто не рискует, тот не пьёт"?

AF>Чтобы рассматривать конкретные случаи, надо иметь какие-то тесты, которые эмулируют работу в условиях нехватки оперативки. Интересно, такие существуют в природе?


Ну эт не ко мне
Re[6]: ram compression?
От: Andrei F.  
Дата: 05.03.08 07:49
Оценка:
Здравствуйте, Курилка, Вы писали:

К>Т.е. в момент распаковки/запаковки у тебя магическим образом мгновенно испарится сжатая/оригинальная версия участка памяти?

К>В итоге получим, что нам в любом случае надо иметь "страховочный" объём памяти, равный максимальному размеру сжимаемой области памяти. Или делаем "сжатие по месту" надеясь на то, что в ходе паковки/распаковки ничего не произойдёт? Типа "кто не рискует, тот не пьёт"?

Зачем — максимальному? По минимуму достаточно иметь место для сжатия одной страницы памяти, плюс управляющие данные.
Вот кстати исследование на эту тему: http://www.usenix.org/events/usenix99/full_papers/cervera/cervera.pdf. Результаты вполне положительные.
Всё-таки непонятно, почему сейчас эту идею совсем забросили.
Re[7]: ram compression?
От: Курилка Россия http://kirya.narod.ru/
Дата: 05.03.08 07:52
Оценка:
Здравствуйте, Andrei F., Вы писали:

AF>Здравствуйте, Курилка, Вы писали:


К>>Т.е. в момент распаковки/запаковки у тебя магическим образом мгновенно испарится сжатая/оригинальная версия участка памяти?

К>>В итоге получим, что нам в любом случае надо иметь "страховочный" объём памяти, равный максимальному размеру сжимаемой области памяти. Или делаем "сжатие по месту" надеясь на то, что в ходе паковки/распаковки ничего не произойдёт? Типа "кто не рискует, тот не пьёт"?

AF>Зачем — максимальному? По минимуму достаточно иметь место для сжатия одной страницы памяти, плюс управляющие данные.

Ну да, про страницы мысль вертелась, тока недоформулировалась
AF>Вот кстати исследование на эту тему: http://www.usenix.org/events/usenix99/full_papers/cervera/cervera.pdf. Результаты вполне положительные.
AF>Всё-таки непонятно, почему сейчас эту идею совсем забросили.

Дык пойди в осеписатели, ктож мешает
Re: ram compression?
От: Cyberax Марс  
Дата: 05.03.08 08:47
Оценка:
Здравствуйте, Andrei F., Вы писали:

AF>Во времена win95 были распространены программы, которые позволяли уменьшать свопинг с помощью сжатия отдельных фрагментов памяти (т.е. вместо того чтобы сбрасывать страницу в своп-файл — оставить ее в оперативной памяти, но сжать)

AF>Интересно, почему сейчас эта идея никем не используется?
Пользуются там, где памяти мало. Сжатие страниц кэша диска помогает (так как увеличивается вероятность cache hit), сжимать всю память не имеет смысла.

Вот проект: http://code.google.com/p/compcache/
Sapienti sat!
Re[2]: ram compression?
От: Andrei F.  
Дата: 05.03.08 09:15
Оценка:
Здравствуйте, Cyberax, Вы писали:

C>Пользуются там, где памяти мало. Сжатие страниц кэша диска помогает (так как увеличивается вероятность cache hit), сжимать всю память не имеет смысла.

C>Вот проект: http://code.google.com/p/compcache/

Там речь идет именно о сжатии своп-файла (+хранение его части в RAM), а не кэша диска. А сжимать всю память никто и не предлагал
Интересно, под windows что-то подобное есть?
Re[3]: ram compression?
От: Курилка Россия http://kirya.narod.ru/
Дата: 05.03.08 09:18
Оценка:
Здравствуйте, Andrei F., Вы писали:

AF>Интересно, под windows что-то подобное есть?


А нафига козе баян?
Re[4]: ram compression?
От: Andrei F.  
Дата: 05.03.08 10:00
Оценка:
Здравствуйте, Курилка, Вы писали:

К>А нафига козе баян?


чтобы меньше свопилось
Re[5]: ram compression?
От: Andrei N.Sobchuck Украина www.smalltalk.ru
Дата: 05.03.08 10:39
Оценка: :))
К>>А нафига козе баян?

AF>чтобы меньше свопилось


Не, ей это не поможет Карма плохой!
http://www.smalltalk.ru << RSDN@Home 1.1.4 stable SR1 rev. 568>>
Я ненавижу Hibernate
Автор: Andrei N.Sobchuck
Дата: 08.01.08
!
Re[6]: ram compression?
От: Andrei F.  
Дата: 05.03.08 12:09
Оценка:
Здравствуйте, Andrei N.Sobchuck, Вы писали:

ANS>Не, ей это не поможет Карма плохой!


Раньше помогало
Re[3]: ram compression?
От: IIY Украина  
Дата: 05.03.08 12:13
Оценка:
Здравствуйте, Andrei F., Вы писали:

AF>Здравствуйте, Cyberax, Вы писали:


C>>Пользуются там, где памяти мало. Сжатие страниц кэша диска помогает (так как увеличивается вероятность cache hit), сжимать всю память не имеет смысла.

C>>Вот проект: http://code.google.com/p/compcache/

AF>Там речь идет именно о сжатии своп-файла (+хранение его части в RAM), а не кэша диска. А сжимать всю память никто и не предлагал

AF>Интересно, под windows что-то подобное есть?

Поместить своп в RAMDrive (второе сообщение)?
Re[4]: ram compression?
От: Andrei F.  
Дата: 05.03.08 12:27
Оценка:
Здравствуйте, IIY, Вы писали:

IIY>Поместить своп в RAMDrive (второе сообщение)?


Тогда своп-файл надо сделать сжатым, а здесь будут проблемы. После перезагрузки содержимое диска пропадет (значит, пропадут и все свойства файла). Да и вообще я не уверен, что своп-файл можно сделать сжатым и после этого ничего не упадет
Re: ram compression?
От: Pzz Россия https://github.com/alexpevzner
Дата: 05.03.08 19:11
Оценка: +1
Здравствуйте, Andrei F., Вы писали:

AF>Во времена win95 были распространены программы, которые позволяли уменьшать свопинг с помощью сжатия отдельных фрагментов памяти (т.е. вместо того чтобы сбрасывать страницу в своп-файл — оставить ее в оперативной памяти, но сжать)

AF>Интересно, почему сейчас эта идея никем не используется?

Вероятно, память подешевела, и никто уже не хочет заниматься изготовлением такой приблуды для XP.
Re[5]: ram compression?
От: BulatZiganshin  
Дата: 05.03.08 20:33
Оценка:
ibm hxt
Люди, я люблю вас! Будьте бдительны!!!
Re[3]: ram compression?
От: Cyberax Марс  
Дата: 05.03.08 20:44
Оценка:
Здравствуйте, Andrei F., Вы писали:

C>>Пользуются там, где памяти мало. Сжатие страниц кэша диска помогает (так как увеличивается вероятность cache hit), сжимать всю память не имеет смысла.

C>>Вот проект: http://code.google.com/p/compcache/
AF>Там речь идет именно о сжатии своп-файла (+хранение его части в RAM), а не кэша диска. А сжимать всю память никто и не предлагал
Да, точно. Видимо, сжатие памяти так и не допилили.

А оно было: http://linuxcompressed.sourceforge.net/linux24-cc/index.html
Sapienti sat!
Re[4]: ram compression?
От: iZEN СССР  
Дата: 06.03.08 13:52
Оценка: +1
Здравствуйте, IIY, Вы писали:

IIY>Здравствуйте, Andrei F., Вы писали:


AF>>Здравствуйте, Cyberax, Вы писали:


C>>>Пользуются там, где памяти мало. Сжатие страниц кэша диска помогает (так как увеличивается вероятность cache hit), сжимать всю память не имеет смысла.

C>>>Вот проект: http://code.google.com/p/compcache/

AF>>Там речь идет именно о сжатии своп-файла (+хранение его части в RAM), а не кэша диска. А сжимать всю память никто и не предлагал

AF>>Интересно, под windows что-то подобное есть?

IIY>Поместить своп в RAMDrive (второе сообщение)?



Помещение SWAP на RAM-диск — этот нонсенс. За это надо убивать сразу.
Подождите ...
Wait...
Пока на собственное сообщение не было ответов, его можно удалить.