Как оптимизировать КЭШ? (Size 2,20 GB. Size on disk 5,40 GB)

[temp]

более 2.5 миллионов файлов в кеше (в тру-крипт). пришлось "париться" со сжатием. иначе хвосты отъедали до половины размера кеша у некоторых "карт"

Вы неправильно выбрали размер кластера когда создавали том, надо было выбрать 0,5 кб. Тогда потерь на 2,5 млн тайлов было меньше гигабайта.
А так естественно если размер кластера 16 кб или 32 кб то будет сжирать места в два раза больше чем весят тайлы (размер тайла, в среднем около 11 кб)

не страшно на фат32 хранить?

Я к ней привык, спорить что лучше не буду, это вечный спор, хотя может NTFS для такого количества файлов и лучше
ФАТ более простая система. Проблем не было, несколько раз перезагружал через reset, один раз свет вырубили при работающей закачке -проверку диска делать пришлось, но с содержимым все нормально.

[Vasya]

А кто-то пытался решить такую задачу:
есть винт на 40 гигов, 35 занято картами(занято меньше, но кластеры и т.д....)
Вопрос - как это богатство перенести на TrueCrypt раздел без использования внешних носителей ?
Сетевого хранилища подобного размера также нет

[temp]

А кто-то пытался решить такую задачу:
есть винт на 40 гигов, 35 занято картами(занято меньше, но кластеры и т.д....)
Вопрос - как это богатство перенести на TrueCrypt раздел без использования внешних носителей ?
Сетевого хранилища подобного размера также нет

Перенести то можно, а есть ли смысл?

Создаем динамический том TrueCrypt на 5 гб, и начинаем его по 5 гб заполнять, скопировали 5 гб, том растянулся, удалили с винта тайлы, скопировали, удалили.

Но там вроде проблема что динамические тома менее стабильны, но не знаю, не проверял.

P.S. Я бы не рисковал, жалко будет если что-то случится.
Если все же будете переность, то не пожалейте 7 грн на 7 болванок ДВД и закатайте туда архивную копию.

[ncux]

можно попробовать для начала (если ещё не так) конвертировать раздел в нтфс (512 байт кластер). потом применить сжатие. потом по совету temp-а, создать на этом же разделе динамический тру-крипт образ на 40гб (реальный размер пустого будет почти нулёвый)... и переносить помалёху. не копировать а переносить.
а! ради экономии места виртуальник тоже желательно форматнуть в нтфс и приготовить к сжатию средствами винды.
это поможет сэкономить место.
потом можно и "раскукожить" файлы. долго это правдо возиться.
p.s. после завершения всех шаманств, отмонтировать образ и сделать дефрагментацию реального раздела, где лежит образ. оно так быстрее будет работать.

[Vasya]

Ох как это всё (через жопу) не стабильно.... Нет уж, буду ждать более "уверенного" варианта.

[ncux]

мне самому интересно, чем можно было бы заменить тру-крипт?! неохота реальный раздел обкакивать мелкими файлами. в тру-крипт нет возможности отключения шифрации.

есть ли альтернативы или аналоги? (исключая микрософтовские VHD)

[webdev2]

есть winmount. Монтирует как логический диск zip, rar. Но там рекомендуется для скорости конвертить архивы в их формат mou. Есть и портабельная версия.

и Daemon tools, если не ошибаюсь, rar-архивы может монтировать.

Архивы, разумеется, делаются без сжатия в режиме "store"

Думается, скоро одной из главных задач в развитии САС-Планеты станет работа с большими массивами тайлов.
Ежедневно у пользователей растут кеши, вон у некоторых уже миллионы тайлов.
Я уже думаю, чтобы не просто кэш спутника в одном файле-базе держать, а как бы его скажем в файлах по 2-4 гига хранить, для удобства переноски, и чтобы на флешке, а не на винте носить.

[Oleggg10]

feya
Предлагаю, если это возможно, на основе склейки тайлов создать в программе возможность загрузки изображений другого размера, и сформировать изображения из 4 тайлов в один (слепить в кубики и прогой распознать их как большой тайл), это уменьшит КОЛИЧЕСТВО файлов на диске в 4 раза, что увеличит быстродействие, при этом чтоб старые файлы удалялись.
Понимаю что это сложно, но думаю возможно как нибудь сделать в будущем.
А ещё интересует как кэш поведёт себя если его записать на диск, а в будущем на Blu-ray?

[Parasite]

А ещё интересует как кэш поведёт себя если его записать на диск

А щас он где?

а в будущем на Blu-ray?

Предполагаю, что он весьма обрадуется.

[Oleggg10]

Предполагаю, что он весьма обрадуется

Диск, в смысле на DVD, а сейчас он на HDD. И вопрос в том, как сильно это повлияет на быстродействие?