Большое количество мелких файлов vs упаковка их в несколько больших

[arrogantrabbit]

@theurs

Потому что ты не читаешь что пишут? После перезагрузки кеш (в оперативной памяти) кристально чист, не важно сколько памяти

Ну ты тоже не читаешь. Я же объяснил выше, что неважно что кеш пуст, он мгновенно заполняется:

@arrogantrabbit

Почитайте про metadata prefetch. Файловая система читает блоками, и при чтении одного файла метадата кешируется для всего блока, даже если ничего не делать. А если делать — то можно предсказать, что будет нужно дальше, и закешировать дополнительные блоки заблаговременно. Поэтому да, больше памяти (больше чем размер метадаты суммарный) — быстрее скан, даже на холодный старт, потому что чем дальше в лес — тем больше кеш хитов.

В одном из недавних моих постов есть графики с холодного старта иллюстрирующие этот процесс. Massive reads on startup - #30 by arrogantrabbit