Как бы вы поступили?

Если и восстанавливать то только копировать диск целиком не опускаясь на уровень ФС. Иначе слишком долго. Разработчики не хотят ничего делать с миллионами мелких файлов, даже просто упаковать самые маленькие файлы в архивы побольше что бы увеличить средний размер файла.

1 Like

Всё верно. Только надо знать софт который может клонировать с пропусками битых секторов, поскольку большинство клонировщиков, при попадании на не читаемый сектор, сваливаются в ошибку и клонирование прерывается

посмотрите ddrescue, может подойдет

Попробуйте TOSHIBA Enterprise Capacity MG07ACA12TE - строил с самого начала на них, пока все живут.
Опыт с Seagate ST8000DM004-2CX188 привёл к тому что HDD сдох, не набрав и 1TB. Мало того, помирал он очень долго и из-за него падала вся сборка примерно раз в сутки (либо висла, либо система перезагружалась). Так как машина стоит в удалённой локации долго не мог понять в чём причина и заваливал форум постами с вопросами.
По этой причине предпочёл дальнейшую постройку на дисках Toshiba.

1 Like

Toshiba ja tozhe ljublju i u menja ih neskolko, odin mg06 potihonku tozhe umiraet hotja esjo garantiinyi, vot pytajus perenesti s nego dannye i v garantiju otdat. neskolko bityh blokov est, i inogda prosto otrubaetsa, esjo pochemuto rabotaet medlenno.
Sei4as delaju GE iz testovyh satelitov 4toby umenshit mesto kotoroe nado kopirovat, klonirovat ne poluchilos, vydajot oshibku. a kopirovat bolshe mesjatsa. S GE nadejus est nadezhda hot chast dannyh spasti tam testovyh 4tb toest ostanetsa 3-4 tb kopirovat

Да знаем такие. ST8000DM004-2CX188 - это говёный SMR. Да ещё и Seagate. Хуже сочетание не придумаешь. Буду строить на WD HC570. Тошиба там тоже руку приложила

u menja WD perple rabotajut v nodah, nekotorym bolshe 10 let. vosnovnom eto 4tb, rabotajut ka chasy no oni 5400 tolko, i grejutsa menshe

Это просто замедлит ваш узел и доступ к данным. Такое себе “решение”.
С базой данных мы уже пробовали - не надёжно в условиях не специализированного железа. Самое лучшее - файлы.

1 Like

У меня есть Toshiba 2TB 7200. Пока не помер, но работает заметно медленнее тех же WD (5400!). В другой раз Toshiba не возьму. Пока только WD более менее вменяемые.

Самый большой у меня оказалось не Toshiba, а тоже WD Red.

Случайно взял 3 штуки во время дефицита в 2019 году и стояли вполне сносно с плотами для SIGNA.
В Storj скорость обращений на несколько порядков больше, поэтому с характеристиками этого железа лучше в STORJ не ставить.

Процент брака к сожалению никто не отменял, в подобных случаях жаль потерянного времени.

WD как то не попадались, но синие умирали часто в офисных машинах, поэтому с этим производителем поостерегся связываться.

Blue и Red пока нормально.
Red с 2009, два из трёх живы. Один умер смертью храбрых вместе с внешним китайским блоком (питание пробило). Два других работают до сих пор в домашнем сервере, один - с узлом последние 3 года.

Возможно диски этих серий обладают достаточной устойчивостью, не пропагандирую какого-то одного производителя:)
В начале были эксперименты с б/у дисками различной плотности, различных вендоров, так же есть пара Seagate на 12TB, модель не помню, в STORJ не пробовал. В итоге пришёл к сабжу, на нём и остаюсь по сей день. В STORJ с марта 2020 года.

Исходя из полученного опыта в грузоперевозках, пришёл к выводу что для унификации и меньших потерь времени лучше придерживаться закупок железа и техники одного производителя на столько на сколько возможно. Например имея разношёрстный парк транспорта (Камаз, Scania, Volvo и пр.) приходится распыляться на заключение договоров с разными сервисами, производить закупки у разных вендоров, разбираться в различиях характеристик запчастей - и прочими таймкиллинговыми процессами. Этот вывод был извлечён из наблюдений хозяйственной деятельности партнёров.

Поэтому при переходе на серверный класс железа была выбрана платформа Supermicro - у вендоров хороший ассортимент в РФ (во всяком случае был, в этом году не мониторил), на вторичке (Авито) предложений хватает. Процы - AMD, шкафы - Беларусь, контроллеры JBOD - Adaptec. Про HDD мнение выразил ранее.

Чтобы не вводить в заблуждение, отмечу что шкаф пока один, сервер пока один и несколько нод на типовых HDD.

К топик стартеру - чем история закончилась, удалось восстановить?

Восстанавливал долго и нудно. Делал много синхронизаций. В итоге не удалось восстановить около 200 файлов. Вернее они как файл видны, находятся не в битых секторах, но прочитать их невозможно, так как повреждена информация о них в MFT.
В настоящий момент узел работает. Восстанавливает онлайн. Пока что по аудиту нормально. Ближайшие пару месяцев покажут. Возможно ведь что потеряно больше 200 файлов, кто знает.
image

1 Like

А чем восстанавливали?

20 posts were split to a new topic: Большое количество мелких файлов vs упаковка их в несколько больших