Your node has been suspended, 9 августа, 2020 Беларусь

Доброго времени всем, сегодня (9 августа, 2020) одна из моих двух нод была приостановлена на 3-х сателлитах


, на второй по всем сателлитам упал параметр Suspension Score, две ноды работают на одной машине, hdd разные и смарт впорядке, следовательно проблему с дисками я исключаю, может лучше остановить ноды? Есть ли у кого-нибудь еще такая проблема, кто из Беларуси, подозреваю что это из-за проблем в работе интернета по республике в день выборов президента. И еще, Suspension Score для satellite.stefan-benten.de:7777 100% на 2-х нодах, видимо из-за того, что на нем нет большого потока Egress/Ingress от слова совсем в последнее время.

prover logi, mozhet est sledy bityh baz dannyh, da i bazy dannyh sami na tselostnost

сейчас времени нету, займусь вечером, но здесь видимо дело в блокировке траффика

Не связано. Поищите ошибки в логах по словам GET_AUDIT И failed.

Linux/MacOS bash

docker logs storagenode 2>&1 | grep GET_AUDIT | grep failed

Windows Docker Powershell

docker logs storagenode 2>&1 | sls GET_AUDIT | sls failed

Windows GUI Powershell

sls GET_AUDIT "C:\Program Files\Storj\Storage Node\storagenode.log" | sls failed

нет, у нас у всех операторов ограничен доступ к сети, даже поисковую страницу google нельзя открыть, пишу через vpn, пришлось остановить ноды, так как Suspension Score на сателлитах стали еще меньше, и еще с утра одна нода была приостановлена на 3-x сателлитах, днем вторая нода также.

docker logs storagenode 2>&1 | grep GET_AUDIT | grep failed

запускал для 2-x нод, вывод не дал результатов, ошибок нет

docker logs storagenode 2>&1 | grep GET_AUDIT

вывод есть, здесь должно быть все хорошо

2020-08-09T16:15:23.034Z        INFO    piecestore      downloaded      {"Piece ID": "TWETUXYGAKSL26SJVPJRQ4UJKIP6CG3W2JFXQ4CFN2XL64RDNJ7Q", "Satellite ID": "12rfG3sh9NCWiX3ivPjq2HtdLmbqCrvHVEzJubnzFzosMuawymB", "Action": "GET_AUDIT"}
2020-08-09T16:18:09.791Z        INFO    piecestore      download started        {"Piece ID": "DGNQMCEEIMXFV23TZZ2GNFIAAQV6KGQYPBY5FGEPPMK74LOPCQCA", "Satellite ID": "121RTSDpyNZVcEU84Ticf2L1ntiuUimbWgfATz21tuvgk3vzoA6", "Action": "GET_AUDIT"}
2020-08-09T16:18:10.116Z        INFO    piecestore      downloaded      {"Piece ID": "DGNQMCEEIMXFV23TZZ2GNFIAAQV6KGQYPBY5FGEPPMK74LOPCQCA", "Satellite ID": "121RTSDpyNZVcEU84Ticf2L1ntiuUimbWgfATz21tuvgk3vzoA6", "Action": "GET_AUDIT"}
2020-08-09T16:20:15.071Z        INFO    piecestore      download started        {"Piece ID": "333USOYTQBAFOBA7QANHJ4CCP4RWQHLL3YBFK7IFMINFBHQIZLYQ", "Satellite ID": "1wFTAgs9DP5RSnCqKV1eLf6N9wtk4EAtmN5DpSxcs8EjT69tGE", "Action": "GET_AUDIT"}
2020-08-09T16:20:15.279Z        INFO    piecestore      downloaded      {"Piece ID": "333USOYTQBAFOBA7QANHJ4CCP4RWQHLL3YBFK7IFMINFBHQIZLYQ", "Satellite ID": "1wFTAgs9DP5RSnCqKV1eLf6N9wtk4EAtmN5DpSxcs8EjT69tGE", "Action": "GET_AUDIT"}

на какой срок можно остановить ноды, чтобы небыло дискфалификации?
очень не хочется потерять ноды, одной из них 15 месяцев, вторая 7 месяцев, каждая по 5Tb, заполнены полностью
заранее благодарю за помощь

сеть tor кстати тоже у нас неработает на данный момент

eto u vas batka v 4est vyborov nakrutil vidimo.

Приостановка (suspension) возникает только при провале аудитов с “неизвестной” ошибкой.
Ошибки типа “timeout”, “file not found”, “hash is not correct” известные и suspension не вызывают.
Так как у вас docker, то логи удаляются с удалением контейнера, что вы, очевидно, сделали. Поэтому ошибок уже не увидим.
Как только узлы успешно пройдут несколько аудитов - они выйдут из suspension.

Дисквалификация за downtime пока что выключена, так что пострадает только репутация. Но она восстановится, как только узлы будут онлайн.

контейнеры я неудалял, утром запустил ноды и вот к текущему моменту параметр Suspension Score стал еще меньше, искал ошибки в логах при запущенных нодах еще раз, в выводе пусто, остановлю покачто ноды

Попробуйте включить debug в логах и запустить контейнер. Нужно выяснить, почему узел проваливает аудиты.

а можно я загружу файлы логов от двух нод сюда?

Используйте тогда https://alpha.transfer.sh
Там есть ваш внешний адрес, email и кошелёк.

Можете написать ссылку в личку.

В логах есть множество downloaded.*GET_AUDIT, так что аудиты проходят. Блокировка интернет ни при чём.
Нужен уровень логгирования debug вместо info.

похоже все уже нормализовалось, интернет заработал, ноды также запущены, спасибо огромное что уделили время! Suspension Score понемногу растет.
3


Хорошо, что всё заработало!
Я попробую запросить информацию по вашим узлам с сателлитов.

Я бы отметил, что есть интересная тенденция по логам: аудиты прекращались примерно в 16:00:00 UTC и начинались только в 07:00:00 UTC (10-го) или в 04:00:00 (11-го и 12-го). В остальное время аудиты были регулярными - каждый час.