Skip to content

vShard call failed bug 1 #2325

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Open
winmaxdev opened this issue Apr 25, 2025 · 0 comments
Open

vShard call failed bug 1 #2325

winmaxdev opened this issue Apr 25, 2025 · 0 comments
Labels
bug Something isn't working

Comments

@winmaxdev
Copy link

https://jira.vk.team/browse/TNT-1392

При Аварии на физ.сервере - неисправность дисковой подсистемы - отформатировались PVC, некорректная работа раннеров / vSharda, которые направляли запросы на неактивные инстансы кластера (в том числе и на чтение). Так же не получилось задизейблить проблемные инстансы, чтобы восстановить консистентность кластера для корректной работы.

Создан постпортем с подробной хронологией разбора и восстановления работы кластера https://confluence.vk.team/pages/viewpage.action?pageId=1557218777

Консистентность кластера восстановлена перезагрузкой раннеров для устранения проблемы с vShard (перечитывание всего конфига, проверка доступности всех инстансов). Восстановление инстансов ребутстрапом

  1. TDG должен начать нормально обрабатывать случай, когда он несконфигурирован, а не выбрасывать непонятные ошибки LuaJIT.
@winmaxdev winmaxdev added the bug Something isn't working label Apr 25, 2025
@winmaxdev winmaxdev changed the title Альфа-банк+ВК_проект Профиль клиента vShard call failed bug 1 vShard call failed bug 1 May 23, 2025
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
bug Something isn't working
Projects
None yet
Development

No branches or pull requests

1 participant