Регистрация Войти
Рейтинг:0
avatar Server

Цикл сбоев Sidekiq, задания не выполняются

флаг ec
cclloyd

После обновления GitLab до версии 14.7 sidekiq перестал работать, и задания не выполняются.

Все задания CI зависают, говоря: «Это задание зависит от вышестоящих заданий, которые должны быть выполнены успешно, чтобы это задание было запущено». Я также не могу нажать в этом состоянии.

Версия Кубернета: 1.21.6 Версия диаграммы Helm: 5.7.0 (gitlab 14.7.0)

Вывод kubectl get pods

ИМЯ ГОТОВ СТАТУС ПЕРЕЗАПУСКА ВОЗРАСТ
db-postgresql-0 1/1 Выполняется 0 19 часов
gitlab-gitaly-0 1/1 Бег 0 6h8m
gitlab-gitlab-exporter-74669c96b7-d7wpz 1/1 Работает 0 6h9m
gitlab-gitlab-pages-657d7f6ffc-d9vlt 1/1 Работает 0 6h9m
gitlab-gitlab-runner-75b77988c8-g2q88 1/1 Бег 5 6h9m
gitlab-gitlab-shell-5d64558c69-gzjsz 1/1 Работает 0 6h9m
gitlab-gitlab-shell-5d64558c69-j45qg 1/1 Работает 0 6h3m
gitlab-gitlab-upgrade-check-gfjql 0/1 Завершено 0 3h53m
gitlab-migrations-14-x8g8m 0/1 Завершено 4 4h15m
gitlab-minio-864888b9fb-2rmmn 1/1 Работает 7 6h9m
gitlab-minio-create-buckets-14-fqkbc 0/1 Завершено 0 4h15m
gitlab-prometheus-server-5b47c879b4-p7k4h 2/2 Работает 0 19h
gitlab-registry-b6f64686b-jrn8v 1/1 Запуск 6 6h9m
gitlab-shared-secrets-13-jl6-l8cbj 0/1 Завершено 0 5h7m
gitlab-shared-secrets-15-awv-mtqzf 0/1 Завершено 0 3h53m
gitlab-sidekiq-all-in-1-v2-ff654dcd9-n88fh 0/1 Бег 12 55 м
gitlab-toolbox-7bd697cb59-nrpcv 1/1 Работает 0 6h9m
gitlab-webservice-default-6f67f58788-dmvnw 2/2 Запуск 8 6h9m
gitlab-webservice-default-6f67f58788-tfwh8 2/2 Работает 16 5h42m
redis-master-0 1/1 Выполняется 1 19 часов

Последняя связка строк из контейнера sidekiq

Создание области :order_name_asc. Перезапись существующего метода Label.order_name_asc.
Создание области :order_name_desc. Перезапись существующего метода Label.order_name_desc.
2022-01-28T21:35:42.947Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: open. Перезапись существующего метода ExternalPullRequest.open.
Создание области :open. Перезапись существующего метода ExternalPullRequest.open.
2022-01-28T21:35:43.563Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области :order_name_asc. Перезапись существующего метода Member.order_name_asc.
2022-01-28T21:35:43.564Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области :order_name_desc. Перезапись существующего метода Member.order_name_desc.
2022-01-28T21:35:43.914Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :with_logging_info.Перезапись существующего метода PagesDomain.with_logging_info.
Создание области :order_name_asc. Перезапись существующего метода Member.order_name_asc.
Создание области :order_name_desc. Перезапись существующего метода Member.order_name_desc.
Создание области :with_logging_info. Перезапись существующего метода PagesDomain.with_logging_info.
2022-01-28T21:35:44.564Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :system. Перезапись существующего метода PrometheusMetric.system.
Создание области видимости :system. Перезапись существующего метода PrometheusMetric.system.
2022-01-28T21:35:45.568Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :with_user. Перезапись существующего метода GroupMember.with_user.
2022-01-28T21:35:45.579Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :reporters. Перезапись существующего метода GroupMember.reporters.
2022-01-28T21:35:45.580Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области :guests. Перезапись существующего метода GroupMember.guests.
Создание области :with_user. Перезапись существующего метода GroupMember.with_user.
Создание области: репортеры. Перезапись существующего метода GroupMember.reporters.
Создание области :гости. Перезапись существующего метода GroupMember.guests.
2022-01-28T21:35:47.612Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :extended. Перезапись существующего метода GitlabSubscription.extended.
Создание области :extended. Перезапись существующего метода GitlabSubscription.extended.
2022-01-28T21:35:51.276Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: без_статусов. Перезапись существующего метода Ci::Stage.without_statuses.
2022-01-28T21:35:51.279Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области: создано. Перезапись существующего метода Ci::Stage.created.
2022-01-28T21:35:51.280Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области: ожидается. Перезапись существующего метода Ci::Stage.pending.
2022-01-28T21:35:51.281Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :running. Перезапись существующего метода Ci::Stage.running.
2022-01-28T21:35:51.282Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: успех. Перезапись существующего метода Ci::Stage.success.
2022-01-28T21:35:51.283Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: не удалось. Перезапись существующего метода Ci::Stage.failed.
2022-01-28T21:35:51.284Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: отменено. Перезапись существующего метода Ci::Stage.canceled.
2022-01-28T21:35:51.284Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: пропущено. Перезапись существующего метода Ci::Stage.skipped.
2022-01-28T21:35:51.285Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области: вручную. Перезапись существующего метода Ci::Stage.manual.
2022-01-28T21:35:51.293Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области: запланировано. Перезапись существующего метода Ci::Stage.scheduled.
2022-01-28T21:35:51.294Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: подготовка. Перезапись существующего метода Ci::Stage.preparing.
2022-01-28T21:35:51.296Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :waiting_for_resource. Перезапись существующего метода Ci::Stage.waiting_for_resource.
2022-01-28T21:35:51.680Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области: база данных. Перезапись существующего метода Ci::BuildTraceChunk.database.
Создание области видимости :without_statuses. Перезапись существующего метода Ci::Stage.without_statuses.
Создание области: создано. Перезапись существующего метода Ci::Stage.created.
Создание области :ожидание. Перезапись существующего метода Ci::Stage.pending.
Создание области видимости :running. Перезапись существующего метода Ci::Stage.running.
Создание области: успех. Перезапись существующего метода Ci::Stage.success.
Создание области: не удалось. Перезапись существующего метода Ci::Stage.failed.
Создание области: отменено. Перезапись существующего метода Ci::Stage.canceled.
Создание области видимости: пропущено. Перезапись существующего метода Ci::Stage.skipped.
Создание области видимости: вручную. Перезапись существующего метода Ci::Stage.manual.
Создание области :scheduled. Перезапись существующего метода Ci::Stage.scheduled.
Создание объема :preparing. Перезапись существующего метода Ci::Stage.preparing.
Создание области :waiting_for_resource. Перезапись существующего метода Ci::Stage.waiting_for_resource.
Создание области :database.Перезапись существующего метода Ci::BuildTraceChunk.database.
2022-01-28T21:35:59.333Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: Создание области :approved_by_committer. Перезапись существующего метода MergeRequests::ComplianceViolation.approved_by_committer.
2022-01-28T21:35:59.508Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :runnable_schedules. Перезапись существующего метода Security::OrchestrationPolicyRuleSchedule.runnable_schedules.
Создание области :approved_by_committer. Перезапись существующего метода MergeRequests::ComplianceViolation.approved_by_committer.
Создание области :runnable_schedules. Перезапись существующего метода Security::OrchestrationPolicyRuleSchedule.runnable_schedules.
2022-01-28T21:36:06.992Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :regular. Перезапись существующего метода EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.regular.
2022-01-28T21:36:06.994Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :code_owner. Перезапись существующего метода EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.code_owner.
Создание области :regular. Перезапись существующего метода EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.regular.
Создание области :code_owner. Перезапись существующего метода EE::Gitlab::BackgroundMigration::MigrateApproverToApprovalRules::ApprovalMergeRequestRule.code_owner.
2022-01-28T21:36:21.933Z pid=22 tid=9k6 ПРЕДУПРЕЖДЕНИЕ: создание области :system. Перезапись существующего метода Gitlab::DatabaseImporters::CommonMetrics::PrometheusMetric.system.
Создание области видимости :system. Перезапись существующего метода Gitlab::DatabaseImporters::CommonMetrics::PrometheusMetric.system.
{"severity":"INFO","time":"2022-01-28T21:36:58.434Z","message":"Рабочий процесс завершен, кластер остановлен"}
126
0 + 0
флаг Moldova
Admin
Этот вопрос на других языках:

Ответить или комментировать

Большинство людей не понимают, что склонность к познанию нового открывает путь к обучению и улучшает межличностные связи. В исследованиях Элисон, например, хотя люди могли точно вспомнить, сколько вопросов было задано в их разговорах, они не чувствовали интуитивно связи между вопросами и симпатиями. В четырех исследованиях, в которых участники сами участвовали в разговорах или читали стенограммы чужих разговоров, люди, как правило, не осознавали, что задаваемый вопрос повлияет — или повлиял — на уровень дружбы между собеседниками.