Периодически зависает сайт

Обсуждение установки и настройки поддерживаемых вебсерверов, а также работы с ними.
Ответить
Аватара пользователя
con
Сообщения: 84
Зарегистрирован: Вс мар 15, 2020 11:58 am

Re: Периодически зависает сайт

Сообщение con » Пн май 25, 2020 5:30 am

ordex писал(а): ↑
Пн май 25, 2020 5:03 am
 Ночью было 10 минутное падение

Код: Выделить всё

journalctl -p err | tail -50
май 25 03:09:40 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:09:47 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:09:53 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:00 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:07 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:14 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:21 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:27 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:34 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:41 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:48 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:10:54 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:01 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:08 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:15 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:22 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:28 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:35 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:42 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:49 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:11:55 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:09 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:16 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:22 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:29 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:36 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:43 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:50 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:12:56 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:03 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:10 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:17 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:23 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:30 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:37 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:44 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:50 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:13:57 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:04 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:11 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:17 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:24 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:31 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:38 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:45 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:51 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:14:58 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:15:12 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:15:19 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
май 25 03:15:26 cp.site.org systemd[1]: Failed to start MySQL 5.7 database server.
Вообще обычно если падает, то намертво и до перезагрузки, а тут через 10 минут всё нормализовалось.
А в логах есть в логах ошибка (70007) The timeout... и какой у вас трафик на сайт?
Centos7
Вернуться к началу
Аватара пользователя
ordex
Сообщения: 353
Зарегистрирован: Вт ноя 20, 2018 2:47 pm

Re: Периодически зависает сайт

Сообщение ordex » Пн май 25, 2020 5:57 am

con писал(а): ↑
Пн май 25, 2020 5:30 am
 А в логах есть в логах ошибка (70007) The timeout... и какой у вас трафик на сайт?
У меня нет апача, nginx без ошибок. Сервер не особо нагруженный, в посетителях суммарно не скажу, а именно по трафику не более 600-700Гб в месяц (на все сайты).
Вернуться к началу
Аватара пользователя
con
Сообщения: 84
Зарегистрирован: Вс мар 15, 2020 11:58 am

Re: Периодически зависает сайт

Сообщение con » Пн май 25, 2020 7:09 am

ordex писал(а): ↑
Пн май 25, 2020 5:57 am
con писал(а): ↑
Пн май 25, 2020 5:30 am
 А в логах есть в логах ошибка (70007) The timeout... и какой у вас трафик на сайт?
У меня нет апача, nginx без ошибок. Сервер не особо нагруженный, в посетителях суммарно не скажу, а именно по трафику не более 600-700Гб в месяц (на все сайты).
Под трафиком, я имею ввиду кол-во посетителей на сайт :D
Centos7
Вернуться к началу
Аватара пользователя
ordex
Сообщения: 353
Зарегистрирован: Вт ноя 20, 2018 2:47 pm

Re: Периодически зависает сайт

Сообщение ordex » Пн май 25, 2020 7:14 am

я понял, но сайтов много и посещалки абсолютно разные
Вернуться к началу
Аватара пользователя
con
Сообщения: 84
Зарегистрирован: Вс мар 15, 2020 11:58 am

Re: Периодически зависает сайт

Сообщение con » Пн май 25, 2020 3:16 pm

sbury писал(а): ↑
Пт май 22, 2020 12:31 pm
 подойдет

и еще вывод uname -r
выводы команд дал выше.
Возможно поможет в решении проблемы: при очередном зависании перезапустил apache - без результата.
Перезапустил php-fpm - развисло.
Centos7
Вернуться к началу
Аватара пользователя
ordex
Сообщения: 353
Зарегистрирован: Вт ноя 20, 2018 2:47 pm

Re: Периодически зависает сайт

Сообщение ordex » Вт май 26, 2020 5:36 am

Всё, сервер перестал падать, теперь mysql (5.7) падает. Стартует и тут же падает.
Вернуться к началу
Аватара пользователя
ordex
Сообщения: 353
Зарегистрирован: Вт ноя 20, 2018 2:47 pm

Re: Периодически зависает сайт

Сообщение ordex » Вт май 26, 2020 6:43 am

Запустил с innodb_force_recovery = 1. Починил бд, стартанул в нормальном режиме. Вроде работает.
Чего-то как-то надоело это всё, что ни день то какой-то сюрприз..
Вернуться к началу
Аватара пользователя
con
Сообщения: 84
Зарегистрирован: Вс мар 15, 2020 11:58 am

Re: Периодически зависает сайт

Сообщение con » Вт май 26, 2020 6:44 am

ordex писал(а): ↑
Вт май 26, 2020 6:43 am
 Запустил с innodb_force_recovery = 1. Починил бд, стартанул в нормальном режиме. Вроде работает.
Чего-то как-то надоело это всё, что ни день то какой-то сюрприз..
Я уже третью неделю ищу проблему... Решил купить курсы по системному администрированию :D Сижу, учу :lol:
Centos7
Вернуться к началу
Аватара пользователя
alenka
Сообщения: 2194
Зарегистрирован: Ср сен 27, 2017 11:10 am

Re: Периодически зависает сайт

Сообщение alenka » Вт май 26, 2020 8:58 am

Всё, сервер перестал падать, теперь mysql (5.7) падает. Стартует и тут же падает.
В момент когда у вас остановилась база данных, покажите
cat /var/log/messages | grep mysql
cat /var/log/messages | grep memory
Вернуться к началу
Аватара пользователя
ordex
Сообщения: 353
Зарегистрирован: Вт ноя 20, 2018 2:47 pm

Re: Периодически зависает сайт

Сообщение ordex » Вт май 26, 2020 9:26 am

alenka писал(а): ↑
Вт май 26, 2020 8:58 am
Всё, сервер перестал падать, теперь mysql (5.7) падает. Стартует и тут же падает.
В момент когда у вас остановилась база данных, покажите
cat /var/log/messages | grep mysql
cat /var/log/messages | grep memory
Упала в 3:12

Код: Выделить всё

cat /var/log/messages | grep memory
May 26 03:27:07 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:07 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:09 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:09 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:09 cp mysqld: 2020-05-26T00:27:09.988373Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:11 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:11 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:12 cp mysqld: 2020-05-26T00:27:12.308289Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:13 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:13 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:14 cp mysqld: 2020-05-26T00:27:14.557850Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:16 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:16 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:16 cp mysqld: 2020-05-26T00:27:16.717963Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:18 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:18 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:18 cp mysqld: 2020-05-26T00:27:18.818583Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:20 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:20 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:21 cp mysqld: 2020-05-26T00:27:21.018384Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:22 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:22 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:23 cp mysqld: 2020-05-26T00:27:23.188269Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:24 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:24 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:25 cp mysqld: 2020-05-26T00:27:25.558257Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:27 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:27 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:27 cp mysqld: 2020-05-26T00:27:27.807911Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:29 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:29 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:29 cp mysqld: 2020-05-26T00:27:29.988271Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:31 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:31 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:32 cp mysqld: 2020-05-26T00:27:32.058543Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:33 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:33 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:34 cp mysqld: 2020-05-26T00:27:34.308259Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:35 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:35 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:36 cp mysqld: 2020-05-26T00:27:36.567858Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:38 cp mysqld: InnoDB: We intentionally generate a memory trap.
May 26 03:27:38 cp mysqld: key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 59851 K  bytes of memory
May 26 03:27:38 cp mysqld: 2020-05-26T00:27:38.808032Z 0 [Note] InnoDB: GCC builtin __atomic_thread_fence() is used for memory barrier
May 26 03:27:40 cp mysqld: InnoDB: We intentionally generate a memory trap.
Так до самого утра.
cat /var/log/messages | grep mysql
Изображение
тут не выложить из-за ограничений по символам, могу скинуть если нужно..
Вернуться к началу
Ответить

Вернуться в «Веб-сервер»