1 Тема от Craken

  • Craken
  • Новичок
  • Неактивен
  • Зарегистрирован: 28.03.2010
  • Сообщений: 16
  • Репутация : [ 0 | 0 ]

Приветствую Вас!
Ситуация такая: есть сеть на 4000 Пользователей! Всех их обслуживают 5 серверов! (НАТ)
По кое-каким причинам пришлось перейти с Centos 5.2 на Centos 5.5,и тут появился баг.......
Баг состоит в том, что иногда приходится убить интерфейс (vlan) и появляется вот что:

Nov 18 07:48:14 vlan-6 kernel:  =======================
Nov 18 07:48:14 vlan-6 kernel: INFO: task yum-updatesd-he:4517 blocked for more than 120 seconds.
Nov 18 07:48:14 vlan-6 kernel: "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
Nov 18 07:48:14 vlan-6 kernel: yum-updatesd- D 0000D1A0  2572  4517   2579                     (NOTLB)
Nov 18 07:48:14 vlan-6 kernel:        e52aad34 00000082 8b79fc40 0000d1a0 c05c86b4 e5890600 00000206 00000009
Nov 18 07:48:14 vlan-6 kernel:        f7cf3550 8b893e80 0000d1a0 000f4240 00000001 f7cf365c c2013844 c211e580
Nov 18 07:48:14 vlan-6 kernel:        ef11d340 00000000 f7fdce00 c05d5aa0 c06b79b0 e5ccf400 e52aad7c ffffffff
Nov 18 07:48:14 vlan-6 kernel: Call Trace:
Nov 18 07:48:14 vlan-6 kernel:  [<c05c86b4>] rtnetlink_dump_all+0x71/0x8b
Nov 18 07:48:14 vlan-6 kernel:  [<c05d5aa0>] netlink_dump_start+0xf9/0x116
Nov 18 07:48:14 vlan-6 kernel:  [<c061d1c5>] __mutex_lock_slowpath+0x4d/0x7c
Nov 18 07:48:14 vlan-6 kernel:  [<c061d203>] .text.lock.mutex+0xf/0x14
Nov 18 07:48:14 vlan-6 kernel:  [<c05c280e>] netdev_run_todo+0x10/0x1d9
Nov 18 07:48:14 vlan-6 kernel:  [<c05c82c1>] rtnetlink_rcv+0x34/0x3d
Nov 18 07:48:14 vlan-6 kernel:  [<c05d508e>] netlink_data_ready+0xf/0x44
Nov 18 07:48:14 vlan-6 kernel:  [<c05d40db>] netlink_sendskb+0x19/0x30
Nov 18 07:48:14 vlan-6 kernel:  [<c05d5072>] netlink_sendmsg+0x277/0x284
Nov 18 07:48:14 vlan-6 kernel:  [<c05b6ccb>] sock_sendmsg+0xd3/0x11d
Nov 18 07:48:14 vlan-6 kernel:  [<c0435fff>] autoremove_wake_function+0x0/0x2d
Nov 18 07:48:14 vlan-6 kernel:  [<c04c7563>] avc_has_perm+0x3c/0x46
Nov 18 07:48:14 vlan-6 kernel:  [<c04c78ac>] socket_has_perm+0x53/0x5d
Nov 18 07:48:14 vlan-6 kernel:  [<c04f0945>] copy_from_user+0x31/0x5d
Nov 18 07:48:14 vlan-6 kernel:  [<c05b7ff2>] sys_sendto+0x116/0x140
Nov 18 07:48:14 vlan-6 kernel:  [<c05b81d2>] move_addr_to_user+0x50/0x68
Nov 18 07:48:14 vlan-6 kernel:  [<c05b8621>] sys_getsockname+0x7d/0xa8
Nov 18 07:48:14 vlan-6 kernel:  [<c048a640>] d_rehash+0x1c/0x2b
Nov 18 07:48:14 vlan-6 kernel:  [<c05b77b0>] sock_attach_fd+0x6c/0xcc
Nov 18 07:48:14 vlan-6 kernel:  [<c05b8912>] sys_socketcall+0x106/0x19e
Nov 18 07:48:14 vlan-6 kernel:  [<c0404f17>] syscall_call+0x7/0xb
Nov 18 07:48:14 vlan-6 kernel:  =======================
Nov 18 07:48:22 vlan-6 kernel: unregister_netdevice: waiting for eth1.4 to become free. Usage count = 3
Nov 18 07:48:53 vlan-6 last message repeated 3 times
Nov 18 07:50:03 vlan-6 last message repeated 7 times
Nov 18 07:51:13 vlan-6 last message repeated 7 times
Nov 18 07:52:14 vlan-6 last message repeated 6 times
Nov 18 07:53:24 vlan-6 last message repeated 7 times
Nov 18 07:54:25 vlan-6 last message repeated 6 times
Nov 18 07:55:35 vlan-6 last message repeated 7 times
Nov 18 07:56:45 vlan-6 last message repeated 7 times
Nov 18 07:57:46 vlan-6 last message repeated 6 times
Nov 18 07:58:56 vlan-6 last message repeated 7 times
Nov 18 07:59:57 vlan-6 last message repeated 6 times
Nov 18 08:01:07 vlan-6 last message repeated 7 times
Nov 18 08:02:17 vlan-6 last message repeated 7 times
Nov 18 08:03:18 vlan-6 last message repeated 6 times

П.С. И вот так пишет пока не перезагрузишь!
Пока нас спасает только ребут, но как Вы сами понимаете это оч плохой вариант!
Подскажите пожалуйста, как с этим бороться?

2 Ответ от drBatty

  • drBatty
  • drBatty
  • Пользователь
  • Неактивен
  • Откуда: Петербург
  • Зарегистрирован: 20.02.2010
  • Сообщений: 17,053
  • Репутация : [ 451 | 73 ]
Craken пишет:

Баг состоит в том, что иногда приходится убить интерфейс (vlan) и появляется вот что:

ну как я понимаю, ваша yum-овская обновлялка плачет, что уже 120 секунд нету интернета.

А потом появляется сообщение о незарегистрированном устройстве

unregister_netdevice: waiting for eth1.4 to become free. Usage count = 3

которое постоянно повторяется (vlan вы грохнули, а интерфейс не опустили)
Это сообщение постоянно повторяется.

Craken пишет:

Баг состоит в том, что иногда приходится убить интерфейс

нужны подробности: как вы его убиваете, и как он потом (не)подымается?

Карусель разнесло по цепочке за час
Всех известий — конец
Да, весна началась!
(всё к лицу подлецу, как родному отцу, не рассказывай, батя, и так всё пройдёт)

3 Ответ от Craken (28.11.2010 11:57:57 отредактировано Craken)

  • Craken
  • Новичок
  • Неактивен
  • Зарегистрирован: 28.03.2010
  • Сообщений: 16
  • Репутация : [ 0 | 0 ]
drBatty пишет:
Craken пишет:

Баг состоит в том, что иногда приходится убить интерфейс (vlan) и появляется вот что:

ну как я понимаю, ваша yum-овская обновлялка плачет, что уже 120 секунд нету интернета.

А потом появляется сообщение о незарегистрированном устройстве

unregister_netdevice: waiting for eth1.4 to become free. Usage count = 3

которое постоянно повторяется (vlan вы грохнули, а интерфейс не опустили)
Это сообщение постоянно повторяется.

Craken пишет:

Баг состоит в том, что иногда приходится убить интерфейс

нужны подробности: как вы его убиваете, и как он потом (не)подымается?

Убивается он у нас скриптом, который сначала удаляет правила из фаера, а потом выполняется vconfig rem eth1 <vlan> !
Кстати когда заходишь на сервак визуально (на прямую), и проверяешь через ifconfig - то пишет что такого интерфейса нету!

Или Вы имеете в виду что предварительно нужно выполнять "ifconfig eth1.<vlan> down" ?

4 Ответ от Craken

  • Craken
  • Новичок
  • Неактивен
  • Зарегистрирован: 28.03.2010
  • Сообщений: 16
  • Репутация : [ 0 | 0 ]

drBatty, попробовал! Даже с использованием "ifconfig eth1.<vlan> down" появляется ошибка!  ac
В чем еще может быть проблема?

5 Ответ от kOvr1K

  • kOvr1K
  • kOvr1K
  • Мыслящий
  • Неактивен
  • Откуда: Воронеж
  • Зарегистрирован: 03.04.2010
  • Сообщений: 753
  • Репутация : [ 4 | 0 ]

"echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message

По крайней мрее подсказала система как избавиться от вывода этого сообщения  wink

Why so serious, Son?
-Ты где подцепил вирус?
-Недавно просто провел ночь с длинногой блондинкой, которая умеет переставлять Windows

Сайт kOvr1K

6 Ответ от drBatty

  • drBatty
  • drBatty
  • Пользователь
  • Неактивен
  • Откуда: Петербург
  • Зарегистрирован: 20.02.2010
  • Сообщений: 17,053
  • Репутация : [ 451 | 73 ]
Craken пишет:

drBatty, попробовал! Даже с использованием "ifconfig eth1.<vlan> down" появляется ошибка!  sad
В чем еще может быть проблема?

не знаю. будем ждать телепатов с CentOS.

kOvr1K пишет:

По крайней мрее подсказала система как избавиться от вывода этого сообщения

гланды можно удалять не только ректально, но и вагинально - через logrotate.
ИМХО - оба способа не слишком правильные bx

Карусель разнесло по цепочке за час
Всех известий — конец
Да, весна началась!
(всё к лицу подлецу, как родному отцу, не рассказывай, батя, и так всё пройдёт)

7 Ответ от Craken

  • Craken
  • Новичок
  • Неактивен
  • Зарегистрирован: 28.03.2010
  • Сообщений: 16
  • Репутация : [ 0 | 0 ]
kOvr1K пишет:

"echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message

По крайней мрее подсказала система как избавиться от вывода этого сообщения  wink

Верно! Но знать бы из-за чего эта ошибка  :cool: