Дедики на FastVPS/Hetzner

[kak2z]

Ну собственно мини опрос)) у кого сколько времени проходит от зависания сервера до зависания?? В частности интересуют клиенты фастВПС, но в принципе любые данные про дедики интересуют.
У меня сервер продержался почти 4 недели) сегодня вот завис))

[Mavn]

только увидел тему... у мну в среднем раз в месяц падает этот сервер на котором располагается этот сайт стоит рядом другой сервак и ему хоть бы хрен не падает вообще
что самое замечательное в логах ничего нет причину выяснить не могу вообще падения начались с января месяца с сентября по декабрь все чики пуки было
кстати самое замечательное когда зависал сервер я не мог его перегрузить через панельку приходилось жать на ручной ребут, а мне саппорт писал что сервак доступен и кстати самое странное что со второго сервака т.е. изнутри он пинговался, но пинг бешеный был.

ПС у меня напрямую хетзнер но сути дело не меняет

[kak2z]

только увидел тему... у мну в среднем раз в месяц падает этот сервер на котором располагается этот сайт стоит рядом другой сервак и ему хоть бы хрен не падает вообще
что самое замечательное в логах ничего нет причину выяснить не могу вообще падения начались с января месяца с сентября по декабрь все чики пуки было
кстати самое замечательное когда зависал сервер я не мог его перегрузить через панельку приходилось жать на ручной ребут, а мне саппорт писал что сервак доступен и кстати самое странное что со второго сервака т.е. изнутри он пинговался, но пинг бешеный был.

ПС у меня напрямую хетзнер но сути дело не меняет

у меня такая же беда, один в один.. в логах ничего, а падает.. и тоже где то раз 4 недели... уже и сервер заменили.. а все равно падает((

[Mavn]

хуже всего, что причины падений не ясны в логах чистота полнейшая как будто языком корова слизала
у меня при последнем падении вообще сервер 2 дня летал в раскоряку становится и все тут... вот кстати мои графики аптайма
на самом деле тут сижу и думаю может собрать кластер хотя бы из 2 серваков один у меня все равно для тестов всяких да для бэкапов, а то падения меня достали..
и хуже всего что людей которые со мной сидят на этом же сервере тоже достали, правда слава богу что мозг мне не выносит по этому поводу

ПС мне накладно менять сервер .... более 100 доменов .. лицензии на Cloudlinux, ksplice я не переживу еще одну настройку и разнос всего добра )

[Фисташка]

достаточно задолбить рваными TCP пакетами IP сервера и в логах апача ничего не будет, но оперативка закончится и сервер зависнет.

[kak2z]

достаточно задолбить рваными TCP пакетами IP сервера и в логах апача ничего не будет, но оперативка закончится и сервер зависнет.

у меня сервер подключен уже к внешнему лог серверу)) там тоже ничего в логах нет)

[Mavn]

как ни странно но всплесков потребления ресурсов не было, использование памяти хдд и прочего все мониторится никаких отклонений

[Фисташка]

синхронизация времени? Нет? Как раз период был перехода.

[kak2z]

синхронизация времени? Нет? Как раз период был перехода.

что бы забить 16 гиг оперативы (у меня) или 32 гига (у Мавна) нужно время и в логах бы это отобразилось.. если не на моем сервере то хоть бы на сервере логирования.

[Mavn]

а если еще и свап прибавить задолбаешься забивать

[Drakonsa]

Привет братьям по горю....
Hetzner ex4.
Аналогично, логи пустые, "Send CTRL+ALT+DEL to the server" не спасает, сапорты разводят руками, пытались втыкнуть kvm говорят черный экран вообще не реагирует ни на что, тупо фриз... Гоняли свои тесты, написали что все отлично... 2 других сервака таких приколов не имеют, но они в других ДЦ (этот в 15-ом). 2 никсовых админа смотрели-смотрели, но тоже не знают, что это и из-за чего....

достаточно задолбить рваными TCP пакетами IP сервера и в логах апача ничего не будет, но оперативка закончится и сервер зависнет.

У меня в мунине мониториться очень дофига всякого, но малейших даже всплесков нет... Если бы ложили намерено/наплыв, то не думаю что просто так бы отпускало... А так тупо рандомные фризы... Могут быть в 2 ночи, могут в 4 дня....


Есть 2 варианта что кидает:
1) XEN
2) Debian
Но как-то проверить нет ни времени, ни возможности....

[kak2z]

А как узнать в каком ДЦ сервер?? может они у нас на одной полке стоят и там какие то траблы с питанием или еще чем то.

Есть 2 варианта что кидает:
1) XEN

у меня только дебиан, виртуализации вообще нет.

[Drakonsa]

В роботе, в списке заказанных серверов, колонка перед основным ip

[kak2z]

В роботе, в списке заказанных серверов, колонка перед основным ip

хех)) у Вас Хетзнер наверно) а у меня же ресселер ФастВПС)

[Mavn]

у меня 16 дц и вообще CloudLinux стоит

[Mavn]

народ а мне вот интересно вывод ваш команды

Код Выделить Развернуть

lspci
мое ниже
проблемный

Код Выделить Развернуть

lspci
00:00.0 Host bridge: Intel Corporation Xeon E3-1200 v2/3rd Gen Core processor DRAM Controller (rev 09)
00:01.0 PCI bridge: Intel Corporation Xeon E3-1200 v2/3rd Gen Core processor PCI Express Root Port (rev 09)
00:02.0 VGA compatible controller: Intel Corporation Xeon E3-1200 v2/3rd Gen Core processor Graphics Controller (rev 09)
00:14.0 USB controller: Intel Corporation 7 Series/C210 Series Chipset Family USB xHCI Host Controller (rev 04)
00:16.0 Communication controller: Intel Corporation 7 Series/C210 Series Chipset Family MEI Controller #1 (rev 04)
00:1a.0 USB controller: Intel Corporation 7 Series/C210 Series Chipset Family USB Enhanced Host Controller #2 (rev 04)
00:1c.0 PCI bridge: Intel Corporation 7 Series/C210 Series Chipset Family PCI Express Root Port 1 (rev c4)
00:1c.4 PCI bridge: Intel Corporation 7 Series/C210 Series Chipset Family PCI Express Root Port 5 (rev c4)
00:1c.6 PCI bridge: Intel Corporation 7 Series/C210 Series Chipset Family PCI Express Root Port 7 (rev c4)
00:1d.0 USB controller: Intel Corporation 7 Series/C210 Series Chipset Family USB Enhanced Host Controller #1 (rev 04)
00:1f.0 ISA bridge: Intel Corporation H77 Express Chipset LPC Controller (rev 04)
00:1f.2 SATA controller: Intel Corporation 7 Series/C210 Series Chipset Family 6-port SATA Controller [AHCI mode] (rev 04)
00:1f.3 SMBus: Intel Corporation 7 Series/C210 Series Chipset Family SMBus Controller (rev 04)
01:00.0 RAID bus controller: LSI Logic / Symbios Logic MegaRAID SAS 2108 [Liberator] (rev 05)
03:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd. RTL8111/8168B PCI Express Gigabit Ethernet controller (rev 09)
04:00.0 SATA controller: Marvell Technology Group Ltd. 88SE9172 SATA 6Gb/s Controller (rev 11)
нормальный

Код Выделить Развернуть

lspci
00:00.0 Host bridge: Intel Corporation 2nd Generation Core Processor Family DRAM Controller (rev 09)
00:01.0 PCI bridge: Intel Corporation Xeon E3-1200/2nd Generation Core Processor Family PCI Express Root Port (rev 09)
00:02.0 VGA compatible controller: Intel Corporation 2nd Generation Core Processor Family Integrated Graphics Controller (rev 09)
00:16.0 Communication controller: Intel Corporation 6 Series/C200 Series Chipset Family MEI Controller #1 (rev 04)
00:1a.0 USB controller: Intel Corporation 6 Series/C200 Series Chipset Family USB Enhanced Host Controller #2 (rev 05)
00:1c.0 PCI bridge: Intel Corporation 6 Series/C200 Series Chipset Family PCI Express Root Port 1 (rev b5)
00:1c.5 PCI bridge: Intel Corporation 6 Series/C200 Series Chipset Family PCI Express Root Port 6 (rev b5)
00:1c.6 PCI bridge: Intel Corporation 6 Series/C200 Series Chipset Family PCI Express Root Port 7 (rev b5)
00:1c.7 PCI bridge: Intel Corporation 82801 PCI Bridge (rev b5)
00:1d.0 USB controller: Intel Corporation 6 Series/C200 Series Chipset Family USB Enhanced Host Controller #1 (rev 05)
00:1f.0 ISA bridge: Intel Corporation H67 Express Chipset Family LPC Controller (rev 05)
00:1f.2 SATA controller: Intel Corporation 6 Series/C200 Series Chipset Family SATA AHCI Controller (rev 05)
00:1f.3 SMBus: Intel Corporation 6 Series/C200 Series Chipset Family SMBus Controller (rev 05)
03:00.0 USB controller: ASMedia Technology Inc. ASM1042 SuperSpeed USB Host Controller
04:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd. RTL8111/8168B PCI Express Gigabit Ethernet controller (rev 06)
05:00.0 PCI bridge: ASMedia Technology Inc. ASM1083/1085 PCIe to PCI Bridge (rev 01)

[digger®]

народ а мне вот интересно вывод ваш команды

Там у всех, кроме тебя, десктопные тачки

У меня ex-4, как клиентам запустил - пока 70 дней аптайм (тфу, тфу, тфу).

[Mavn]

Там у всех, кроме тебя, десктопные тачки

У меня ex-4, как клиентам запустил - пока 70 дней аптайм (тфу, тфу, тфу).

у мну тоже десктоп

[Drakonsa]

00:00.0 Host bridge: Intel Corporation Sandy Bridge DRAM Controller (rev 09)
00:01.0 PCI bridge: Intel Corporation Sandy Bridge PCI Express Root Port (rev 09)
00:02.0 VGA compatible controller: Intel Corporation Sandy Bridge Integrated Graphics Controller (rev 09)
00:16.0 Communication controller: Intel Corporation Cougar Point HECI Controller #1 (rev 04)
00:1a.0 USB Controller: Intel Corporation Cougar Point USB Enhanced Host Controller #2 (rev 05)
00:1c.0 PCI bridge: Intel Corporation Cougar Point PCI Express Root Port 1 (rev b5)
00:1c.5 PCI bridge: Intel Corporation Cougar Point PCI Express Root Port 6 (rev b5)
00:1c.6 PCI bridge: Intel Corporation Cougar Point PCI Express Root Port 7 (rev b5)
00:1c.7 PCI bridge: Intel Corporation 82801 PCI Bridge (rev b5)
00:1d.0 USB Controller: Intel Corporation Cougar Point USB Enhanced Host Controller #1 (rev 05)
00:1f.0 ISA bridge: Intel Corporation Cougar Point LPC Controller (rev 05)
00:1f.2 SATA controller: Intel Corporation Cougar Point 6 port SATA AHCI Controller (rev 05)
00:1f.3 SMBus: Intel Corporation Cougar Point SMBus Controller (rev 05)
03:00.0 USB Controller: Device 1b21:1042
04:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd. RTL8111/8168B PCI Express Gigabit Ethernet controller (rev 06)
05:00.0 PCI bridge: Device 1b21:1080 (rev 01)

[kak2z]

Вот снова завис)) заказал только что ручную перезагрузку))

[Mavn]

Вот снова завис)) заказал только что ручную перезагрузку))

можешь кинуть для ковыряния messages на мыло?
пс кстати какой аптайм был
у тебя мунин стоит?

[kak2z]

1. По поводу messages написал в личку
2. Аптайм был 3 суток (похоже три дня назад было самопроизвольная перезагрузка, но я ее не заметил)
3. Мунин не знаю что это)

[Mavn]

munin система мониторинга
типа какие могут быть графики
вообще довольно удобная штука

[kak2z]

munin система мониторинга
типа какие могут быть графики
вообще довольно удобная штука

наверно нет... для мониторинга использую htop. Надо будет попросить Диггера что бы установил munin.

UPD: в директории log нашел субдиректорию munin - наверно все таки кто то установил))

[Mavn]

а точно у тебя же Олег присматривает за серваком
..........добавлено...............
самое примечательное во всей этой истории это время падения сервера ...
оно идентично времени падения моего сервака т.е. в районе 00:30-01:30 когда смотрел лог за 10 апреля там время старта прям как у меня 00:40 к чему бы такая точность падения разных серваков
и ровно как у меня пусто в логах тайна покрытая мраком
------------
кстати не пробовали
http://wiki.hetzner.de/index.php/Installation_des_r8168-Treibers/ru
я вот жду очередного падения чтобы попробовать дрова поменять

[kak2z]

самое примечательное во всей этой истории это время падения сервера ...
оно идентично времени падения моего сервака т.е. в районе 00:30-01:30 когда смотрел лог за 10 апреля там время старта прям как у меня 00:40 к чему бы такая точность падения разных серваков
и ровно как у меня пусто в логах тайна покрытая мраком

мне иногда кажется что просто кто то рубильник вырубает... ну не может линукс так просто и так резко зависать ИМХО...

кстати не пробовали
http://wiki.hetzner.de/index.php/Installation_des_r8168-Treibers/ru
я вот жду очередного падения чтобы попробовать дрова поменять

Не знаю)) вроде когда то что то меняли.. но не помню что... надо у Диггера спросить))) он знает все)

[Mavn]

я сейчас пытаюсь с zabbix разобраться да поставить на мониторинг на соседнем серваке... может там больше информации будет собираться

[digger®]

кстати не пробовали http://wiki.hetzner.de/index.php/Installation_des_r8168-Treibers/ru

Для дебиана можно попробовать поставить проприетарный firmware-realtek http://packages.debian.org/squeeze/firmware-realtek

[kak2z]

народ а мне вот интересно вывод ваш команды

Код Выделить Развернуть

00:00.0 Host bridge: Intel Corporation Device 0150 (rev 09)
00:01.0 PCI bridge: Intel Corporation Device 0151 (rev 09)
00:02.0 VGA compatible controller: Intel Corporation Device 0162 (rev 09)
00:14.0 USB Controller: Intel Corporation Device 1e31 (rev 04)
00:16.0 Communication controller: Intel Corporation Device 1e3a (rev 04)
00:1a.0 USB Controller: Intel Corporation Device 1e2d (rev 04)
00:1c.0 PCI bridge: Intel Corporation Device 1e10 (rev c4)
00:1c.4 PCI bridge: Intel Corporation Device 1e18 (rev c4)
00:1d.0 USB Controller: Intel Corporation Device 1e26 (rev 04)
00:1f.0 ISA bridge: Intel Corporation Device 1e4a (rev 04)
00:1f.2 SATA controller: Intel Corporation Device 1e02 (rev 04)
00:1f.3 SMBus: Intel Corporation Device 1e22 (rev 04)
03:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd. RTL8111/8168B PCI Express Gigabit Ethernet controller (rev 09)


только что закончили тесты винтов.. говорят что без ошибок((( а при падении вроде на ошибку винта ругалось (Диггер где то в логах нашел)...  сказали что пока долгий тест не покажет ошибку менять не будут... но оно то и логично в принципе... но все равно зависания выбешивают...

[digger®]

Накрылся у меня один диск в серваке и с ним закончился аптайм 82 дня.

[Mavn]

продержавшись почти 2 месяц с криками банзай упал в даун
домой приду буду логи просматривать

[kak2z]

продержавшись почти 2 месяц с криками банзай упал в даун
домой приду буду логи просматривать

а я даже что то писать боюсь... тьфу тьфу что б не сглазить..

П.С. Позавчера набежало людей, так сложилось что по одной новости я оказался в серпе на первом месте.. онлайн был больше 5000 человек)) выдержал))

[Mavn]

я конечно не знаю какой мой сервер онлайн может выдержать но я думаю если человек 600 сразу ломанутся упасть по идее не должен

[Mavn]

установил новые сетевые дрова все прошло удачно посмотрим как теперь будет работать

[kak2z]

установил новые сетевые дрова все прошло удачно посмотрим как теперь будет работать

Мне Диггер тоже обновил софт)) Спасибо ему большое))

[Mavn]

ага в курсе

[kak2z]

онлайн был 45 дней 4 часа 54 минуты и 43 секунды и вот только что упал))
причину пока не знаю)) в саппорт написал что бы подняли))

UPD: Саппорт сказал что винт полетел)) будет менять))

[digger®]

онлайн был 45 дней 4 часа 54 минуты и 43 секунды и вот только что упал))
причину пока не знаю)) в саппорт написал что бы подняли))

UPD: Саппорт сказал что винт полетел)) будет менять))

А я ведь говорил что он полетит.

[kak2z]

А я ведь говорил что он полетит.

Я помню)) но тогда они не захотели менять) Вот поменяли)
Спасибо большое)

[digger®]

Hetzner сообщил об обнаружении бэкдора в своих системах

[kak2z]

Этой ночью вообще один винт отключился... не беды посыпались, а именно вырубился. Уже заменили - скорость замены радует..  но и скорость сыпания винтов удивляет.

[Mavn]

очередное падение сервака 13:20-13:40
замена драйверов не помогла
логи по прежнему пустые ничего не отображается вообще

[Drakonsa]

Печаль, я уже понадеялся...

[Mavn]

я тоже надеялся, но видать зря
в общем тестирование и поиск решения проблемы продолжается

[digger®]

У меня не вис пока ни разу.
82 дня -> замена одного винта -> 58 дней

[Mavn]

lsmod сделай плиз мне интересно чего у тебя висит

[digger®]

lsmod сделай плиз мне интересно чего у тебя висит

Код Выделить Развернуть

# lsmod
Module                  Size  Used by
acpi_cpufreq            5571  0
cpufreq_stats           2740  0
cpufreq_conservative     5162  0
cpufreq_powersave        902  0
cpufreq_userspace       1992  0
fuse                   51020  1
iptable_filter          2258  1
ip_tables              13915  1 iptable_filter
x_tables               12845  1 ip_tables
ext3                  106854  1
jbd                    37349  1 ext3
loop                   11799  0
snd_pcm                60487  0
snd_timer              15598  1 snd_pcm
snd                    46542  2 snd_pcm,snd_timer
soundcore               4598  1 snd
snd_page_alloc          6265  1 snd_pcm
pcspkr                  1699  0
evdev                   7352  3
wmi                     4323  0
video                  17445  0
output                  1692  1 video
processor              29951  9 acpi_cpufreq
button                  4650  0
ext4                  288670  2
mbcache                 5050  2 ext3,ext4
jbd2                   67175  1 ext4
crc16                   1319  1 ext4
dm_mod                 53994  0
raid1                  18431  3
md_mod                 73936  4 raid1
sd_mod                 29953  8
crc_t10dif              1276  1 sd_mod
ahci                   32950  6
xhci                   34009  0
r8169                  36824  0
mii                     3210  1 r8169
ehci_hcd               32145  0
libata                133824  1 ahci
fan                     3346  0
scsi_mod              126901  2 sd_mod,libata
usbcore               123399  3 xhci,ehci_hcd
nls_base                6377  1 usbcore
thermal                11674  0
thermal_sys            11942  4 video,processor,fan,thermal

# lspci
00:00.0 Host bridge: Intel Corporation Device 0150 (rev 09)
00:01.0 PCI bridge: Intel Corporation Device 0151 (rev 09)
00:02.0 VGA compatible controller: Intel Corporation Device 0162 (rev 09)
00:14.0 USB Controller: Intel Corporation Device 1e31 (rev 04)
00:16.0 Communication controller: Intel Corporation Device 1e3a (rev 04)
00:1a.0 USB Controller: Intel Corporation Device 1e2d (rev 04)
00:1c.0 PCI bridge: Intel Corporation Device 1e10 (rev c4)
00:1c.4 PCI bridge: Intel Corporation Device 1e18 (rev c4)
00:1d.0 USB Controller: Intel Corporation Device 1e26 (rev 04)
00:1f.0 ISA bridge: Intel Corporation Device 1e4a (rev 04)
00:1f.2 SATA controller: Intel Corporation Device 1e02 (rev 04)
00:1f.3 SMBus: Intel Corporation Device 1e22 (rev 04)
03:00.0 Ethernet controller: Realtek Semiconductor Co., Ltd. RTL8111/8168B PCI Express Gigabit Ethernet controller (rev 09)


[Mavn]

кое-что переделал перегрузил посмотрим как будет себя вести

[Mavn]

Очередное падение разбор полетов продолжается

[Mavn]

с 15 июля хетзнер вводит новые тарифные планы с новым железом подождем чего предложат а то осень может перееду на новое железо а это сдам а то падения надоели изрядно