Strizzle!

Администрируем хостинг. Приходит DDoS. Локация только установлена, поэтому на свитче нету лейблов к серверам. Ковыряюсь, нахожу нужный порт (видно, что в нём пара мегабит трафика). Недолго думая, тушу порт, чтоб понять, какой же сервак «досят».

Это апстрим.

К свитчу не пробиться никак. Ну вот абсолютно никак — но есть же саппорт. Командный брейнсторм постановляет: переткнуть апстрим в соседний порт. Тикет написан, отправлен. Саппорт получил звонок, помчался к жужжащим машинам менять порты, поменял. Ситуация не изменилась.

Через полтора часа общения с саппортом, когда уже направили сотрудника с ноутбуком и набором паролей и команд прямиком к железке, промелькнуло слово «Cisco». А свитч-то наш — презамечательнейший Juniper. Где порт сменили?..

Получат по ушам:

— установщики локации, которые не поставили лейблы на порты свитча;
— я, который отрубил апстрим;
— те, кто одинаково называет локации и вешает одинаковые бирки.

Теги: IT happens, истории, импорт, сеть, сисадминское, факапы

Отправили меня в командировку в суровый сибирский наукоград. Перед отлётом успели обрадовать наличием в гостинице бесплатного вайфая.

Приехав, сразу попросил пароль, так как спать было уже поздно, и можно было пару часиков перед работой посидеть в сети. Выдали полный лист с конфигами «подключи себя сам». Через полминуты по моей убедительной просьбе мне показали до боли знакомый DIR-300.

Провод от интернета был подключён в средний порт, а не в WAN. К слову, роутер был настроен идеально. Человек, который настраивал и паролил сеть, предусмотрел всё, кроме написания документации. В итоге роутер использовался как тупой свитч. Применяем лазер на спутнике для забивания гвоздей паровой кувалдой.

Теги: IT happens, истории, импорт, джамшутинг, сеть

Случилось работать мне «мальчиком по вызову»: подключал людям интернеты. Спрашиваете, откуда такие берутся? Отвечу: по объявлению на подъезде приходят.

У одного из местных провайдеров настали не лучшие времена. Долго ли коротко ли, да приехали молодцы питерские из одного популярного провайдера и купили контору вместе с абонентской базой. Наставили серверов по районам, стали переключать старых и подключать новых жаждущих интернета к новой, аккуратной, красивой сети.

В теории всё выглядело так. После короткого обучения специалисту выдаются новенькие корочки. Специалист получает заявку на подключение, звонит, назначает дату. Приезжает к назначенному сроку, подключает абонента и заключает на месте договор.

Как это было на практике?

На поездах вывесили объявления: «Свободный график! Заработки до **000 рублей!» Стоит ли рассказывать о требованиях к соискателям, сведённым к минимуму?

Обучение проводилось следующим образом: тот, кто знает, рассказывал тому, кто не знает, какие циферки куда писать и какие кнопочки в каком порядке нажимать. Какие инструкции? Что такое роутер?.. Я не преувеличиваю: о настройке маршрутизатора клиента не говорилось ничего или говорилось следующее: «Да там всё так же, как в „Сетевых подключениях“». Только местонахождение зверька Роутера почему-то держалось в секрете, как и то, что кроме продукта «мелкомягких», существуют и другие операционки.

Чтобы не тратиться на новые стояки в подъездах и зарплату для установщиков, было принято решение тянуть ютипиху по стоякам имеющимся. Про качество изготовления стояков можно говорить много, но только нецензурно. Электрощитки, куда теоретически должен быть доступ у работников всех экстренных служб, находятся в карманах, а все карманы давным-давно под замками. Жильцы рады бы нас пустить, но есть у людей такая привычка: работать каждый день. После жалоб на то, что работать не получается, руководство великодушно сказало: «Подумаем». Через две недели раздумий вынесли неутешительный вердикт: «В стояках отказать».

Я не буду рассказывать про чердаки и подвалы. Летом не так страшно.

Воистину, глупость человеческая безгранична. Люди, управляющие крупными компаниями, объясните: почему даже вы не способны прислушаться к тем, кого сами же нанимаете как специалистов?

Те, кто имел хоть какой-то опыт, убежали. Убежали и мальчики-студенты, пришедшие в первых рядах. Сейчас работают новые мальчики. Конвейер запущен.

Теги: IT happens, истории, импорт, провайдеры, сеть

Я тут видел много упоминаний того, что гроза — серьёзная угроза оборудованию: интернету, дескать, приходят опаньки.

Сам я живу в Китае, на самом юге, в субтропиках. Грозы тут — мама не горюй. Как-то на балконе посчитал для прикола — 28 молний за минуту. Минут на 10–15 иллюминация на закате каждый день по весне.

Ни разу за четыре года я не видел случая, чтобы во время или после грозы интернет отключался. Он тут вообще не отключается. Скорость бывает разной — это да.

Только не говорите мне, что китайские провайдеры используют некитайское оборудование. Может, проблема всё-таки в другом?

Теги: IT happens, истории, импорт, иностранцы, сеть

Правильно слухи ходят, что неуловимый баг и неразрешимая техническая проблема решаются самым нестандартным способом.

Администрирую домашнюю сетку одного провайдера. Периодически load average шлюза поднимался до 1,5, в процессах ksoftirqd/3 показывал 100%. Соответственно, пинг от локальных клиентов до сервера был в районе 1000–1500 мс.

Как водится, в сетке были любители торрентов. При отключении на порту одного из них сервер облегчённо вздыхал. Повторное включение абонента вновь нагружало сервер. Говорили-общались с клиентом, просили выключать µTP в торрент-клиенте, раскинули на сервере сетевые карточки по всем восьми ядрам, да всё без толку…

Потом вбили MAC-адрес клиента в поисковик — и первая же ссылка внесла чёткую ясность. Наверняка не один десяток китайских инженеров икнул в тот момент: адрес 04:4B:80:80:80:03 оказался популярным. Оказалось, у многих провайдеров он уже внесён в черный список.

Теги: IT happens, истории, импорт, бывает же, железо, провайдеры, сеть

Пришли с прогулки домой. Монитор свешивается со стола на проводе, струйный принтер свален с полочки, из-под всего этого помаргивает светодиодом мышь. У висящей на стене точки доступа сброшены все установки на заводские: сеть default без шифрования. Варианта два:

1. Кот случайно свалил со стола монитор и сбросил настройки вайфая.
2. Злобные хакеры сломали вайфай и уронили монитор и принтер.

В обоих случаях: как?!

Теги: IT happens, истории, импорт, бывает же, животные, сеть

Работаю в достаточно крупной торговой организации. Занимаем несколько зданий, топология сети весьма запутанная.

Однажды прихожу на работу и слышу отчаянные мольбы отдела продаж: «Дай нам интернет, не можем работать!» Ну, думаю, шлюз повесился, бывает и такое. Не успеваю дойти до серверной, как торговый зал высказывает свои претензии: «Принтер на складе не работает!»

Проблемы нужно решать по мере их поступления. Пытаюсь зацепиться к шлюзу по SSH — не могу. Пинги идут. Хорошо, перезагружаю: FreeBSD — штука надёжная, но аптайм уже серьёзный. Загружаюсь и вижу ужасающее предупреждение о том, что кто-то захапал себе адрес сервера. Естественно, на ум приходит злосчастный принт-сервер, сбросивший настройки в дефолт. Тоже невелика беда — вырубаю обнаглевший со своими правами на лидерство девайс и жду пингов из внешки. А их нет!

В полном смятении пытаюсь понять, что же всё-таки происходит, и вдруг вспоминаю, что притащил с собой портативный девайс на ремонт. К «вафле» зверь подключился сам: когда-то я его уже ремонтировал. И верно, в настройках сети аппарата чёрным по белому прописан статический адрес, по несчастливой случайности совпавший с адресом сервера.

Через десять минут после устранения причины сервер выключился: блок питания не выдержал многолетних надругательств. Обиделся?

Теги: IT happens, истории, импорт, серверы, сеть, факапы

Понедельник принёс сюрприз. Приходим с напарником в офис — у них на одном компе не работает интернет. Сетевое подключение в норме, кабель вставлен, линк есть, а шлюз и DNS не пингуются. Лезу под стол, а в системнике две сетевухи, обе весело моргают. Вытаскиваю кабель из одной — обе тухнут. Пройдя по шнурку, убедился в догадке: да, наши абоненты умудрились сделать Уробороса.

На наш вопрос «Зачем?» ответили просто и незатейливо. Дескать, их админ вывел комп из сетки и никого не предупредил, а инициативная девочка, которая набирала текст, не обнаружив интернетов на компьютере, позвонила в техподдержку. Обожаю наших абонентов!

Теги: IT happens, истории, импорт, кабели, сеть, факапы

Как-то раз приехал я на Кипр и заселился в отель в Лимассоле. Всё круто: пять звёзд, еда отменная, море рядом, пляжи, коктейли с соломенными шляпками — красота! Только интернет дорогой: 5 евро в час, 15 евро в сутки. Обдираловка! Сеть была построена по-взрослому и взлому не подлежала.

Как-то в лобби-баре мой айфон увидел неприметную сеть с цифровым названием. Я достал ноут и попробовал в неё вломиться. Пароль оказался очень простым и угадался без брутфорсов. Точка пускала в инет на скорости около пяти мегабит в секунду!

Всю неделю я радостно юзал эту сетку: выгружал фотки в Пикасу, твитил, общался с женой по скайпу. В последний день подумал, что халявой надо поделиться. На адресе гейтвея обнаружился незапароленный Линксис. Поставив пароль на админку и сняв защиту на вайфай, я назвал сеть «Free_WiFi_fire_your_sysadmin», сел в автобус и убыл в сторону аэропорта.

Через два месяца в этот же отель приехал мой друг. В скайпе рассказал и показал: вокруг человек десять скайпятся и сидят в «контактиках» и фейсбуках. Возле ресепшна нет свободных мест на диванах, люди с айпадами и айфонами подтаскивают стулья из бара, а местная обслуга ничего не понимает.

Теги: IT happens, истории, импорт, иностранцы, сеть

Мой друг решил сэкономить и взял роутер после СЦ и ремонта. С компьютерами он не сильно дружит, поэтому для настройки был приглашён я. Через пятнадцать минут успешного ввода необходимых параметров я уже готов был приступить к поглощению пива.

— А теперь осталось только ввести пароль на точку доступа, чтобы никто, кроме тебя, не лазил!

Роутер не согласился и бесцеремонно перезагрузился с дефолтными настройками. После повторной попытки установить пароль вылезла та же проблема. Ещё час перепрошивки и жонглирования различными настройками не привёл ни к какому результату. Либо зверёк запаролен, либо сохраняет настройки, без которых IP от провайдера не получишь.

Изрядно выпивший друг назвал девайс невероятно щедрым, пошутил по поводу кармы и решил, что раз точка доступа так хочет, то пусть будет открытой для всех. Я вынужденно согласился, но фильтрацию по MAC-адресу всё-таки включил.

Теги: IT happens, истории, импорт, железо, сеть