19.01.2012 в 9:40 утра пропала связь до пограничного маршрутизатора компании, находящегося в районе М10.
Изначально предположение пало на проблемы с электричеством на площадке, но техподдержка сообщила что все впорядке.
Чуть позже стало ясно, что отсутствует оптическая связь в кабеле, лежащем вдоль Дмитровского шоссе.
"Неужели снова расширяют Дмитровку и перебили ковшом" - предположили мы.
В прошлый раз на устранение подобной неисправности ушло около 2х часов, понадеялись что в этот раз будет не больше.
А напрасно... Ниже представлен график недоступности основного канала доступа в Интернет - до 17:00 сегодняшнего дня.

Как выяснилось позже - произошел пожар в одном из коллекторов. Пришлось переключаться на резервный канал. О чем наконец написали на сайте.
Несмотря на то, что переключение происходит в автоматическом режиме - потребовалось некоторое время для обеспечения полной связанности с Интернетом.
К 11:00 утра 19.01.2011 мы уже работали на резервном канале. Все было бы хорошо, но, к сожалению - резерв был у канала Интернет, но не у канала телефонии :-(
Пришлось попросить коллег о помощи и подключить к нашей телефонии на М9 резервный линк. В связи с дорожной ситуацией - это получилось сделать к 17 часам.
Некоторое время ушло на настройку и мы были готовы принимать звонки и объяснять пользователям, что же случилось.
Но обнаружили такое количество звонков - которое наш коллцентр не смог бы своевременно обработать и людям пришлось бы висеть долго в очереди на ожидание.
Пришли к выводу что лучшим способом донесения информации о проблеме - будет подробный автоответчик.
Близился поздний вечер - резервный канал начал постепенно несправляться с потоком траффика. В связи с тем, что перебои с основной магистралью бывали крайне редки и кратковременны -
резервным каналом мы почти не пользовались и текущих его возможностей по пропуску траффика оценить не могли.
В связи с ростом потребности пользователей в быстром и качественном Интернете - основной канал модернизировался, и на данный момент по своим возможностям превышает резервный во много раз.
При таком уплотнении - скорость Интернета стала модемной, но тем не менее - он работал... Примерно до 1:00 ночи, пока не был забит настолько - что не смог отправлять BGP-обновления в канал.
В результате чего резервный канал выключился, вместе с резервной телефонией :-( Над устранением причин неисправности боролись с 8 до 12 утра сего дня.
Связались с ремонтной бригадой - те объяснили, что на место происшествия вчера долго не пускали пожарные и работы по восстановлению планируется закончить к 17 часам.
К счастью так и случилось, ровно в 17 часов связь была восстановлена и уже к 17:30 все сервисы были переведены с резерва обратно и в данный момент - исправно функционируют.
Приносим извинения за доставленные вам неудобства! Надеемся на ваше понимание.
Пришли к выводам о необходимости строительства дополнительного канала связи, вдоль Алтуфьевского шоссе.
Ссылка по теме:















