Партнер портала
Курсы валют на сегодня 05.12.2016 $63.5043 70.5977 £78.4278 ¥61.7356 65.3269
Банки
Февраль 19, 2013, 11:31 | Новости банков | Forbes

Стала известна причина сбоев в электронной системе Сбербанка

Виновата служебная программа
Стала известна причина сбоев в электронной системе Сбербанка

За прошлый год электронная система Сбербанка — самая большая и дорогая в стране — «падала» несколько раз, лишая клиентов шансов воспользоваться своими кредитками. Так, вечером 17 декабря 2012 года держатели карт Сбербанка не могли расплатиться ими в магазинах и ресторанах, банкоматы в отделениях не работали, некоторые перезагружались, остальные просто выдавали сообщение о невозможности проведения операций. Через час проблема была решена.

Оставшаяся почти незамеченной публикой проблема внутри Сбербанка выглядела совсем по-другому. Глава крупнейшего банка страны Герман Греф лично приехал в офис, чтобы заняться поиском ошибки в новейшем оборудовании, только начавшем работать в полную силу, рассказывают сотрудники Сбербанка.

К этому моменту «Сбер» уже четвертый год занимался централизацией бизнес-процессов. У банка 350 млн счетов, по которым совершается 160 млн транзакций ежедневно и 35 000 транзакций в минуту. Объединение и централизация всех процессов требовало все больше вычислительных ресурсов. Собеседник в руководстве госбанка, согласившийся рассказать, как все было, ставит одну бутылку с водой на другую, показывая, что именно они делали внутри банка. «Ресурсы, которые были на тот момент, нас не удовлетворяли, потому что если поставишь следующий модуль, все развалится», — говорит он и водружает четвертую бутылку наверх пирамиды. Бутылка падает. «Мы пришли к тому, что надо менять инфраструктуру», — резюмирует менеджер банка.

Сбербанк изучил имеющиеся предложения на рынке и пришел к выводу, что готовой системы нет ни у одного производителя. Было решено купить серверы у IBM, на них установили программное обеспечение Oracle, которая, по мнению Сбербанка, производит лучшую систему управления базами данных. К этому прибавили программы от Symantec и дисковые массивы Hewlett Packard. Все программы и оборудование были новейшими разработками. Только за 9 месяцев прошлого года Сбербанк потратил на IT 31,2 млрд рублей, еще 26,8 млрд за 2011 год — это крупнейший IT-бюджет среди всех российских банков.

«У нас было все самое лучшее, но когда оно начало работать вместе, стало выдавать странности», — говорит собеседник, замечая, что сбоев было гораздо больше, чем видели клиенты — за прошлый год у Сбербанка было 8 крупных сбоев, не считая проблем в регионах.

Но откатить все назад Сбербанк не мог, надо было двигаться вперед, решая проблемы одну за другой. «Две лаборатории IBM и одна Oracle весь год работали только на нас, IBM поставила нам 20 серверов бесплатно, с условием, что мы расплатимся, когда перестанет сбоить, Oracle прислал лучших «архитекторов», — вспоминает специалист «Сбера».

Система продолжала сбоить, в частности крупный сбой случился 6 июня, когда клиенты банка 3 часа не могли ни расплатиться своими картами, ни снять с них деньги. По словам топ-менеджера, банк увидел проблему еще в ноябре 2011 года, тогда же стало понятно, что она может привести к серьезному падению. После этого было принято решение снизить мощность системы. «Но хотелось запустить на полную мощность, и 27 июня 2012 года это случилось: мы опустили флажок, и все полетело так быстро, что мы не могли нарадоваться. А 6 июля все, что „летало“, разбилось в один момент — за 10 минут, мы даже не успели отреагировать», — вспоминает собеседник. Все настройки опять вернули к первоначальным, 10 дней система проработала нормально, но на 11-й снова упала. Ошибку искали полгода и, наконец, нашли. Что это была за ошибка, Сбербанк не раскрывает, ссылаясь на соглашение с вендорами. Со слов менеджера банка известно лишь, что это был сбой в системе управления базами данных.

Новый сбой случился в декабре 2012 года. В субботу, 15 декабря, в 22:10 перестал работать процессинг. Сбербанк простоял около часа, но этого почти никто не заметил. Кроме, видимо, Грефа, который, как и два дня спустя, приезжал лично разбираться с проблемой. Поставщики программного обеспечения получили «логи» — записи, сделанные системой в момент падения — но ошибку найти не смогли. Сбербанк отключил систему и снова ее включил — это как раз и заняло примерно час. Оператор видит, что нагрузка начинает расти по экспоненте, а еще через какое-то время система становится настолько занятой внутренними процессами, что перестает реагировать на оператора. И в этот момент ее можно только выключить и снова включить, это и есть время простоя. Так и сделали в тот раз, рассказывает специалист Сбербанка.

Прошло два дня. В понедельник, 17 декабря, и опять в 22:10 процессинг вновь остановился. И снова Греф примчался на работу среди ночи, чтобы возглавить поиск «бага». Но тут Сбербанку повезло — сотрудник японской компании Hitachi обнаружил, что ровно в 22:10 внутри системы запускается процедура оптимизации дискового пространства от Symantec. Вообще-то эта программа запускалась каждый день, но обычно она просто «просыпалась», смотрела вокруг, видела, что оптимизировать нечего, и «засыпала» вновь. Однако накануне субботы 15 декабря Сбербанк решал другую проблему с базами данных, и программа Symantec, «проснувшись», обнаружила возможности оптимизации, которую она и запустила. Но программа вступила в конфликт с таким же софтом от другого поставщика — Hewlett Packard — и обрушила систему.

Обнаруживший ошибку российский программист из японской компании получил в награду часы Сбербанка, а глава банка Герман Греф извлек урок. В январе 2013 года он предложил вывести ответственного за автоматизацию Сбербанка старшего вице-президента Виктора Орловского из правления банка, заниматься информационными системами будет другой человек — Виктор Кулик, отвечающий за риски. Орловский же сосредоточится на инновационных проектах и венчурном фонде.

И еще Сбербанк начинает экономить на IT — в 2013 году бюджет на эти нужды впервые будет дефицитным.

Комментарии

Отзывы и комментарии могут оставлять только зарегистрированные пользователи.
Пожалуйста, авторизуйтесь или зарегистрируйтесь.
 
Реклама


Архив материалов
Декабрь 2016
   1234
567891011
12131415161718
19202122232425
262728293031 


Акции и спецпредложения банков
  • Вклады
  • Кредиты
  • Банковские карты
ВТБ 24БинбанкПромсвязьбанкРоссельхозбанкРайффайзенбанк
Ставки выше в интернет-банке!
Повышенные ставки в интернет-банке!
Откройте вклад через интернет-банк и получите повышенную ставку.
Вклад "Великолепная Семерка"
Свобода управления и ежедневный доход

Получайте доход каждый день и распоряжайтесь средствами, как вам удобнее. Пополняйте вклад без ограничения по минимальной сумме. Снимайте деньги со счета без потери процентов.
Вклад "Добро пожаловать!"
Вклад с возможностью пополнения!

— Высокая процентная ставка — до 11% годовых в рублях
— Пополнение в течение первых 50 дней
— Валюта вклада — рубли РФ
Вклад «Пенсионный Плюс»
Пенсионный вклад с возможностью пополнения без ограничения по сроку! Бесплатная карта с тарифным планом «Амурский тигр – карта к вкладу» при наличии вклада от 50 000 рублей!
Вклад «Выгодный»
Вклад с максимальной ставкой до 7,7% в год в рублях!

Преимущества вклада:

— лучшие ставки в рублях;
— получение процентов ежемесячно на текущий счет или причисление к сумме вклада;
— пролонгация;
— открытие вклада через интернет-банк Р-Коннект или в отделении
ПодробнееПодробнееПодробнееПодробнееПодробнее
Все спецпредложения по вкладам
ВТБ 24АК Барс БанкРосбанкПромсвязьбанкЮниКредит Банк
Акция «Единая ставка»
Ипотека с господдержкой!
Ставка — 11,9% годовых на весь срок кредита. На приобретение строящегося или готового жилья от застройщика.
Выгодный автокредит от банка «АК Барс»
Если у Вас есть положительная кредитная история или «зарплатная» карта Банка, Вы можете принять участие в акции «Автомобиль без затрат» и оформить автокредит по программам «АК БАРС-Максимум», «АК БАРС-Льготный» без первоначального взноса и без повышенных процентов по кредиту.
Просто деньги
Просто нужны деньги? Возьмите их на выгодных и понятных условиях в Росбанке. Просто деньги по ставке от 14,4% годовых.
Ставка ниже. Квартира ближе!
Хотите улучшить жилищные условия? Для вас ипотека с господдержкой под 11,4%! 
Воспользуйтесь программой «Новостройка» со сниженной ставкой и вы сможете купить квартиру на первичном рынке жилья.
Кредит на Jaguar и Land Rover по ставке от 7,5%
Не упустите шанс стать владельцем нового автомобиля марки Jaguar (модели XE или XF), Land Rover (модели Discovery Sport или Range Rover Evoque) на великолепных условиях — кредит со ставкой от 7,5% годовых.

Все честно и прозрачно — убедитесь лично.
ПодробнееПодробнееПодробнееПодробнееПодробнее
Все спецпредложения по автокредитам
Ренессанс КредитАльфа-БанкЯР-БанкПромсвязьбанкБинбанк
Ренессанс Кредит
Тратьте деньги с выгодой вместе с кредитной картой банка «Ренессанс Кредит»! Вас ждут покупки по карте без начисление процентов в течение 55 дней, возобновляемая кредитная линия и бесплатное пополнение счета. Пока вы тратите деньги, банк возвращает вам на карту до 100% от суммы покупок в виде бонусов!
«РЖД — Альфа-банк»
Совершая покупки по этой карте, вы копите баллы программы «РЖД Бонус», чтобы обменять их на премиальные поездки в поездах дальнего следования и «Сапсан». Тратя от 20 000 руб. по карте ежемесячно, уже через полгода можно накопить на бесплатный премиальный билет.
Ваши возможности уже сегодня!
Кредитные карты ЯР-Банка 
Выгода от пользования картой: 
• Льготный период (беспроцентный кредит) – до 55 дней 
• Более 5000 точек пополнения карты 
• Удобный Интернет-банк и мобильный банк 
• Скидки у партнёров банка 
• Доставка карты бесплатно
Хорошее настроение
Хотите, банк подарит вам «Хорошее настроение»? 
Самое доступное, но очень практичное предложение для заряда позитивом и радостью! Первый год обслуживания бесплатно, получение карты в день обращения.
Детская карта «Юниор»
Карта Юниора создана специально для детей от 6 до 17 лет. Она научит вашего ребенка правильно распоряжаться карманными деньгами и даже зарабатывать. Начисление на остаток по счету — до 7% годовых.

ПодробнееПодробнееПодробнееПодробнееПодробнее
Все спецпредложения по доходным картам

Спецпредложения:

Сравните вклады
Узнайте где выгоднее держать сбережения. Более 1 500 вкладов российских банков
Новости и информация
Ежедневные финансовые новости России и мира, новости финансовых рынков, официальные сообщения организаций, советы потребителям, курсы валют, обзоры новых продуктов и специальных предложений.
Информация компаний
Справочная информация о банках, страховых компаниях, компаниях рынка FOREX, ситемах денежных переводов.
Финансовые продукты
Гид по продуктовым предложениям банков. Сравнение условий оформления кредитов и вкладов в российских банках. Более 3000 предложений кредитов и вкладов.
Специальные предложения
Специальные предложения банков и финансовых организаций: вклады, кредиты, кредитные карты, банковское обслуживание, кредиты для юридических лиц, страхование КАСКО, страхование туристов, др.
Ваш регион
Пожалуйста, укажите ваш регион проживания.
Это позволит вам получить информацию только для вашего региона.
BankDirect.pro