Проект S&T по автоматизации функционального тестирования в Банке ВТБ

Информация о Компании-Заказчике.

ВТБ является одним из лидеров национального банковского сектора и занимает прочные конкурентные позиции на всех сегментах рынка банковских услуг. Главным акционером ВТБ с долей в 77,5% является Правительство РФ. В ходе проведенного в мае 2007 года IPO среди российских и международных инвесторов было размещено 22,5% акций ВТБ. Общий объем средств, привлеченных в рамках дополнительной эмиссий акций, составил около $8 млрд., что сделало IPO ВТБ крупнейшим публичным размещением акций в мире в 2007 году. Кроме того, оно стало самым «народным IPO» в России за всю историю национального фондового рынка, по его итогам акционерами ВТБ стали более 120 тыс. россиян.

В связи с необходимостью поддерживать на высоком уровне внутренние проекты по разработке и внедрению специализированного банковского программного обеспечения, в ВТБ был сформирован отдел контроля качества программного обеспечения. На это решение повлияло несколько факторов:

• тестирование проводилось, как правило, силами разработчиков
• срыв сроков выхода запланированных продуктов
• отсутствие документирования должного уровня выполняемых тестовых действий
• отсутствие должного планирования и анализа рисков в проектах
• необходимость автоматизации и контроля рутинных процессов

Данные факторы были выявлены в ходе проведения компанией S&T исследования – аудита – состояния дел Банка в области ИТ-тестирования. Аудит организовывался с целью получения информации по вопросам ведения проектов, выяснения актуального положения дел в построении процессов разработки и тестирования, понимания требований Банка к организации процесса тестирования. Также были выявлены задачи, решение которых наиболее критично по времени. Результатом аудита стало коммерческое предложение, в котором было отражено видение компании S&T по организации процесса тестирования в ВТБ. В окончательном варианте Банк остановился на одной части задачи по постановке процесса тестирования, решить которую предстояло специалистам компании S&T. Эта задача заключалась в организации функционального тестирования и его автоматизации, чтобы продемонстрировать Банку возможности специализированного программного обеспечения (HP Quality Center) в этой области, а также показать преимущества подобного подхода в решении задач ВТБ.

Цель проекта
Целью проекта была обозначена демонстрация подходов в решении задачи по автоматизации тестирования. В частности, необходимо было автоматизировать несколько функциональных сценариев по работе с Системой Расчетов Банка, а также организовать способ ведения проектов по тестированию и управлению выполнением тестов, в том числе и в автоматическом режиме.

Решение
Анализ функциональных сценариев и Системы Расчетов, являющейся частью ИСУБД «Новая Афина», позволил выделить основные признаки системы и типы действий. Изначально предполагалось, что автоматизированные сценарии будут содержать запись последовательного выполнения всех необходимых операций для проверки жизненного цикла документов в рамках ИСУБД. Подобный подход, при наличии десятков функциональных сценариев и большого числа переходов внутри жизненного цикла документов, должен был привести к появлению множества автоматизированных сценариев, содержащих большое количество повторяемых кусков кода, поддерживать который могло бы быть проблематично. В качестве примера причин, влияющих на эффективность линейного выполнения записанной последовательности действий, можно привести постоянно меняющееся время ожидания обработки документов внутри интеграционной платформы, наличие большого количества объектов, созданных с использованием сторонних мало популярных библиотек наподобие Centura и т.п.

В качестве решения проблем, в том числе и потенциальных (связанных с дальнейшей поддержкой возрастающего количества сценариев), был предложен следующий подход к разработке автоматизированных сценариев:
• Описание сценария действий находится в отдельном файле в виде простых текстовых директив для интерпретатора. Описание в целом напоминает функциональный сценарий для плана тестирования, и с небольшой доработкой может напрямую использоваться для составления такового.
• Интерпретатором является некоторый универсальный код, распознающий текстовые команды и производящий необходимые действия с ИСУБД и другими системами.
• Входные тестовые данные отделены от кода и функциональных сценариев и хранятся в одном месте, что позволяет легко и независимо манипулировать ими. Таким образом, исключается необходимость многократного обновления одинаковых данных в автоматизированных сценариях.
• Вместо большого количества похожих функций, для работы с различными типами документов в различных состояниях вводится одна компактная функция, позволяющая динамически в любой момент времени определять объект, ссылающийся на нужное окно документа, находящегося в работе (в рамках ИСУБД или других подобных систем.)
• Процедура запуска сценариев управляется матрицей с описанием тестов, согласно разработанным функциональным сценариям. Данная матрица находится в отдельном файле и считывается построчно в процессе выполнения тестов.
• При запуске автоматизированных сценариев происходит автоматическое распознавание места дислокации в файловой системе и, соответственно, обнаружение файлов с входными данными и сценариями выполнения.
• Добавление интеграции с HP TestDirector (TD), что позволяет также автоматически находить и использовать все зависимые библиотеки в TestDirector, а также, при необходимости, автоматически заносить дефекты.
• При выполнении тестов ведется независимый файл отчета, куда попадают все выполняемые действия, реакция системы (ИСУБД и т.д.) на эти действия и аналитические выводы в зависимости от условий. При этом каждой записи в файле отчета присваиваются соответствующие копии экрана, окон или интерфейсных элементов. Файл отчета должен помочь быстро определить место ошибки в тесте и ее возможную причину. На основе этой информации также возможно оперативно подготовить описание дефекта и занести его в систему учета дефектов, а при наличии интеграции с TD это можно сделать в автоматическом или полуавтоматическом режиме, что позволит сэкономить время пользователей.

Данный подход был реализован в виде исходного кода на языке Visual Basic (VB), исполняемого в среде HP QuickTest Professional (QTP) – средства для автоматизации функционального тестирования. Дополнительно были подготовлены сервисные функции, обеспечивающие работу с файловой системой, Excel-файлами и отчетом, а также реализованы описания сценариев и файлы с входными тестовыми данными. Исполнение кода может осуществляться следующими способами:

1. Запуском непосредственно из QTP на выделенном оборудовании.
2. Запуском из QTP на рабочих станциях пользователей.
3. Запуском из TD вручную (выполнение будет происходить независимо от пользователей на выделенном оборудовании).
4. Запуском из TD в автоматическом режиме по расписанию (выполнение будет происходить независимо от пользователей на выделенном оборудовании).

TD также рекомендован S&T ВТБ для хранения и запуска автоматизированных сценариев, что обеспечит следующие преимущества в работе команды:
• Сценарии будут храниться в одном месте, будет использоваться контроль версий – то есть риск потери каких-либо изменений будет сводиться к минимуму, при необходимости можно вернуться к последней работоспособной версии кода.
• При включении в процесс тестирования ведения требований и релизов можно отслеживать покрытие тестами этих требований и соответствие графику.
• Запуск тестов на выполнение будет происходить в заданное время в автоматическом режиме либо по команде пользователя, при этом рабочие станции пользователей не будут заняты работой приложения и тестируемых систем.
• Возможно заведение большинства дефектов в автоматическом режиме в процессе выполнения автоматизированных сценариев.
• Все заинтересованные лица, участвующие в процессе, будут получать соответствующие уведомления в зависимости от ситуации (например, сотрудники службы поддержки – при нахождении дефекта; сотрудники отдела контроля качества – при исправлении дефекта или нового изменения в системе и т.п.), что позволит гарантировать правильность адресата и отслеживать оперативность в работе.

Результаты
Реализация данного подхода компанией S&T средствами специализированного программного обеспечения, разработанного компанией HP, позволила продемонстрировать ВТБ возможности по автоматизации процесса тестирования и сделать выбор в его пользу. По результатам этого проекта руководством ВТБ было принято решение о внедрении данного ПО для использования сотрудниками Банка, в частности сотрудниками отдела обеспечения качества программного обеспечения. Разработка новых тестовых скриптов сотрудниками Банка производится с использованием данного подхода, что позволяет иметь единый связный набор скриптов.

S&T International (www.sntru.com) – российская дочерняя компания S&T System Integration and Technology Distribution AG (www.snt-world.com) Компания предлагает широкий спектр IT-решений и услуг различной сложности: начиная от поставок программного обеспечения и оборудования и заканчивая комплексными корпоративными проектами по поддержке критически важных бизнес-процессов заказчика. Командная работа в международном масштабе и опыт, накопленный за 15 лет в 22 странах мира, позволяют компании привлекать для своих проектов лучших специалистов.

S&T International предлагает весь спектр услуг по планированию, построению, управлению и поддержке ИТ-решений и услуг. Высококвалифицированные специалисты S&T осуществляют комплексное обслуживание информационных систем, программного обеспечения, аппаратных средств, сетевого и периферийного оборудования. Многолетний опыт наших сертифицированных инженеров позволяет S&T предоставлять полный спектр услуг по поддержке, обслуживанию и восстановлению оборудования.

S&T International обладает уникальной экспертизой в области консалтинга и внедрения продуктов HP Business Technology Optimization. Сотрудники компании сертифицированы по программным решениям Hewlett-Packard и имеют значительный опыт выполнения проектов – от предпродажного консалтинга, до внедрения, и поддержки систем на базе программных продуктов HP.

Опубликовано: 8 декабря 2008 г.

Ключевые слова: нет

Извините, комментариев пока нет