2013-10-05 02 Алексей Родионов. Как сделать свой Travis CI -...

КАК СДЕЛАТЬ СВОЙ TRAVIS CIVAGRANT + KVM

@[email protected]

Thursday, October 3, 13

АЛЕКСЕЙ РОДИОНОВ

• 7+ лет в тестировании

• Paradev @ Toptal

• Code monkey @ Watir

• (ex) Контрибутор @ Mozilla


ЧТО ТАКОЕ TRAVIS CI

• Сервис непрерывной интеграции

•Интеграция с Github

• Тесты для каждого Pull Request

•Интеграция с Campfire/HipChat/IRC

•Изолированное окружение


В НАЧАЛЕ

• Rails, RSpec

• Cucumber + Watir-WebDriver

•Github, Jenkins

• Specs ➜ Smoke tests ➜ Sanity tests

•Ghprb

• parallel_tests, Selenium Grid


ПРОБЛЕМЫ

• 1,5 тыс. спек

• 2 тыс. фич

• ~ 12 часов полный прогон

• Глюки Selenium Grid

• Shared resources (db, файлы, порты)

•Масштабируемость и переносимость


РЕШЕНИЕ

•Нужно изолированное окружение

•Один процесс в одном окружении

• Selenium Grid


VAGRANT

• Создание виртуальных машин из basebox

•Настройка машины через Puppet, Chef, Shell, etc.

• VirtualBox, VMware из коробки

•Плагины


РЕАЛИЗАЦИЯ

• Vagrantfile (VirtualBox)

• Puppet (librarian-puppet)


ПЛЮСЫ

•Окружение легко и быстро разворачивается

• Версии софта в коде

• “У меня не воспроизводится”

•Обновляющиеся браузеры?


ПРОБЛЕМЫ

• VirtualBox не параллелится (вообще)


ПРОБЛЕМЫ

• VirtualBox не параллелится (вообще)


РЕШЕНИЕ

• VMware

• Linux KVM

•Xen

• etc.


РЕШЕНИЕ

• libvirt


РЕШЕНИЕ

• vagrant-libvirt

• vagrant-kvm


РЕШЕНИЕ

• vagrant-libvirt

• vagrant-kvm (импорт из VirtualBox)


ПРОБЛЕМЫ

• Динамические IP

•NFS в Vagrant далек от идеала


РЕШЕНИЕ

•Поддержка DHCP в vagrant-kvm

•Поддержка exportfs в Vagrant


ПРОБЛЕМЫ

• Segfaults/exceptions/crashes при параллельном создании виртуальных машин


РЕШЕНИЕ

•Не решено :)


ПРОБЛЕМЫ

•Хранение RAW дисков виртуальных машин (~ 3 ГБ)


РЕШЕНИЕ

•Поддержка qcow2 diff образов в vagrant-kvm (~ 300 МБ)


УЛУЧШЕНИЯ

• Veewee (Packer)

• Сделали полную копию production в VM (os, db, locale, date, ruby, libs, etc.)


УЛУЧШЕНИЯ

• vagrant-exec для удобной работы с машиной

• p0deje/display для запуска Selenium тестов


ТЕПЕРЬ

• 4 тыс. спеков

• 3 тыс. фич

• ~ 5 часов на полный прогон

•Никаких проблем с Grid

•Никаких хаков с shared resources


ТЕПЕРЬ

• 11 параллельно работающих VM

• 155 виртуальных машин

•Масштабируемость и переносимость

•Отказоустойчивость


•Параллельное создание VM (~8)

• Stale NFS Error в1% билдов (who cares)

НЕРЕШЕННЫЕ ПРОБЛЕМЫ


ЧТО ДАЛЬШЕ

• Кастомный сервер с изменениями для каждого Pull Request

•Миграция на Xen

•Миграция на EC2, DigitalOcean


@[email protected]

СПАСИБО!


Date post:	16-Jun-2015
Category:	Education
Upload:	-
View:	200 times
Download:	1 times

2013-10-05 02 Алексей Родионов. Как сделать свой Travis CI -...

Education