Террариум

Selenium и .РФ

2011-08-10T13:15:00.000+04:00

Возникла необходимость написать Selenium-тесты для сайта, расположенного на интернационализированном домене.

IDN (англ. Internationalized Domain Names — Интернационализованные Доменные Имена) — это доменные имена, которые содержат символы национальных алфавитов, например, президент.рф , говорит Wikipedia.

При запуске selenium-server.jar и попытке в качестве базового url указать целевой сайт в формате IDN, происходила ошибка

HTTP ERROR: 400

Could not proxy http://selenium-server/core/TestRunner.html?auto=true&multiWindow=true&defaultLogLevel=info&baseUrl=http%3A%2F%2F%3F%3F%3F%3F%3F%3F%3F%3F%3F.%3F%3F&resultsUrl=../postResults&test=http%3A%2F%2F%2Fselenium-server%2Ftests%2Ftestsuite.html

java.net.UnknownHostException: selenium-server

RequestURI=/core/TestRunner.html

Это связано с тем, что Selenium не смог перевести IDN-формат написания в Punycode — формат, разработанный для однозначного преобразования доменных имен в последовательность допустимых ASCII-символов.
А это значит мы просто сами должны это сделать. Сконвертировать русское название домена в пуникод можно, например, тут или тут.
Теперь, вместо желаемого президент.рф мы указываем адрес xn--d1abbgf6aiiy.xn--p1ai, и радуемся проходящим тестам :)

Testing experience magazine

2011-03-16T12:16:00.003+04:00

Попался недавно на глаза онлайновый журнал, посвящённый тестированию — "Testing experience".
Журнал выходит четыре раза в год, каждый номер посвящён какой-либо тематике, например Testing Domains, Open Source Tools, Agile Testing, Security testing, и т.д.
Начиная с 2008 года уже вышло 13 номеров, можно выбрать что почитать :). А можно и написать статью для следующего номера.

Чтобы получить доступ к журналам нужно пройти простенькую регистрацию.

А ещё вчера наша группа тестирования ходила в бассейн ;)

Открыта регистрация на Microsoft Quality Assurance Day 2011

2010-12-14T20:20:00.008+04:00

22 февраля 2011 в Москве пройдёт очередная конференция для нас, коллеги, — «Microsoft Quality Assurance Day 2011».
Можно регистрироваться (при оплате до 31 декабря 2010 стоимость участия 4 900 рублей, и 5 500 рублей при оплате после 31 декабря) и ознакомиться с программой мероприятия.
Лично мне особенно интересен доклад «Исследовательское тестирование: промышленный подход (Industrial strength exploratory testing)», с которым должна выступить Анутара Бардвадж. Анутара имеет опыт применения ET на достоточно крупном проекте с командой over 100 человек, поэтому, надеюсь, доклад выйдет познавательный.
Кроме того на конференции расскажут об инструментах для тестирования, входящих в Visual Studio, проведут мастер-классы.
Тестировщикам в составе .NET-команд однозначно маст хэв :)

Миграция с Mantis на YouTRACK

2010-12-10T19:00:00.008+04:00

YouTRACK установился без каких-либо проблем, что порадовало. А вот миграция проектов из Mantis с самого начала проходить не захотела, — пришлось дополнительно подготовить к этому как Mantis, так и YouTrack. Ну и несколько багов-ишью обнаружено в процессе миграции, о которых ниже.

Процесс миграции на YouTrack с Mantis описан на сайте Jetbrains.
Добавлю к нему свои комментарии:
1. Перед выполнением описанных шагов, необходимо в настройках YouTrack включить REST API: Administration -> Setup -> Enable REST API.
2. По инструкции миграции необходимо поставить последние версии Python'a и библиотеки mySQLdb к нему. Я не стал скачивать последнюю доступную версию (2.7.1), а взял версию 2.5.4. Поскольку библиотеку для MySQL под Win (версии 1.2.2) нашёл только для этой версии питона.
3. После установки питона и библиотеки можно запускать скрипт миграции, который скачивается тут. Запускается следующей командой:
python mantis2youtrack.py target_url target_login target_pass mantis_db_name mantis_db_host mantis_db_port mantis_db_login mantis_db_pass mantis_project mantis_project mantis_project

target_url - URL к вашему YouTrack.
target_login, target_pass - логин и пароль к учётной записи в YouTrack с правами администратора.
mantis_db_* - параметры доступа к бд мантисса, которые можно взять из его конфигурационного файла config_inc.php, разве что указывается стандартный порт для MySQL — 3306.
В конце указывается список проектов, которые должны быть перенесены, через пробел.

После запуска команды откроется консоль питона, в которую будет выводится информация о ходе миграции, ошибки, если что-то пошло не так.

Обнаруженные баги:
1. Не происходит миграция аттачей.
2. Если в мантиссе было разрешено не указывать категорию у ишью (делается это с помощью указания в конфиге параметра $g_allow_no_category = ON; у таких репортов в поле категория стоит значение (No Category)), то все ишью проекта, на котором есть хотя бы одно без категории, перенесены не будут.
3. Если у проекта есть список версий, то в качестве даты выпуска каждой версии устанавливается сегодняшняя дата.

Особенности:
1. Т.к. в YT поля Description и Steps to reproduce объединены в одно, то и при миграции значения этих полей будут находится в одном поле Description (при желании думаю можно смапить поля так, чтобы шаги писались в дополнительное кастомное поле).
2. Проекты и подпроекты. Пока не понял, как можно создать под-проект. Либо связать два уже созданных проекта таким образом.
3. Пользователи Mantis мигрируют в YouTrack, но без паролей. Для задания пароля на форме аутентификации необходимо ввести логин и нажать ссылку восстановления пароля - придёт письмо на почту.
4. Конвертируемый проект должен называться на английском и не содержать пробелов в имени.

В ролях:
Mantis v1.2.3.
YouTrack v2.1.3 build #793.
YouTrack rest api python v2.1.4.

Полезные ссылки:
Инструкция по миграции с Mantis на YouTRACK на сайте JetBrains
http://tv.jetbrains.net/ - раздел с видео по продуктам JetBrains. Есть интересные записи.
Import from Mantis to YouTRACK tool (на данный момент доступна версия 2.1.4, миграция проводилась версией 2.1.1 и 2.1.4).

Посетил день карьеры форума IT 2 Days 2010

2010-12-04T23:30:00.008+04:00

Завершился день карьеры форума IT 2 Days 2010, проводимого IT-Literacy. На форуме выступили представители hh.ru и местных it-компаний. Докладчики рассказали о пути развития начинающего специалиста, правилах оформления резюме и о секретах успешного прохождения собеседования.
В завершении дня прошла ярмарка вакансий, где молодые специалисты и компании могли найти друг друга.
Порадовало большое количество вакансий в тестировании, в том числе в автоматизации: требуются люди со знанием QTP, TestComplete, а так же Perl. Есть что выбрать желающим :)

Тренинг по нагрузочному тестированию в офисе EPAM

2010-12-02T13:11:00.005+04:00

Во вторник внезапно попали на тренинг по нагрузочному тестированию, который проходил в офисе EPAM Systems.
Проводил его для гостей Анатолий Батраков, он же будет выступать с расширенной версией этого доклада на предстоящей eTalks QA 2010.
Думаю доклад был бы особенно полезен для начинающих заниматься нагрузочным тестированием, дабы избежать наступления на многие грабли. Я вот тоже извлёк из него пользу, подведя итог опыту, который получил на недавнем проекте, где занимался нагрузкой, — сталкивался с теми же самыми проблемами, о которых говорил докладчик.
После доклада пообщались на свободные темы о тестировании, про автоматизацию и нагрузку web-сервисов, составление ПиМИ и о применимости исследовательского тестирования..

Сервисы проверки орфографии на сайте.

2010-11-26T18:32:00.010+04:00

Если довольно долго имеешь дело с одним приложением, то через какое-то время глаз может "замылиться", отчего перестаёшь замечать мелкие недочёты системы. Например опечатки или орфографические ошибки в текстах на сайте.
Некоторое время назад я уже пытался найти сервисы подобного рода, но они либо были платными, либо только англоязычными, да и работали довольно медленно.

Недавно же обнаружил сразу два таких сервиса, выполняющих проверку русскоязычных ресурсов:
• «Орфограф» студии Лебедева.
• «Проверка орфографии» в составе Яндекс.Вебмастер.

Сравнивая результаты, можно сказать что Орфограф более строг, нежели аналог от Яндекса.
Так же Орфограф следит не только за русским языком. Зато сервис Яндекса позволяет переходить по ссылкам внутри своего фрейма, проверяя все открываемые страницы, Орфографу же каждый раз нужно скармливать новую ссылку.

eTalks QA 2010 в Самаре состоится 11 декабря

2010-11-21T12:02:00.003+04:00

11 декабря 2010 года в Самаре пройдёт очередная конференция eTalks. На этот раз она будет полностью посвящена темам тестирования и контроля качества, отчего и имеет приставку QA :)
Участие бесплатное, но по предварительной записи, т.к. количество мест ограничено - максимум 100 человек.
Программа ещё формируется, но уже заявлено несколько докладчиков.
Подробнее тут eTalks QA 2010.

Websecurify — инструмент для поиска уязвимостей веб-приложений.

2010-10-19T13:02:00.000+04:00

Попробовал новый инструмент для тестирования безопасности веб-приложений — Websecurify v0.7.

Плюсы:
• Бесплатная
• Простой интерфейс
• Понятный отчёт о проблемах с вариантом их решения
Минусы:
• Не нашла ни одной уязвимости в наших проектах :)
• Зато имеются ложные срабатывания (разработчики обещают их низкий процент)
• Пока сырая версия, чем и объясняются баги, которые не дают толком тестировать:
o Зависает при выполнении каких-то проверок, приходится нажимать на паузу, затем продолжать тест - тогда он идёт
o Через какое-то время Windows блокирует программу, считая её опасной, а сама программа из-за этого критически завершается.

В целом продукт интересный и дружелюбный, буду следить за обновлениями.

Плагин для подсветки элементов в Selenium IDE

2010-10-13T11:41:00.004+04:00

Интересный вышел плагин, который подсвечивает на странице элементы, с которыми в данный момент работает Selenium IDE - Highlight Elements Plugin.
Достаточно установить плагин для FF, после чего нажать на появившуюся кнопку в окне Selenium IDE.

Плагин может помочь при отладке тестов (при этом для большего эффекта следует замедлить скорость исполнения скрипта).

Работает с Selenium IDE от 1.0.4.

Join Test Link QA Team

2010-09-30T23:49:00.004+04:00

Готовится к выходу TestLink 1.9 RC1, и разработчики просят помощи сообщества в тестировании.
Кто хочет принять участие, тем сюда.

Using proxy in JMeter

2010-09-20T16:06:00.000+04:00

If you are testing from behind a firewall/proxy server, you may need to provide JMeter with the firewall/proxy server hostname and port number. To do so, run the jmeter.bat/jmeter file from a command line with the following parameters:

-H [proxy server hostname or ip address]
-P [proxy server port]
-N [nonproxy hosts] (e.g. *.apache.org|localhost)
-u [username for proxy authentication - if required]
-a [password for proxy authentication - if required]

Example : jmeter -H my.proxy.server -P 8000 -u username -a password -N localhost

Alternatively, you can use --proxyHost, --proxyPort, --username, and --password

Валидация кириллистических значений с помощью BadBoy

2010-09-13T11:07:00.000+04:00

Столкнулся с проблемой, что BadBoy не воспринимает строковые значения, содержащие кирилицу и при любых ассертах, соответственно, говорит что тест провален, даже если на самом деле всё работает.
Кто-нибудь знает, как побороть?

How to update MantisBT

2010-05-14T11:56:00.005+04:00

Guide to update Mantis bugtracker

1. Backup your bugtracker database.
2. Rename %mantis% to mantis_old.
3. Download and unpack new version in %mantis_directory%.
4. Open Mantis in your browser. You should see Install\Update page.
5. Enter your settings, such as a hostname, database login\password for user and administrator (can be found in mantis_old/config_inc.php).
6. Click Install\Update.
7. Remove %mantis%/admin directory.
8. Done*.

* If you have any plugins, addons, custom functions and other modifications copy them too.

Tested and worked with 1.1.8 to 1.2.0 and 1.2.0 to 1.2.1.
If anybody know more easily way, let me know pls :)

Получение данных от сторонних сервисов

2010-04-14T09:04:00.003+04:00

Интегрировали в наш портал блок с информацией о погоде для выбранного города от одного из провайдеров погодных данных.

Всё было хорошо, пока сервис работал. Однако когда у самого провайдера начались проблемы — его сайт был периодически недоступен, аналогичные проблемы начались и на портале. В очереди Tomcat'а накапливались соединения к сайту погоды, а учитывая, что они создавились при кажджом действии пользователя на странице, их было очень много. Соответственно увеличилось время загрузки страниц у пользователей и страницы им отдавались не полностью.

Решением было реализовать загрузку блока с погодой асинхронно от общего контента портала, не дожидаясь загрузки погодных данных, а так же установили таймаут, через который предпринималась попытка очередного соединения с сайтом погоды, если предыдущая не завершилась успешно.

Если в приложении используются какие-либо сторонние провайдеры данных, следуют не только проверить, что будет в случае недоступности сервиса, но и как поведёт себя приложение при недоступности такого сервиса, особенно в стрессовых условиях, под нагрузкой.

Load Impact - Load test results for 62.213.30.250/kiosk/gibdd/wizard.do

2010-03-05T02:17:00.001+04:00

Load Impact - Load test results for 62.213.30.250/kiosk/gibdd/wizard.do

Posted using ShareThis

Load Impact ищет бета-тестеров

2010-03-05T01:46:00.001+04:00

Load Impact (сервис, позволяющий выполнить нагрузочное тестирование online) в связи с введением нового функционала ищет бета-тестеров. Из нововведений будет доступно приложение генерации нагрузки, программируемое на Lua, а так же новый API.
Участники тестирования получат в пользование premium-акк, правда ограниченный по времени.
Заинтересованным слать письма на support@loadimpact.com с темой "Beta Test".

MantisBT 1.2.0 Released

2010-02-24T16:56:00.005+04:00

Обновляем Mantis с 1.1.8 до 1.2.0:

1. Делаем бекап базы данных. На всякий случай :)
2. Переименовываем папку со старой версией mantis в mantis_backup.
3. Скачиваем последнюю версию и распаковываем содержимое в папку mantis и подкладываем сюда же конфиг из предыдущей версии с пользовательскими настройками (пути к базе данных, настройки почты и т.д.).
4. Открываем в браузере баг-трекер, где вместо странички логина отображается приглашение произвести обновление. Вводим логин/пароль администратора для доступа к БД и жмём «Update».
5. Готово :)

Контекстная реклама Google в Gmail

2009-12-15T15:32:00.003+04:00

Возможно для кого-то не новость, но я раньше не замечал, что Google предлагает контекстную рекламу на основании не только текста письма, но ещё и вложений в него.
А вышло забавно.

Тестирую сервис, позволяющий просматривать свои штрафы в ГИБДД. Так вот одна из фич заключается в возможности отправить себе на почту весь список со штрафами.
На скриншоте видно, какую рекламу предложил Гугл, когда на ящик пришло письмо со списком штрафов в аттаче :)

Удачная вышла интеграция :)

Ошибка при установке MS Office 2010 Beta

2009-12-02T15:51:00.004+04:00

Я конечно понимаю, что не следовало ставить бету 2010-го офиса поверх его TCP версии, которая, в свою очередь, была поставлена параллельно с 2007 офисом. Однако я так сделал :)
А результат обновления офиса под катом

2007-ой офис напрочь пропал из «Установки и удаления программ».
MS Office 2010 Beta надолго задумался при завершении установки, поэтому установку пришлось отменить. Инсталлятор откатил установку (так выглядело) однако файлы, папка с ярлыками в меню «Пуск», а так же строчка в «установке и удалении» для 2010beta остались.
2010beta не удаляется, сообщая, что «Язык этого установочного пакета не поддерживается данной системой». Перестал вдруг.
2010beta не устанавливается, программа установки завершается с ошибкой при запуске.
Windows Installer CleanUp не помогает.

Пытаюсь побороть..
Повторная установка 2007 прошла успешно, Word по крайней мере работает.
Однако Outlook начал ругаться на то, что текущий профиль почты был создан в более поздней версии (Outlook 2010 успел его подправить) и может содержать сведения, несовместимые с текущей версией Outlook. После чего выдаёт ещё более пессимистичное сообщение, что не удаётся вообще ничего:

«Не удается запустить Microsoft Office Outlook. Невозможно открыть окно Outlook. Невозможно открыть набор папок. Не удается открыть банк сообщений.» Остаётся добавить к сообщению «Ааа!!11 Паника!»...

Аутлук вылечился созданием новой учётной записи: «Панель управления» — «Почта» — «Добавить...», настройки же он сам подтянул.

p.s. Что интересно, 2007-ой офис был 12 по счёту. Этот же, 2010-ый, ставится в папку «Office14».

Office 2010 Beta is coming

2009-10-24T15:11:00.000+04:00

Как мне только что стало известно, Microsoft завершает программу Technical Preview для Office 2010 и со следующего месяца переводит его в бету. Скачать Office 2010 Beta можно будет уже в ноябре.
Хочу отметить, что и TCP-версия была довольно стабильна для ежедневного использования, поэтому с нетерпением жду бету :)

Быстрые ссылки в Mantis

2009-10-14T10:20:00.002+04:00

Вот такая полезная фишка обнаружилась сегодня, во время создания очередного баг-репорта.
При написании отчёта в Mantis можно быстро вставлять ссылки на другие баги и комментарии. Для этого нужно просто написать его номер, а перед номером поставить «#» или «~», соответсвенно.
Например, написав #2000 в тексте мы получим ссылку на двухтысячный баг, при этом у ссылки будет хинт, отображающий summary и status бага; а ~1000 означает ссылку на тысячный комментарий.
Довольно удобно, но в мануале я описания такой фичи не встречал.
А в конфиге можно изменить алиасы для даных функций.
Для этого в config.inc.php нужно добавить следующий код:

# Bug Linking

$g_bug_link_tag = '#';

# Bugnote Linking

$g_bugnote_link_tag = '~';

Установка MantisBT

2009-10-08T09:59:00.001+04:00

А что это?

MantisBT — бесплатный, удобный и от того довольно популярный баг-трекер. На момент написания последняя стабильная версия — 1.1.8, последняя development-версия — 1.2.0rc2. Алгоритм установки идентичен для обеих версий.

Требования к системе

Перед установкой необходимо убедиться в наличии необходимого окружения и установить недостающее:

MySQL 3.23.2 или старше (Экпериментально поддерживаются MS SQL и Oralce, не проверял)
PHP 4.0.6 или старше
Web-сервер с поддержкой PHP (Apache, IIS)

Всё это мы можем найти в пакете Denwer. Как его установить, подробно написано на оффсайте, поэтому будем считать что мы установили и запустили наш локальный веб-сервер и перейдём к самой установке.

Разворачиваем Mantis

1. Для начала создадим базу данных, и назовем её, например, mantisbt. В случае с Денвером, используем для этого phpMyAdmin, входящий в его комплект, и находящийся здесь.

2. Создаём пользователей для доступа к БД: mantisUser и mantisAdmin. Для этого во вкладке «Привилегии» переходим по ссылке «Добавить нового пользователя», вводим логин, пароль и нажимаем «Пошёл».

3. Назначаем созданным пользователям права выполнения следующих команд на базе mantisbt:

select, insert, update, delete для пользователя
тоже, плюс index, create, alter и drop для администратора

Для этого открываем пользователей на редактирование, выбираем необходимую базу (mantisbd) и sql-команды. На этом наше общение с базой данных заканчивается.

4. Размещаем файлы дистрибутива Mantis в папке нашего веб-сервера (после чего Денвер нужно перезапустить, не забудьте! Он обновляет список веб-приложений при загрузке). Я скопировал их в C:\WebServers\home\mantisbt\www\

5. Заходим на страницу установки, у меня это http://mantisbt/. Здесь автоматически проверяются параметры окружения, если всё хорошо, увидите красивые зелёные надписи «good».

6. Выбираем параметры подключения к БД:

Тип сервера: MySql
Адрес сервера: localhost
Логин и пароль пользователя: mantisUsername
Имя базы данных: mantisbt
Логин и пароль администратора: mantisAdmin

7. Жмём «Поехали!». После нескольких секунд ожидания должно появиться много зелёных слов, подтверждающих успешность установки :) и ссылка для перехода на страницу логина.

8. Настроим почтовые уведомления в Mantis.

В файле config_inc.php пишем:

# select the method to mail by:

# 0 - mail()
# 1 - sendmail
# 2 - SMTP
$g_phpMailer_method = 2;
# This option allows you to use a remote SMTP host. Must use the phpMailer script
# Name of smtp host, needed for phpMailer, taken from php.ini
$g_smtp_host = 'smtp.domain.com';

Заменяем smtp.domain.com на адрес своего SMTP-сервера.

Если у вас нет возможности подключится к smtp-серверу или необходимости использовать email-уведомления, то их можно просто отключить:

# allow email notification

# note that if this is disabled, sign-up and password reset messages will
# not be sent.

$g_enable_email_notification = OFF;

9. Осталось зайти в систему под дефолтным администратором (administrator / root), создать нового пользователя с правами администратора, отключить текущего и удалить папку Admin из корня, чтобы никто случайно не переустановил Mantis :)

10. Всё, можно работать.