Народный тест-драйв, или что и как "тестить", чтобы получить максимум пользы от этого процесса

Ну вот мы и добрались до тестирования. Какие знания можно получить из этого этапа?
— во первых можно помочь оргам. проверить работу сайта и новой модели — это конечно почетно, но в чем профит с этого рядовому участнику?
— во вторых можно получить по три игровых отчета (с одной команды:)) для анализа и разработки модели/стратегии — вот это уже интереснее…

Но постойте, насколько я помню в симуляторе около 75 изменяемых параметров, а тестовых периодов всего 3… т.е. чтобы изменить хотя-бы в одном направлении каждый из параметров и получить информацию, как модель откликнется на на это изменение, нужно, по меньшей мере, 75 отчетов… или 25 команд, а ведь есть еще отложенный на период эффект, интересно «дернуть» параметры в обе стороны и прочее…

Есть конечно вариант поменяться отчетами, но без координации тестирования окажется, что все отчеты содержат примерно одно и тоже и целой картины не получится, т.к. в первую очередь все будут менять одно и тоже — цены, рекламу, НИОКР

Буду краток. Есть предложение объединиться заинтересованным участникам для качественной оценки параметров нового симулятора. Как я это вижу:
— заинтересованные команды объединяются в закрытое сообщество, чтобы результаты не утекли халявщикам;
— разрабатываем план, какие параметры изменять (возьму на себя);
— разбираем тесты по членам кружка;
— консолидируем полученную информацию;

Времени осталось мало и нужно спешить. Если есть желание пишите в тему или на почту ([email protected]). Если наберется достаточно желающих поучаствовать в тестировании — участники получат нехилое преимущество над конкурентами.

Upd#1
— подтвердили участие 17 команд, для каждого участника это 51 уникальный отчет;
— дополнения по организации процесса:
    — участие анонимное;
    — результаты будут консолидироваться и рассылаться участникам после каждого периода;
    — сегодня выложу проект плана тестирования для обсуждения;


Upd#2
На текущий момент участвуют 20 команд. Исходя из этого кол-ва накидал концептуальный план тестирования — пока на уровне приоритетов и (пока) в открытом доступе, если будут конструктивные идеи прошу высказываться;
Далее (к субботе) заполняю лист с решениями и раздаю по участникам (к понедельнику);
Участников еще прибавится, поэтому тесты будут масштабироваться — как в сторону более детальной проработки приоритетных параметра, так и в сторону менее приоритетных параметров.
Сам план тестов:План v1

Upd#3 20.10.2013
Между тем, под лай собак караван движется дальше
Количество участников снова выросло (и теперь перестало быть публичной информацией), каждая команда получит более 60 отчетов.
Участники получили таблицу с тестами, идет обсуждение.
Пока еще есть возможность присоединиться. Желающие участвовать пишите на почту [email protected]

Upd#4 03.11.2013
Итак тестирование закончилось, и можно подвести некоторые итоги:
— в тестировании приняло участие более 20 команд;
— каждый участник получил более 70 отчетов;
Спасибо всем, кто откликнулся на идею и принял участие.
Удачи в чемпионате. Будут вопросы, обращайтесь.

Лично я пошел готовиться к штурму Москвы:)

23 комментария

avatar
Меня возьмешь?)
avatar
Ограничений на участие нет, чем больше народу участвует, тем полезнее упражнение. Ты одной командой «поприсутствуешь» или всей толпой?)
avatar
Я придерживаюсь fair play.
avatar
avatar
avatar
А… Из обоймы чемпионов?! А что не в одной команде? Прошу прощения, если задел вас своим неуклюжим намеком.
avatar
О, не стоит, право же. Это я извиняюсь.
Вообще-то я хотел сравнить ваше мероприятие с групповым сексом, но в последний момент передумал.
avatar
Я вижу, что вы очень начитаны и остроумны! Позвольте узнать, если нынешнее тестирование у вас вызывает ассоциации с групповым сексом, то как бы вы охарактеризовали прошлогодние «забавы»?
avatar
Я не про «нынешнее тестирование», а про именно ваше мероприятие. Эти и другие «забавы» уже все пройдены. Вы изобретаете велосипед. Но мне на это так-то пофиг;)

В свою очередь, я не рекомендовал бы остальным присоединяться к анонимным инициаторам
Ничего личного.
avatar
а по-моему, здравая идея. лучше объединяться, чтобы быстрее и эффективней воспроизводить знания о новом симуляторе. сейчас для изучения сима отчеты нужны как воздух, а в одиночку их можно долго набирать…
avatar
А по-моему мы здесь все соревнуемся, кто успешнее других действует в одинаково новой для всех обстановке.
avatar
Бартер, натуробмен. gmcrussia.ru/blog/simulator/67.html
Или открыто, честно, а не с фейкого аккаунта.

Да, кстати, это ж тоже самое, только что и у Олега, только, так скажем, черный рынок)))
Это как обмен валют- можно в банке, а можно у левого рыночного барыги- вам решать;)

К тому же, спешу вас расстроить, в прошлом году орги только после первого хода показали кто в какой группе, так что… они- следующие в очереди по получению обломов, сразу за ботоводами))))

К сожалению, эта схема- отработанный материал. Увы.
avatar
Почему к анонимным...?http://globalmanager.ru/index.php?page=27&id=28908
avatar
Именно поэтому))
Сравните хотя бы со своей анкетой
Потом сравните анкеты его команды с анкетами, опять же, своей команды
Почувствуйте разницу
avatar
Ха ха ха, это говорит главный ботовод прошлого сезона!
avatar
Кстати, Борис, я бы порекомендовала план тестирования согласовать с более опытными участниками… По поводу «первой очереди», Вы кое-что упустили…
avatar
«результаты будут консолидироваться и рассылаться участникам после каждого периода». Борис, вы будете скидывать только результаты??? Отчеты остаются у вас?
avatar
Олег, Дмитрий, ну дайте вы Борису мастер-класс по основам тестирования симулятора, а не наблюдайте с удовлетворением со стороны как он глубоко ошибается со своим планом тестирования.
avatar
А мне вот уже кажется, что Борис не ошибается, а притворяется… И прекрасно знает что и как тестировать. А подобный план выложил себе же во благо. У него останутся нужные результаты теста, а остальные получат вот «ЭТО»… Может я не права, но иначе для чего анонимное участие в этой затее в тестовом раунде?? Он ведь на то и тестовый. Тем более, судя по комментариям и топикам Бориса, он далеко не глупый, и я бы даже сказала хитрый…
Последний раз редактировалось
avatar
Полностью согласна с вами. Являясь новеньким участником мне есть что с чем сравнивать.
avatar
Борис не похож на новенького участника.
avatar
Между тем, под лай собак караван движется дальше
Количество участников снова выросло (и теперь перестало быть публичной информацией), каждая команда получит более 60 отчетов.
Участники получили таблицу с тестами, идет обсуждение.
Пока еще есть возможность присоединиться. Желающие участвовать пишите на почту [email protected]
avatar
Итак тестирование закончилось, и можно подвести некоторые итоги:
— в тестировании приняло участие более 20 команд;
— каждый участник получил более 70 отчетов;

Спасибо всем, кто откликнулся на идею и принял участие.
Удачи в чемпионате. Будут вопросы, обращайтесь.

Оставить комментарий