Положение об экспертизе результатов заданий Игровых исследовательских Центров Линукс-Технопарка Свободных Программ
Настоящее Положение определяет правила и порядок экспертизы результатов заданий, выполненных Игровыми исследовательскими Центрами Линукс-Технопарка Свободных Программ (далее, ИИЦ)
1. Общие положения
В Техническом задании (далее, ТЗ) сформулированы Задания для ИИЦ (10 штук) и критерии экспертизы по каждому из результатов заданий (далее, Отчеты). Выполнение задания требует применения определенных в ТЗ программных продуктов и форматов.
2. Состав экспертизы
Полноценная экспертиза представляется объединением экспертных заключений специалистов различных областей, т. е. сочетанием экспертиз разных видов. Отчет подвергается комплексной экспертизе, включающей:
• первичную экспертизу
• IT - экспертизу,
• содержательную экспертизу
Первичная экспертиза, определяющая соответствие материала заданию, соответствие материала ПО и формату, бросающиеся в глаза серьезные недостатки, грамотность – проводится редакторами Википедии.
IT – экспертиза определяет технологическую эффективность, правильность, качество продукта и т.д., согласно критериям экспертизы в ТЗ и проводится IT-экспертами
Содержательная экспертиза определяет полноту смыслового содержания в исследуемой области, правильность и ценность для мира игровых технологий и проводится SG-экспертами согласно критериям экспертизы в ТЗ
Таким образом, каждый отчет ИИЦ исследуют по меньшей мере три эксперта разных профилей. Как правило, экспертизу каждого вида проводят от 1 до 3 экспертов.
3. Состав экспертного комитета
Для проведения IT – экспертизы привлекаются IT-эксперты из Красноярского и Пермского Края, Томской области (по 5 человек от каждого региона).
Для проведения содержательной экспертизы привлекаются SG-эксперты из игрового Интернет-сообщества, разработчики, сотрудники игровых фирм (15-20 человек).
IT-эксперты разделены на группы по видам заданий.
SG-эксперты разделены на группы по видам игр.
4. Процедура экспертизы
а) Порядок проведения экспертизы – следующий:
• эксперты самостоятельно следят за содержанием закрепленных за ними страниц Википедии, рецензируя появляющиеся материалы. Для детального просмотра любого отчета эксперт скачивает с FTP-сервера проекта любой необходимый файл
• Эксперт в течение не более, чем 2-ух суток, должен дать оценку отчету.
Оценка может быть следующей:
Для SG-эксперта
- отчет принят;
- отчет не принят (причины и рекомендации).
Для IT-эксперта
- кол-во баллов согласно соответствующей заданию шкале баллов по каждому виду работ. IT-оценкой за отчет команды считается средняя оценка экспертов.
• После окончания Фестиваля SG-эксперты выставляют общие оценки в виде кол-ва баллов каждой закрепленной за ними странице согласно указанным критериям и шкале баллов. SG-оценкой работы команды считается средняя оценка SG-экспертов, просмотревших ее страницу.
5. Критерии оценок и шкалы баллов
Первичная экспертиза – соответствие материала заданию, соответствие материала ПО и формату, бросающиеся в глаза серьезные недостатки, грамотность – проводится редакторами Википедии.
IT-экспертиза
| № | Виды работ | Критерии | Шкала баллов |
|---|---|---|---|
| 1 | Простой текст (правила, краткие правила) | Информационная грамотность, использование возможностей текстового редактора | До 5 баллов |
| 2 | Сложный структурированный текст (Аналитический отчет, Рекламно - информационный буклет, Мировой прайс игры) | Информационная грамотность, убедительность, логическая связность, технологическое качество исполнения, полнота использования инструментов | До 15 баллов |
| 3 | Компьютерная презентация | Технологическое качество исполнения | До 10 баллов |
| 4 | Видео | Монтаж, качество видео и звука, сложность, оригинальность, убедительность | До 30 баллов |
| 5 | Трехмерная анимация (3-D – альбом игры) | Кол-во эл-тов, качество исполнения, сложность | До 20 баллов |
| 6 | Компьютерная графика (Набор фотографий, плакат) | Качество, оригинальность, степень использования возможностей инструментов | До 15 баллов |
| 7 | Работа с базой данных Справочник по игре | Эффективность построения базы данных | До 10 баллов |
SG-экспертиза
| Виды работ | Критерии | Шкала баллов |
|---|---|---|
| Страница Википедии | Общая грамотность, полнота, правильность, логическая связность, общее кол-во и качество материалов, содержательное качество отдельных структурных элементов | До 70 баллов |
6. Определение победителей Фестиваля
Определение команд - победителей Фестиваля проводится по сумме баллов, полученных суммированием всех IT – оценок и SG-оценки команды. Победители по номинациям определяются следующим образом: каждый SG-эксперт имеет право выдвинуть 1 отчет по каждому заданию на соответствующую номинацию. Все SG-эксперты голосуют (1 эксперт – 1 голос). Победителем номинации становится отчет, получивший большее кол-во голосов. Если номинанты набирают одинаковое число голосов, победитель определяется по более высокой IT – оценке, соответствующей данному заданию.