IPB

Добро пожаловать, гость ( Вход | Регистрация )

> Оценка задач пользователями, совершенствуем систему голосования
snav
28.11.2010, 11:44
Сообщение #1


Kорифей
****

Группа: Модераторы
Сообщений: 4 135
Регистрация: 13.4.2008
Из: Россия
Пользователь №: 7 457



Давайте поговорим о том, как можно улучшить систему оценивания задач пользователями.

Для начала пара слов о целях. Оценка задач призвана помочь:
1. Новым игрокам найти наиболее интересные задачи.
2. Модераторам учесть интересы/пожелания игроков, очищая сайт от неинтересных задач.

Напомню, что ранее существовала пятибалльная шкала оценок: 1, 2, 3, 4, 5, - которая называлась "рейтинг". Участвовать в голосовании могли все пользователи, независимо от того, зачтена им задача или нет. Основным недостатком такой системы было отсутствие ясных представлений о критериях голосования. Кто-то оценивал интересность, кто-то - сложность (путая рейтинг задачи с ее весом), да и градация оценок тоже была не совсем ясна.

Около года назад была предложена ныне действующая система голосования, названная "симпатии решивших". Описывать ее не буду, так как все с ней хорошо знакомы. К плюсам этой системы можно отнести простоту и понятность. К минусам - недостаточное количество градаций оценок и тенденциозность получаемых результатов (оценка отражает только мнение тех, кому задача зачтена; общее мнение игроков неизвестно).

Вопрос о предоставлении права на голосование только решившим задачу достаточно неоднозначный.
С одной стороны:
- решившие задачу имеет наиболее полное представление о ней (знают и условие, и ответ), тогда как нерешившие могут судить о задаче лишь по формулировке;
- у нерешивших может возникнуть желание проголосовать против только потому, что они не могут решить задачу.
С другой стороны:
- лишение значительной части игроков права голоса приводит к нерепрезентативности получаемых оценок, особенно по сложным задачам с небольшим числом зачтенных ответов (такие задачи решают преимущественно те, кому они нравятся, поэтому итоговая оценка оказываются завышена);
- если человеку не понравилась задача и он не хочет ее решать, мы об этом никак не узнаем (даже если таких игроков большинство).

Итак, вопрос ко всем: как бы вы предложили усовершенствовать систему голосования?
Это касается всего: названия, дизайна, перечня пунктов, правил допуска к голосованию, методики подсчета итоговой оценки и т.п. Желательно, чтобы новая система оценок удовлетворяла следующим требованиям:
1. Компактность (места на сайте очень мало).
2. Понятность (любому игроку должно быть интуитивно понятно, за что именно он голосует).
3. Достаточное количество градаций оценок, при этом назначение каждого варианта оценки должно быть понятно.
4. Объективность итоговой оценки (чтобы итоговая оценка давала наиболее точное представление об интересности задач для игроков и целесообразности нахождения ее на сайте).
Пользователь в офлайнеКарточка пользователяОтправить личное сообщение
Вернуться в начало страницы
+Ответить с цитированием данного сообщения
 
Ответить в эту темуОткрыть новую тему
Ответов
Sunday
8.1.2011, 12:42
Сообщение #2


солнечный
****

Группа: Администраторы Braingames
Сообщений: 4 633
Регистрация: 24.7.2010
Из: Украина г. Львов
Пользователь №: 20 314



Все, наверное, согласятся, что есть веселые/интригующие условия, обычные и просто скучные/непонятные. Мнение пользователей узнаем только в комментариях. Поэтому было бы, неплохо сделать "СИМПАТИИ" для ВСЕХ игроков, причем дать три варианта (например):
- прикольно
- нормально
- ацтой

biggrin.gif
А для решивших сделать 5-бальную "ОЦЕНКУ РЕШИВШИХ":
5 - экстаз от решения!!!
4 - ух ты, даже не думал =)
3 - интересная задачка
2 - не интересная задачка
1 - "в топку"

Ведь иногда, решив задачку, хочется просто кричать от удовольствия, какая она клевая, а есть только...


--------------------
You are the only one, who creates your reality ©
Пользователь в офлайнеКарточка пользователяОтправить личное сообщение
Вернуться в начало страницы
+Ответить с цитированием данного сообщения
snav
10.1.2011, 11:09
Сообщение #3


Kорифей
****

Группа: Модераторы
Сообщений: 4 135
Регистрация: 13.4.2008
Из: Россия
Пользователь №: 7 457



Sunday
Мне кажется, что делать две разные системы оценок для решивших и всех - слишком хлопотно. Да и решившим голосовать дважды - тоже не в кайф. На мой взгляд, всё-таки система голосования должна быть одной и доступной для всех.

Для учета мнения решивших, предлагались два разных подхода:
1. Голос решивших засчитывать с большим весом.
2. Отображать двойную статистику оценок - по всем и только по решившим, например: 4.2/4.9.
Правда, во втором случае будет путаница, где какая оценка.
По этой причине более оптимальным, наверно, является вариант 1.

Минусы обоих вариантов - придется пересчитывать оценку при каждом зачете и отзыве зачета. Так что главный вопрос, стоит ли овчинка выделки: так ли уж необходим особый учет мнение решивших или ограничиться общей оценкой?

---------------

Насчет балльности. Мне тоже кажется, что 5-балльная шкала все-таки оптимальна. Она хорошо всем знакома со школы, так что смысл каждой оценки интуитивно понятен:
5 - отличная (максимальный восторг)
4 - хорошая (понравилась, но не сильно)
3 - удовлетворительная (посредственная)
2 - плохая
1 - очень плохая

Кнопки с цифрами занимают мало места, поэтому их легко разместить на странице. К сожалению, текстовые значения (отличная, хорошая и т.д.) подписывать негде.
Пользователь в офлайнеКарточка пользователяОтправить личное сообщение
Вернуться в начало страницы
+Ответить с цитированием данного сообщения
idler_
10.1.2011, 12:50
Сообщение #4


Лентяй
*****

Группа: Администраторы Braingames
Сообщений: 8 665
Регистрация: 22.4.2007
Пользователь №: 211



QUOTE(snav @ 10.1.2011, 11:09) *
Мне кажется, что делать две разные системы оценок для решивших и всех - слишком хлопотно. Да и решившим голосовать дважды - тоже не в кайф. На мой взгляд, всё-таки система голосования должна быть одной и доступной для всех.

Систему оценки можно делать одну, а уже нам не сложно выбрать решил человек задачу или нет.
Конечно, каждый человек мнение по задаче может менять после решения, да и вообще в любой другой момент.

QUOTE(snav @ 10.1.2011, 11:09) *
Минусы обоих вариантов - придется пересчитывать оценку при каждом зачете и отзыве зачета. Так что главный вопрос, стоит ли овчинка выделки: так ли уж необходим особый учет мнение решивших или ограничиться общей оценкой?

А что если пересчёт статистики делать раз в сутки?

QUOTE(snav @ 10.1.2011, 11:09) *
Кнопки с цифрами занимают мало места, поэтому их легко разместить на странице. К сожалению, текстовые значения (отличная, хорошая и т.д.) подписывать негде.

А если сделать два больших пальца вверх, один вверх, два/один вниз и нечто среднее: кулак или вопрос?


--------------------
Я - человек-простой
Пользователь в офлайнеКарточка пользователяОтправить личное сообщение
Вернуться в начало страницы
+Ответить с цитированием данного сообщения
snav
10.1.2011, 14:16
Сообщение #5


Kорифей
****

Группа: Модераторы
Сообщений: 4 135
Регистрация: 13.4.2008
Из: Россия
Пользователь №: 7 457



QUOTE(idler_ @ 10.1.2011, 12:50) *
А если сделать два больших пальца вверх, один вверх, два/один вниз и нечто среднее: кулак или вопрос?

Тоже была такая мысль. Даже пытался как-то нарисовать два пальца. Но ничего приличного не получилось (но, может, кто-то сумеет). smile.gif
С пальцами также не совсем понятно соответствие между нажатой кнопкой и итоговой усредненной оценкой. Для числовых значений 1,2,3,4,5 соответствие с средней оценкой более наглядно.

QUOTE(Sunday @ 10.1.2011, 13:12) *
А если сделать смайлики? А при наведении на них будет выплывать подсказка с надписью

Могу ошибаться, но вроде бы всплывающие подсказки не везде работают.
Пользователь в офлайнеКарточка пользователяОтправить личное сообщение
Вернуться в начало страницы
+Ответить с цитированием данного сообщения

Сообщения в этой теме
snav   Оценка задач пользователями   28.11.2010, 11:44
Sunday   Все, наверное, согласятся, что есть веселые/интриг...   8.1.2011, 12:42
impas   Из серии объять необъятное. Поставьте счетчик по i...   8.1.2011, 16:25
snav   Sunday Мне кажется, что делать две разные системы ...   10.1.2011, 11:09
idler_   Мне кажется, что делать две разные системы оценок ...   10.1.2011, 12:50
snav   А если сделать два больших пальца вверх, один ввер...   10.1.2011, 14:16
Sunday   Sunday Мне кажется, что делать две разные системы ...   10.1.2011, 13:12
Sunday   С пальцами также не совсем понятно соответствие ме...   10.1.2011, 14:59
idler_   Игрок видит симпатии задачи, например 5.4 и 5 вари...   10.1.2011, 15:17
Sunday   5 вариантов оценки задачи в виде смайлов/пальцев н...   10.1.2011, 15:11
Sunday   Уже в ступоре :blink:Первый смайлик - оценка 5, н...   10.1.2011, 15:29
snav   Видите ли, смайлики слишком крупные и слишком ярки...   21.1.2011, 19:47
Loban   Скажите, пожалуйста, как может нравиться или не нр...   5.5.2011, 12:28
snav   Скажите, пожалуйста, как может нравиться или не нр...   7.5.2011, 15:49
Loban   Да нет, давайте все-таки оценивать задачу целиком...   10.5.2011, 14:59
Kips   Я против попсятины со смайлами, пальцами, звездочк...   5.5.2011, 12:47


Ответить в эту темуОткрыть новую тему
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0 -

 



- Упрощённая версия Сейчас: 27.7.2025, 2:44
Яндекс.Метрика