Форум Anivisual закрыт. Вы не можете создавать новые темы или писать ответы. Форум будет работать в режиме архива.
Пользователи · Поиск по форуму · · · Регистрация

Архив - только для чтения
Anivisual Jam #3: обсуждение

ezraven

#31
Главное пожелание - пересмотр системы оценивания.
Честно, в прошлый раз она себя показала плохо.
У нее есть очень большие проблемы, которые портят впечатления от конкурса.
ncry

stop_control

#32
Абсолютно согласен с предыдущим оратором.
Считаю что половину оценки должно составлять соответствие теме.
Не соответствует, значит ноль вместо 2.5 балла из 5

Это конечно если тема важна. В противном случае можно выложить новеллу на любую тему и никак это не будет отмечено.

И вторую половину  2.5 балла уже поделить по составляющим: звук, графика, сценарий и прочие составляющие.
«Иди пожалуйся своей мамочке»

Забава

#33
ezraven, какие проблемы? Можно подробнее? Что именно вам не понравилось и что вы предлагаете?

Очень интересно, без шуток.

FreQl

#34
ezraven, ну так как до начала джема уже совсем ничего, то думаю вряд ли кто-то будет что-то менять... к сожалению..

Admin

#36
Я вот тоже не понимаю. Ну с соответствием понятно, но меняться это не будет по одной простой причине — соответствие теме максимально субъективная оценка, которая легко может "потопить" новеллу только если кому-то покажется, что тема не соответствует. Я видел не раз такое, когда у одной новеллы кто-то ставил 1 за соответствие, а кто-то 5. То есть банально от того что кто-то будет ставить 4 и 5 будет сильно меняться общая оценка.

Понятное дело, что если новелла вот прям совсем не по теме будет, но будет идеальной — то всё равно она получит 4 балла и не станет победителем.

Единственная альтернатива которую я могу предложить — это просто галочка "соответствует теме или нет" но тоже спорно, конечно.

Вообще странно что никто ничего не говорил после второго джэма о таком.

Mawrak

#37
Уж лучше звуки и музыку отделить от тех части типа наличия багов и проблем в интерфейсе. Очень разные вещи, на самом деле. С темой все норм, сомневаюсь, что будет такая ситуация, где значительная часть людей просто решила делать не по теме так как оценка незначительна.

FreQl

#38
Забава, как минимум хотел бы поменять возможность ставить оценку просто так, на ставить оценку с отзывом обязательным. Никого не обязую писать эссе, достаточно писать краткий отзыв почему плохо или хорошо (указывать на причину почему снизил балл), а то мне или другим авторам влепили просто так единиц и сиди думай почему, даже не знаешь в чём проблема... 

Ternox, можно было бы и галочку, но да тут уже субъективно, лучше уж пусть за тему будет пятибалка)

IhorOF

#39
Проблема джема не в том, что восприятие темы субъективное и баллы за нее ставить можно как угодно, а то, что некоторые личности выставляли эти самые баллы руководствуясь совершенно другими вещами. Об этом уже писали Терноксу, но это было проигнорировано в угоду того, что "кому тогда это все будет нужно". Если в этом году ситуация повторится, то наверняка никому. Система того, что конкурсанты оценивают работы друг друга до безобразия хлипкая.
Пишу плохо, но получше некоторых

Забава

#40
FreQl, так люди и снижают в конкретной категории. Можно сделать вывод.

У меня как раз был тот случай, о котором Тернокс написал: кто-то ставил за тему 5, а кто-то 1. Это просто говорит о том, что кто-то понял, а кто-то нет. Голосование же народное. 

Вы хотите, чтобы голосовать было так же сложно, как и делать новеллы? Тогда оценок от разных людей станет меньше. Все будут отстреливаться по минималке и всё. 

Не знаю. По-моему, и так большинство оставило комментарий. Зачем мучить тех, кто не любит писать, или не может выразить свою мысль.

Eretik13

#41
Полностью довольна нынешней системой оценивания.
Автор Двадцатого года (Jam1), сценарист Тянущегося времени (Jam2), Отпусти и забудь (Jam3), Прощай, мы видимся с тобой в последний раз... (Jam4) и просто хороший человек.

Sonozaki_Shion

#42
Ув. Freql и не менее ув. lhorOF!
Судя потому что Вас уже полгода бомбит, Вам, как умным Магомедам, нужно не пытаться идти к горе, т.е. пытаться менять правила Джема, а ждать, когда она сама к Вам приплывёт.
Отвечал: онлайн-консультант сайта ЦитатыОмарХайама.ру, Шион Сонодзаки
Сообщение отредактировал Sonozaki_Shion - Вторник, 13/Июл/2021, 20:16
Эта битч сварит тебе вкусный борщ

IhorOF

#43
Уважаемая любительница чужих ног Sonozaki_Shion, я рад, что наш прошлый разговор положительно повлиял на вас и вы стараетесь общаться более вежливо. Но я, как пользователь платформы, в праве озвучивать какие-то мысли по поводу конкурса, в котором мне и другим пользователям сайта предстоит участвовать.  Я не бомблю, а негодую, так как голосование в большинстве своем проходило через одно место и закончилось тем, чем закончилось. Я не имею претензий к победителям, их работы достойны. Но это не отменяет факта, что система оценивания дно.
Пишу плохо, но получше некоторых

Sonozaki_Shion

#44
Дорогие ребята.
Сейчас попытаюсь сказать одну простую истину. Если правила конкурса Вас категорически не устраивают и Ваше негодование ни на что не влияет, то, прежде чем дальше негодовать, нужно понять, что из места, где Ваши дарования не могут оценить по достоинству, НУЖНО БЕЖАТЬ. А не сидеть и негодовать дальше. Это форма фетиша похлеще ног.
Отвечал: воспитатель детского сада, Сион Монодзаки
Сообщение отредактировал Sonozaki_Shion - Вторник, 13/Июл/2021, 20:32
Эта битч сварит тебе вкусный борщ

ezraven

#45
Хорошо, я поясню свою позицию тем, что мне больше всего не понравилось в прошлый раз. Я был и участником и частично принял участие в оценивании новелл.

Во-первых, не все участники прочитали все новеллы, а значит, как минимум, не смогли оценить непрочитанные новеллы. Есть и те, кто не будет читать все, в любом исходе, но я пытался успеть прочитать все, но физически просто не смог осилить и вдуматься во все. Оценка должна быть выставлена после адекватного прочтения работы, а честно, прочитав подряд 5-6 новелл чувствуешь, как в голове от прочитанного образуется каша и что-то приближенное к объективному оцениванию становится почти невозможным.
Этот пункт относится к тому, что из-за увиличения сроков (хвала богам 10 дней и я не умру, как в прошлый раз), скорее всего, увеличется колличество новелл, которые дойдут до конца. И далее я ставлю под сомнение пункт об приоритете голосов над рейтингом (Считаю, что вес должен быть у обоснованных оценок, а не проставленных без комментариев). Просто по той причине, что если каждый участник не будет оценивать каждую работу (что тоже технически очень трудно реализовать), то получается, проекты, от уже известных разработчиков, те, что будут чаще выпадать на главную (привет вкр) и те которые будут наверху списка в архиве (сам по нему читал и соответственно, самые нижние не успел) просто напросто будут иметь приоритет по оцениванию и количеству оставленных оценок. Очень классно будет видеть 10 оценок против 30. 

Во-вторых, то, что я упомянул в прошлом пункте - оценка без комментария. Я считаю, что любая оценка должна быть обоснована, хоть чем-то. Одна из важных причин, почему люди участвуют в джеме - получение фидбэка, а не голой статистики, которую можно придумать в своей голове и без посторонней помощи. Было очень классно видеть оценку 2 и не понимать за что, хотя другие люди ставили по этому пункту 4+. Я не могу воспринимать такую оценку всерьез, потому что она выглядит как простая попытка сбить рейтинг. Так же, как и внезапная 5 там, где стоит 1. Всякое бывает, понимаю, кто-то может разглядеть донность\шикарность чего-то, что не видят остальные, но если человек оставит комментарий с пояснением в таком случае, будет лучше. НО я понимаю, что проставить всем новеллам оценки и отписать комментарии - это физически так же трудно как и прочитать вообще все. Так что считаю, что оценка с комментарием и поправкой на средний балл - вполне может считаться решением. 
Что важно, думаю, что обязательным пояснением нужно обязать пункты "Общее впечатление" и "Соответствие теме конкурса" по той причине, что это максимально размытые пункты, которые невозможно подогнать под список критериев для оценивания, но которые значительно влияют на конечную оценку. Человек должен объяснить для создателей новеллы, почему их новелла не понравилась или почему оставила неприятные впечатления, почему несоответствует теме, почему человек не увидел посыл, а так же почему ему все понравилось и что впечатлило. Это наиболее важно, потому как на этих пунктах очень легко изменить другим людям оценку, даже не напрягаясь. 

В-третьих. Пункты. Дело в том, что пункты не в полной мере отражают наполнение. 
Как в пункте "текст" можно оценивать одновременно и грамотность, и креативность, и персонажей, и сюжет? Что если текст плохой, но сюжет крутой? А если история тухлая, но персонажи тащат ее? Очень много противоречий и тут скорее можно поставить оценку общего впечатления, а не реальную оценку новеллы. Просто - понравилась история и персы - закрыл глаза на ошибки и докрутил оценку, текст был крутой, но сюжет и персы бесили - снизил, так или что? 
К пункту "Исполнение" те же вопросы: звуки классные, но музыка отстой и текст читать невозможно, но новелла запускается. Или запускается через раз, а все остальное на высшем уровне, но она ведь не запускается с первого раза, что делает ее прочтение очень неудобным и почти невозможным, так что это заслуживает 1 из-за одной технической погрешности?
Визуал. Одаааа, мой камень. Как можно сравнивать взятые бесплатные работы, которые человек даже не подобрал к общему сеттингу и работы, нарисованные специально к джему? Но в то же время, если нарисовано плохо, но кто-то сумел привести стоковые фотки к общему стилю и благодаря этому новелла выглядит шикарно? Оценивать конкретную новеллу невозможно, потому что в этом вопросе всегда идет сравнение не только того, насколько все это вписывается в общую картину, но и того, насколько это заслужено в отношении с другими работами и затраченными усилиями. Несколько пунктов, которые бы дали более точную оценку, вполне могли бы разрешить дилемму. 

Подытожив, мои предложения - расширить пункты, добавив подпункты для некоторых категорий и обязать участников оставлять комментарии для пояснения своей оценки. Возможно, из-за увиличения подпунктов, придется сделать 100 бальную систему или добить сотые доли. А так же, хоть немножко отслеживания для тех, кто проставляет другим новеллам странные оценки для средней оценки. В прошлый раз у некоторых новелл полетели необоснованные двойки (опять же без подписи, хотя мне кажется, когда ты ставишь 2 и ниже тебе всегда есть ЧТО сказать), которые испортили общий балл.
Поиск: