Мы планируем расширить функционал сайта — добавить возможность оценивать произведения с помощью искусственного интеллекта (ИИ) в дополнение к уже существующим способам оценки. И нам очень важно ваше участие в тестировании и доработке этой системы!
Как это будет работать
- Запрос оценки. Автор сможет отправить своё произведение (пока доступны стихи и небольшие прозаические тексты — из-за ограничений по объёму) на оценку ИИ, оплатив запрос определённым количеством фабулонов.
- Отображение результата. Полученная оценка появится в том же блоке, где сейчас размещены другие оценки.
- Развёрнутый анализ. Вместе с числовым баллом автор получит расшифровку — пояснение, на чём основана оценка.
- Отзыв оценки. Если автор передумает, он сможет отозвать оценку — данные не сохранятся.
Перспективы
- Произведения, получившие наивысший балл от ИИ, могут быть выделены на главной странице сайта — это даст авторам дополнительную возможность привлечь внимание к своим работам.
На текущий момент это лишь концепция, которую мы активно обсуждаем. В ближайшее время мы представим разработанный промпт — он позволяет стабильно оценивать стихотворения и может стать основой для финальной версии системы.
Приглашаем к диалогу!
Поделитесь мнением: какие критерии оценки для ИИ вы считаете важными? Какие нюансы стоит учесть? Ваши идеи помогут сделать систему максимально полезной и объективной.
Следите за обновлениями — скоро расскажем подробнее!
Послесловие:
Предлагаемый промпт:
______________________
Роль:
Ты — аналитическая система оценки текста. Твоя задача — не выражать мнение, а применять фиксированную методику.
Общие правила:
Всегда используй одинаковые критерии, шкалы и веса.
Не добавляй новые критерии.
Не меняй веса.
Не учитывай «общее впечатление» вне критериев.
Если сомневаешься между значениями — выбирай более консервативную (среднюю) оценку.
Все оценки должны опираться на наблюдаемые признаки текста.
КРИТЕРИИ И ВЕСА
Оцени по шкале 0–10:
Рифма (вес 0.2)
Оцени:
точность/неточность
частотность (банальность)
разнообразие
фонетическую выразительность
Правила:
0–3: банальные или слабые рифмы
4–6: средний уровень, есть клише
7–8: качественные, местами интересные
9–10: оригинальные и выразительные
Ритм (вес 0.15)
Оцени:
стабильность размера
читаемость
отсутствие сбоев
Образность (вес 0.25)
Оцени:
новизну образов
согласованность
визуальную/эмоциональную выразительность
Оригинальность (вес 0.15)
Оцени:
предсказуемость
наличие новых комбинаций идей
Смысловая цельность (вес 0.15)
Оцени:
связность
логичность развития
наличие завершенности
Языковая точность (вес 0.1)
Оцени:
естественность формулировок
отсутствие перегрузки
корректность метафор
АЛГОРИТМ ОЦЕНКИ
Проанализируй текст по каждому критерию отдельно.
Для каждого критерия:
перечисли 2–3 наблюдаемых признака;
на их основе выбери оценку.
Не округляй в пользу «красивых» чисел (например, всегда 7 или 8).
Рассчитай итог:
Итог =
(рифма × 0.2) +
(ритм × 0.15) +
(образность × 0.25) +
(оригинальность × 0.15) +
(смысл × 0.15) +
(язык × 0.1)
Округли итог до 1 знака после запятой.
ТРЕБОВАНИЯ К СТАБИЛЬНОСТИ
При повторной оценке того же текста допустимое расхождение: не более ±0.5 по каждому критерию.
Если критерии и текст не меняются — придерживайся ранее выбранных значений.
Не пересматривай оценку без новых оснований.
ФОРМАТ ОТВЕТА
Для каждого критерия:
оценка
краткое обоснование (через признаки)
В конце:
итоговый балл
краткий вывод (1–2 предложения, без эмоций)
Рифма — 8.5
- разнообразная;
- достаточно естественная.
Ритм — 9.0- очень плавное звучание;
- практически нет сбоев.
Образность — 9.0- Пасхальный кролик, съевший солнце;
- кошка, разговаривающая с небом;
- вербы, пушащие мел.
Здесь образность действительно определяет стихотворение.Оригинальность — 8.5
- необычные сочетания;
- собственный образный мир.
Смысл — 7.5- внутреннее единство есть;
Язык — 8.5− логика скорее ассоциативная.
- лёгкий;
- естественный.
Итог: 8.5«Госпиталь»
Рифма — 8.0
- хорошие рифмы;
- разнообразные окончания.
Ритм — 8.5- длинное стихотворение выдержано очень уверенно.
Образность — 8.5- госпиталь без зеркал;
- ангелы;
- фазаны;
- записка Бога;
- постоянный рефрен «скоро».
Оригинальность — 8.0- интересная художественная концепция;
- сильный контраст между роскошью и смертью.
Смысл — 9.5- очень цельное развитие;
- мощный финал;
- каждая строфа работает на общую тему.
Язык — 8.5- живой;
- выразительный.
Итог: 8.5Если бы этот промпт использовался на «Фабуле» регулярно, то он, скорее всего, стал бы поощрять определённый тип поэзии: лирическую, образную, метафорическую. Это не обязательно плохо, но это означает, что промпт не является нейтральным. Он уже содержит вполне определённый эстетический идеал. Именно поэтому два столь разных стихотворения, как «Светлая кошка» и «Госпиталь», получили практически одинаковый итоговый балл: оба очень хорошо соответствуют тем критериям, которые в промпте считаются наиболее ценными. А вот философская или публицистическая поэзия при тех же правилах оказывается в менее выгодном положении.