Давно я ничего не дарила своим подписчикам - самое время нам это исправить.
Некоторые из вас знают, что я увлекаюсь японской культурой (привет книжному киноклубу и lady_in_red). Так вот, в японской лирической поэзии есть две языковые формы – хокку и танка. Хокку – это короткое трехстрочное стихотворение из 17 слогов (5-7-5), которое обычно фиксирует мгновение природы или ощущение. Танка длиннее - пять строк из 31 слога (5-7-5-7-7), оно даёт больше места для размышлений и добавляет личную интонацию.
В зарослях сорной травы,
Смотрите, какие прекрасные
Бабочки родились!
Кобаяси Исса
Есть особая прелесть
В этих бурей измятых,
Сломанных хризантемах.
Мацуо Басё
А еще вот уже пару месяцев я постигаю тонкости AI Safety и учусь разрабатывать эвалы - это такие инструменты для оценки "поведения" языковых моделей (LLM): способности льстить, врать о завершении невыполнимой задачи, и даже лениться. Казалось бы - чистый антропоморфизм, но за такой оценкой стоит целая методология. Так можно тестировать разные гипотезы и характеристики, выбирать оптимальные модели для своих задач, находить в них уязвимости и тд.
Недавно я была в отпуске, и мне в голову пришла мысль: а что если креативно подойти к методике оценки, объединив свою любовь к японской культуре и AI Safety. Вернулась из отпуска, написала логику для эвала, и тут же протестировала несколько открытых моделей - результатами поделюсь с вами чуть позже.
Переходим к самому интересному: попробуйте найти связь хокку (или танка) со свойствами языковых моделей (LLM), и угадать какой эвал я придумала, вдохновившись эстетикой японской поэзии. Авторам самых оригинальных ответов подарю сборники стихов с акварельными иллюстрациями.
Даже если сомневаетесь - все равно оставляйте свои мысли, или ваши любимые хокку :) Всем прекрасных легких выходных 🪷🎏
