1. Предоставление контекстуальной информации (Shared Contextual Information):
Этот метод предполагает предоставление человеку контекстной информации о среде принятия решений, которую использует ИИ для формирования рекомендаций.

2. Объяснения алгоритмов (Local Explanations):•Описание: Этот метод фокусируется на предоставлении локальных объяснений, которые показывают причины конкретного решения, предложенного ИИ в данный момент времени.
Цель: Помочь человеку понять, почему ИИ сделал определенное предложение, основываясь на определенных показателях или характеристиках задачи.

Преимущества:
•Объяснения помогают людям лучше понимать логику работы ИИ в конкретной задаче.
•Повышает доверие к системе и уверенность в том, что ее рекомендации обоснованы.

Метод объяснений алгоритмов (Local Explanations) описывает технику предоставления пользователю объяснений относительно того, почему система искусственного интеллекта (ИИ) приняла определенное решение или предложила конкретную рекомендацию в конкретной ситуации. Эти объяснения не раскрывают всю внутреннюю логику работы ИИ, а фокусируются на объяснении одного конкретного решения, принятого ИИ в данный момент времени.


Как это работает:
Когда ИИ делает рекомендацию (например, "продолжить миссию" или "отменить ее"), система показывает пользователю краткое и понятное объяснение того, что именно привело к этому решению. Такое объяснение может включать:
Какие основные факторы (параметры) задачи повлияли на решение.
Какие значения этих факторов были критическими для рекомендации.
Какая информация считается наиболее релевантной для текущей ситуации.

Например:

Если речь идет о системе управления полетом космического аппарата, то локальное объяснение может звучать так: "ИИ рекомендовал отменить миссию потому что скорость слишком высокая и угроза перегрева велика".Такое простое и понятное пояснение позволяет человеку быстро понять основную причину рекомендации и принять более осознанное решение — согласиться с ИИ или нет.

Пример использования метода в контексте статьи:
В эксперименте участники принимали участие в управлении посадкой зонда на Марс при помощи рекомендательной системы (ИИ). Когда участникам показывали траекторию полета зонда и давали рекомендации от ИИ о том, следует ли запускать посадку или отменить её (например из-за неблагоприятных условий), им также предоставляли локальное объяснение – короткое текстовое сообщение с указанием причин решения ИИ:
Если ИИ решил запустить посадку зонда несмотря на высокую скорость входа в атмосферу Марса, то участнику могли показать следующее сообщение: "ИИ считает возможным выполнить посадку несмотря на высокую скорость ввиду допустимых уровней тепловой нагрузки и уверенности в успешном приземлении."Таким образом участник лучше понимал логику за предложением системы ИИ.

Статья какая-то сложная, и не очень понятно, какие именно системы они там изучали, все-таки. Но идея внедрять тултипы и хинты с объяснением почему конкретно мне показывается конкретно это видео в ТикТоке выглядит перспективно.


The Effect of Education in Prompt Engineering: Evidence from Journalists
https://arxiv.org/abs/2409.12320
Журналистов учили промтам, журналисты не выучили промты. Это, конечно, показатель, что не все так просто с промтами и навыков промт-инженерии.


Ритуалы с ручкой и бумагой во взаимодействии в сфере услуг: сочетание высоких технологий и высоких технологий во встречах по финансовому консультированию
https://arxiv.org/abs/2409.09462

Консультативные услуги — это ритуальные встречи между экспертом и консультируемым клиентом. Чуткие и теплые отношения между этими двумя сторонами были определены как ключевой аспект успешной консультативной встречи. Чтобы облегчить контактное взаимодействие, консультанты установили ритуалы, которые подчеркивают уникальный, индивидуальный характер каждого клиента и каждой отдельной встречи. Одновременно такие организации, как банки или страховые компании, внедряли инструменты и технологии для использования в консультационных услугах, чтобы обеспечить единообразный опыт и одинаковое качество для всех филиалов и консультантов. В результате консультанты оказались зажатыми между сложными и высокотехнологичными аспектами консультационных услуг. Эта статья представляет систему, которая учитывает сложные ритуалы и практики и сочетает их с высокотехнологичным сотрудничеством

Снимали на камеру как крутят ручку и рисуют картинку финансовые консультанты, и как это можно заменить. Хорошо для застройщиков и мб для банков.


Let's Influence Algorithms Together: How Millions of Fans Build Collective Understanding of Algorithms and Organize Coordinated Algorithmic Actions
Давайте вместе влиять на алгоритмы: как миллионы фанатов выстраивают коллективное понимание алгоритмов и организуют слаженные алгоритмические действия
https://arxiv.org/abs/2409.10670

В декабре 2020 года Weibo, одна из крупнейших социальных сетей Китая, создала отдельный раздел трендов для развлечений после того, как сообщества фанатов неоднократно манипулировали алгоритмом трендов платформы для продвижения знаменитостей и развлекательных тем. Это изменение было направлено на то, чтобы не допустить, чтобы развлекательный контент затмевал более актуальные публичные новости и значимые события в основном списке трендов. Аналогичным образом, в 2023 году ведущая музыкальная потоковая платформа Южной Кореи Melon изменила свой алгоритм ранжирования, чтобы исключить приглушенные воспроизведения, которые фанаты K-pop использовали для искусственного повышения рейтингов своих кумиров. В 2022 году эта манипуляция принесла примерно 33,2 миллиона долларов дохода. Авторы определяют это явление как «коллективное алгоритмическое действие, управляемое фанатами», когда крупные фанаты организуются и мобилизуются для стратегического изменения алгоритмических выходов в социальных сетях, стремясь повысить видимость своих любимых кумиров.

FolkTheories of Algorithm. Народные теории алгоритмов — это объяснения, созданные пользователями, которые помогают людям понять, как работают алгоритмы, и влияют на них. Пользователи разрабатывают различные народные понимания того, как работают алгоритмические системы и производят различные результаты, учитывая, что эти системы остаются непрозрачными для пользователей. Исследования изучили, как пользователи разрабатывают эти теории посредством своего прямого взаимодействия с алгоритмами, алгоритмических сплетен и социальных взаимодействий в своих сообществах. Благодаря этим средствам пользователи приходят к пониманию того, что информация и взаимодействия в социальных сетях управляются алгоритмическими системами, и даже узнают некоторые подробности о том, как работают эти алгоритмы. Однако они все еще не знают конкретных механизмов, лежащих в основе алгоритмов.

"В этом исследовании коллективных алгоритмических действий фанатов мы определяем «основных фанатов» как тех, кто обладает организационной властью в сообществе фанатов, обладает значительной репутацией и напрямую влияет на организацию коллективных действий фанатов" Напротив, «обычные фанаты» — это те, кто участвует в коллективных алгоритмических действиях, но не участвует напрямую в принятии основных решений или формировании общей стратегии действий; их основная роль заключается в выполнении задач в соответствии с указаниями. Более конкретно, мы провели углубленное двухлетнее этнографическое исследование с 2021 по 2023 год, сосредоточившись на взаимодействии с 43 основными фанатами в Китае. Исследование включало не только наблюдение за этими 43 китайскими основными фанатами, но также включало отслеживание и анализ повседневной деятельности их соответствующих фан-клубов и более широких общих групп фанатов, все с их согласия.

Результаты:
Алгоритмический труд — распространенное явление среди фан-сообществ, в основном с участием фанатов, совершающих преднамеренные действия с помощью алгоритмов платформы для повышения видимости своих кумиров. Это включает в себя увеличение количества репостов в социальных сетях, просмотров видеоплатформ и рейтингов музыкальных платформ. Эти действия часто повторяются и в фандоме называются «алгоритмическим трудом». В китайском фандоме фанаты иногда называют такое поведение «работой с данными», поскольку они напрямую работают с различными формами данных, такими как репосты и просмотры, в то время как алгоритм остается невидимым. Авторы называют это «Все для нашего кумира»: признание необходимости коллективного алгоритмического действия.

Существует обмен народными алгоритмами, идеями народных алгоритмов и координацией относительно того, как по мнению, населения это все должно работать

Я обычно не публикую пиар или рекламу, но сегодня речь пойдет о сервисе немодерируемых тестирований Pathway из России, которых не так много и которые можно использовать как замену сервисам типа Maze или Useberry. Особенно, если закупаете решение из компаний внутри страны и связаны корпоративными обязательствами. Отдельное спасибо техслужбе поддержки, которая меня выслушивает с моими хотелками, очень оперативно( спасибо Ianina, если читаешь это!)

Я помню, как ребята заходили ко мне с решением еще для ГазпромМедиа в 2022 и с этого момента утекло много воды, а продукт стал куда лучше, появилась запись видео, ну и вообще стало все стабильнее и круче.

Итак, сегодня ребята запустили глобальную версию платформы на Product Hunt — для команд, которые проводят исследования из других стран и на зарубежных респондентах. Мне кажется, что можно поддержать сервис

https://www.producthunt.com/posts/pathway-2

Языковые модели как банковский фидуциарный продукт

https://youtu.be/ui7kRlJMqjM?si=y3cqUHGYFTFAfK-r

Эндрю Лоу, из MIT , о котором я писал ранее https://xn--r1a.website/gulagdigital/2441, рассказывает про использование больших языковых моделей для анализа финансовых отчетов

Хорошо анализируют новости и отчеты других компаний, сами по себе языковые модели могут остановить иррациональное поведение пользователей, сделать их более рациональным - не вестись на покупку мусорных акций, не попадаться в панику на бирже. LLM также могут помочь с мошенниками. Фидуциарная языковая модель, которая управляет активами за пользователя - это круто, но проблема в том, что предвзятость и глупость языковой модели никуда не девается. Т.е. спасет от мошенника, мб уведомит о том, что не стоит на панике принимать решения вокруг новостей, но все остальное наполнено предвзятостью, просто потому что это языковая модель, которая научена на куче буллшитных текстов, есть влияние культуры.

Опять таки, я убежден, что Лоу глубоко не случайно говорит о нарративах - это оммаж к вполне конкретной работе Роберта Шиллера, которая предполагает, что вся экономика теперь носит характер нарративной, ориентируясь на сигналы СМИ и медиа. https://xn--r1a.website/gulagdigital/1589 (книга уже, правда, на русском)

"LLM может мгновенно проанализировать числовые данные, а затем вплести их в рассказ, который говорит, что, возможно, сегодня фондовые рынки значительно упали. Это означает, что вмешается ФРС, будет паника среди группы инвесторов, и это означает, что некоторые активы будут распроданы, а другие активы станут намного более ценными.

Если вы держите корпоративные облигации, это, скорее всего, сильно пострадает, казначейские векселя будут очень хороши, но я бы подождал еще три-пять недель, прежде чем вы сделаете что-то радикальное, потому что в ходе истории, если вы посмотрите на похожие ситуации, такие действия временны, и все нормализуется. Это тот тип повествования, который может предоставить LLM, который недоступен, когда вы просто смотрите на целую таблицу чисел. Поэтому со временем, я подозреваю, что LLM будут гораздо лучше сплетать эти повествования, а также смогут описывать некоторые слабые стороны своих повествований, и где вы, возможно, захотите использовать собственное суждение, чтобы сделать выбор для своего портфеля"

Вопрос о том, кто будет готовить эти LLM оставим открытым, но чувствую, что в этот черный ящик положат пару троянских коней от зеленого, красного и желтого банка. Ну и вообще, изменение роли математики и цифр несет в себе риски - риски того, что описания будут привлекать физиков-инвесторов, и они будут терять деньги.

Нарративная экономика. Новая наука о влиянии вирусных историй на экономические события.

"Понятие «нарративы» уже давно укрепилось в науке, но в экономике оно по-прежнему играет небольшую роль – именно поэтому я и написал книгу о нарративной экономике. На ее обложке была эпидемическая кривая, о которой мы так много говорим в последние месяцы. Идея была в том, что мир, в котором мы живем, во многом подчинен влиянию эпидемий: иногда это эпидемии вирусов или болезней, но чаще всего это эпидемии нарративов, которые меняют то, как люди воспринимают реальность.

Большинство людей не реагируют на аналитические дискуссии – они предпочитают истории, повествования, с которыми они способны себя ассоциировать и которые отражают их собственную вселенную. Нарративы рождаются в разговорах – это истории, которые люди держат в голове, чтобы поделиться со следующим собеседником, и таким образом они способны распространяться подобно эпидемиям.

Я полагаю, что нарративы очень важны для экономической науки именно потому, что способны менять то, как люди думают, и, как следствие, то, какие экономические решения они принимают. Многие рыночные бумы сложно объяснить объективными экономическими показателями: если проанализировать, как менялась рыночная стоимость акций на протяжении 1870–2013 гг., и сопоставить ее с объективной оценкой, рассчитанной на основе их дивидендной доходности, мы увидим значительные расхождения. То есть вряд ли можно говорить, что в рыночную стоимость акций заложена справедливая оценка их доходности участниками рынка"

Как всегда - в комментариях

Цифровой геноцид ревью: Что нового в UX? Гонзо-новости UX и HCI статей
The Evolution of Emojis for Sharing Emotions: A Systematic Review of the HCI Literature
https://arxiv.org/abs/2409.17322

Не самое благодарное дело - обзор статьи с обзором литературы, но статья горячая 🧐🌈😈 эмодзи

С распространением мгновенных сообщений и социальных сетей эмодзи стали важными артефактами для выражения эмоций и чувств в компьютерном общении. По данным консорциума Unicode, 92% мирового онлайн-населения используют эмодзи. В отчете Adobe Research 2022 U.S. Emoji Trend Report 91% респондентов заявили, что эмодзи облегчают самовыражение, и 75% из них чувствовали себя более связанными с людьми, которые используют эмодзи . Хотя эмодзи начинались как набор простых значков в 1990-х годах, они быстро расширялись в разнообразии и сложности из-за развития смартфонов и растущего числа социальных сетей в мире . Кроме того, растущая персонализация и включение мультимедийных компонентов превратили эмодзи в новые интерактивные объекты, такие как наклейки, аватары и мемы . Таким образом, эмодзи значительно изменили и улучшили онлайн-коммуникацию за последние десятилетия и стали культурным элементом сами по себе

В результате пользователи могут передавать различные тона и эмоции, которые могут быть утеряны или их трудно выразить с помощью обычного текста. Кроме того, эмодзи используются в очень персонализированных способах, где они могут брать на себя несколько функций в зависимости от отношений между их пользователями. Люди могут создавать собственное значение из эмодзи, чтобы создать «общую уникальность», где эмодзи может полностью менять свое значение в зависимости от того, кому он отправлен, а также от отношений отправителя с этим человеком. Эмодзи также стали более настраиваемыми, позволяя пользователям выбирать разные тона кожи, пол и характеристики тела, чтобы представить себя более аутентично. Из-за этих настраиваемых и нетекстовых свойств платформы социальных сетей и приложения для обмена сообщениями адаптировали эмодзи для создания наклеек и реакций, увеличивая их и без того широко распространенную повсеместность, а также предоставляя простой способ их использования. Эмодзи теперь способны вызывать радость у пользователей и поддерживать более осмысленное общение в более широком диапазоне пространств

Поэтому изучение внешнего вида эмодзи, их функциональности и способа общения будет иметь основополагающее значение для понимания их дизайна, разработки и использования в будущем. В этой статье мы стремимся ответить на следующие исследовательские вопросы:

• RQ1: Как эмодзи эволюционировали, чтобы лучше передавать эмоции пользователей?
• RQ2: Как изменения в эмодзи влияют на их способность передавать эмоции?

Чтобы ответить на вопросы исследования, авторы провели систематический обзор литературы

Они обнаружили, что корпус вращался вокруг двух разных тем: (1) улучшение того, как пользователи находят и выбирают эмодзи для представления своих эмоций, и (2) использование эмодзи новыми способами и цифровыми материалами для улучшения их

Согласно теориям медиабогатства(без понятия, что это за теория), эффективность технологий онлайн-коммуникации зависит от количества и качества передаваемой информации . В то время как взаимодействие лицом к лицу позволяет людям использовать свои тела, другие материалы и пространство для общения, та же информация не может быть передана через среды с низким уровнем насыщенности, такие как документы, заметки или памятки.

Согласно Emojipedia, эмодзи выглядят по-разному на разных платформах, поскольку «художественное оформление зависит от шрифтов, включенных в систему» ​​. Это может отражать различные философии дизайна и художественные стили, а также удовлетворять потребности клиентов в уникальности, чтобы привлечь их на свою платформу, а не на конкурентов. Интеграция эмодзи в основные технологические платформы увеличила их всемирную популярность. В 2011 году Apple добавила клавиатуру эмодзи в свою мобильную операционную систему (iOS), что позволило пользователям iPhone легко получать доступ к эмодзи и использовать их . Google последовала этому решению и интегрировала эмодзи в Android. Широкое распространение этих операционных систем помогло продвинуть эмодзи в массовое использование. Более того, платформы социальных сетей, такие как Facebook, Twitter, WhatsApp и Instagram, приняли и продвигали эмодзи.

В последние годы ученые обсуждали эволюцию эмодзи в другие формы артефактов коммуникации, в первую очередь в стикеры.
Стикеры— это пиктограммы «изображения, обычно большего размера, чем графические смайлики и эмодзи, предлагаемые в качестве тематических наборов в интерфейсах связи приложений для обмена мгновенными сообщениями и социальных сетей, часто организованные во вкладки и персонализированные коллекции» . В то время как эмодзи можно использовать в сочетании с текстом или другими носителями, обеспечивающими контекст , стикеры можно отправлять только как единственное сообщение, без предоставления дополнительного контекста в сообщении

Итак, что там по статьям, что получили в результате анализа литературы?

Подключение пользователей к Emoji
Обогащение эмодзи посредством выражения
Рекомендации по использованию эмодзи
Эмодзи как артефакты пользовательских данных
Связь тела с эмодзи (как раз вот тут физиология и эмулирование лицо к лицу)
Использование дополненной реальности с эмодзи
Цвет и форма
Эмодзи в контексте


5.1 RQ1: Как эмодзи эволюционировали, чтобы лучше передавать эмоции пользователей?

Корпус показывает, что эмодзи эволюционировали от иконок текстовых сообщений до более сложных мультимодальных форм. Эти модальности включают AR/VR/MR, биосигналы, тактильные ощущения и форму речевых пузырей. Эти подтемы имеют мало общего с эмодзи как иконками на основе Unicode и больше связаны с ролью, которую эмодзи играют в качестве невербального коммуникативного маркера эмоций. Примечательно, что в указанных статьях часто проводились прямые сравнения или цитировались эмодзи в качестве вдохновения для представленных систем эмоциональной коммуникации. Таким образом, мы утверждаем, что обсуждаемые статьи представляют собой следующий шаг в эволюции эмодзи для эмоциональной коммуникации.

Cтатьи предполагают, что существует связь между объемом кастомизации и сложностью эмодзи. Связь между этими двумя не обязательно напрямую коррелирует. Как естественное развитие технологии, существует тенденция к большей кастомизации для эмоциональной коммуникации. Основные эмодзи по-прежнему
относительно ограничены в функциях по сравнению с системами, представленными в этом обзоре литературы. Возможности настройки эмодзи Unicode ограничены внешним видом, а кроссплатформенные эмодзи не являются копиями друг друга в точности. Некоторые статьи посвящены увеличению или уменьшению усилий кастомизации, необходимых для использования системы. Система, которая поддерживает более простой способ кастомизации, может снизить умственную нагрузку, связанную с ее использованием, и позволить пользователям больше сосредоточиться на содержании отправляемого сообщения, например, путем обнаружения сигналов от тела .
Однако система, которая намеренно требует больше усилий, может быть преимуществом, особенно подчеркивая личные усилия для большего коммуникативного эффекта . Подводя итог, можно сказать, что эмодзи превратились в разнообразный набор модальностей для повышения их способности передавать эмоции. Исследования в области AR/VR/MR, биосигналов и тактильных ощущений представляют потенциальное будущее эмодзи.

Эволюция концепций эмодзи
Тактильные эмодзи для доступности, медвеженок-аватарка, передающий эмоции пользователя удаленно, дополненная реальность

Итак, важная статья, которая скорее заставляет задуматься о границах применения новых технологий, я бы сказал, переход от атомарных к молекулярным подходам на основе данных при проектировании интерфейсов. Тарас описал интересную парадигму. Итак, у нас есть лоу-код платформа, которая работает как конструктор для создания дашбордов, данные связываются с интерфейсом, пользователь руками собирает кубики, чтобы отображать данные на экране

https://tbrizitsky.medium.com/rethinking-ui-building-in-appsmith-part-i-18bb08fa0232
https://tbrizitsky.medium.com/rethinking-ui-building-in-appsmith-part-ii-efe592f347f3

Вместо традиционного императивного подхода, где явно пользователю надо настроить многочисленные расположения виджетов, стилей и размеров - жестко закодированные тексты и виджеты. Это решает проблему того, что со временем такие небольшие ошибки только накапливаются и либо увеличивают затраты на обслуживание, либо заставляют приложения выглядеть непрофессионально.

Сборка всего из базовых виджетов увеличивает как изменчивость пользовательского интерфейса, так и затраты на строительство/обслуживание, в то время как наличие только больших блоков дает вам начальный прирост скорости, но вскоре дает сбой из-за отсутствия гибкости. Как и в случае с Lego: вы можете потратить дни на создание чего-то сложного и мощного из бесчисленных уникальных деталей дорогостоящего Technic или использовать Duplo и сделать детей счастливыми в кратчайшие сроки.

Получается, что, возможно, нужны еще более большие элементы дизайн-систем. Тарас здесь описывает фигуру некоего "младшего дизайнера", который экономит время и позволяет решать по-настоящему сложные задачи, но тут мб элемент автоматизации или покупки готовых виджетов из магазинов виджетов(рискну пофантазировать я)

Для исследователя в этой ситуации важно скорее всего тем, что кардинально уменьшается число ошибок и действий пользователя, все эти мелкие взаимодействия в условном GOMS. Возможно, что рекомендация в отчете исследования - проектировать для пользователей большие некастомизировающиеся паттерны покрывает большое число сценариев