Ставим лайки, если хотим фулл пдф на канале)

Итак, сегодня у нас в меню:

Robert (Munro) Monarch

Human-in-the-Loop Machine Learning

Active learning and annotation for human-centered AI

Manning Publications (2021)

NLP и диалог Жижека и Вернера Херцога

https://www.openculture.com/2022/11/an-ai-generated-never-ending-discussion-between-werner-herzog-and-slavoj-zizek.html?fbclid=IwAR3edp8pAFsCE2zaOe769s4Lm1gIqtoacSiih7ysOt-5Kd1BVWHT38mdHO8

Пожалуй, очень удачная реализация диалоговой системы, которая эмулирует диалог Славоя Жижека и Вернера Херцога.

Подобного рода решения ярко демонстрируют пространство digital humanities, а еще служат важным примером использования диалоговых систем в будущем: бесконечные диалоги фигур интеллектуального пантеона само по себе может быть «Кругом Первым» в преисподней Данте(последний поместил всех античных философов в ад и заставил целую вечность вести беседы)

А если без шуток: хороший и интересный пример навыка для Алисы или другой умной колонки.
Пример с сайта: https://infiniteconversation.com/

Сайт-визитка создателя https://www.jamez.it/

А что в СССР? Советские интерфейсы

Советский проект домашнего персонального компьютера СФИНКС. Создан по заказу Государственного комитета по науке и технологиям и разработанным Дмитрием Азриканом в сотрудничестве с А. Колотушкиным и В. Гессеном.

В Москве выставлялся в новом здании Третьяковки в прошлом году

Алгоритмоцентрический дизайн. UX для дата-сцайнтистов

Разметка данных — это процесс маркировки необработанных данных, чтобы они стали учебными данными для машинного обучения. Большинство специалистов по данным скажут вам, что они тратят гораздо больше времени на курирование разметки и разметчиков данных, чем на создание моделей машинного обучения.

В отличие от академического исследования в промышленности более распространено улучшение производительности модели путем разметки большего количества данных. Особенно когда природа данных меняется со временем и использование нескольких новых наборов/критериев разметки может быть гораздо более эффективным, чем попытка адаптировать существующую модель или алгоритм к новой области данных.

Словарь юного HCI и одна свежая книжка
И бездушные вещи, издающие звук, свирель или гусли, если не производят раздельных тонов, как распознать то, что играют на свирели или на гуслях?
1-е послание Коринфянам

У умных колонок типа Алисы или Маруси есть любопытный пользовательский сценарий о котором продакт-менеджеры нехотя признаются в кулуарных разговорах. Пользователи часто просят поставить звук, шум леса или плеск воды — такой вот странный сценарий становится понятным, если учесть, что взрослые часто рассказывают детям сказки и просят умную колонку создать аккомпанемент истории.
«Пошел Иван-царевич в лес и уууу лес завыл». Этот сценарий хорошо известен и некоторым сотрудникам рекламных агентств, я видел такие креативные спецпроекты, имулировавшие советские диапозитивы и пластинки со сказками для детей. О чем идет речь?

Сонификация — это использование неречевого звука для передачи информации или восприятия данных. При этом есть тонкие различия от обычных аудиосистем, сонификация предполагает некоторый уровень абстракции наших данных.

Свежая книга 2020 года Sonification Design: From Data to Intelligible Soundfields полна умных и интересных замечаний о истории использования звуков, начиная с древнего Египта и средневековых органов, и сложных отсылок к кантианству и теории игр. Для более практичных товарищей — модель озвучивания Python для программирования не в графическом интерфейсе пользователя. The Sonipy Framework предлагает не только воспринимать отображение компилятора на слух, но и использовать своеобразную аудиостанцию для программирования.

А еще это социалочка и включение слепых людей в новую цифровую экономику. Книжка в следующем посте

Книги: Designing Obama

Ого, а что я тут нашел — пособие по визуальным решениям в Government Relations, книга дизайнеров Барака Обамы с айдентикой и гайдлайном всех креативов для выборов кандидата в президенты США.
Вообще, это очень идеологический проект, конечно. Важно было показать как изменяются креативы и решения плакатов на местах, от штата к штату, показать эволюцию рекламных буклетов в ходе предвыборной гонки.

Президентская кампания Обамы в 2008 году была новшеством в американской политике и американском дизайне. Впервые кандидат использовал искусство и дизайн, чтобы объединить американский народ - запечатлеть его выборы визуально. Идеи и изображения изменялись,
тестировались и появлялись на каком-то определенном этапе выборов.
Ну и да, афроамериканский кандидат использовал уличное искусство для целей агитации.

Рубрика зацепился взгляд: впервые в политических целях попробовали использовать изображение кандидата в стилистике Minecraft (она вышла как раз в 2009).

Странные интерфейсы. Пятничное

Sidekick — это проект, разработанный творческим союзом НАСА и Microsoft для виртуальной помощи астронавтам с использованием гарнитуры дополненной реальности Microsoft HoloLens. Сейчас используется на международней космической станции.

Главной особенностью такого космического гаджета был режим, когда анимированные иллюстрации отображаются поверх объектов при взаимодействии с ними члена экипажа. Это позволяло и обучать членов экипажа, и всегда иметь визуальную инструкцию по взаимодействию с инструментами. Куда удобнее бумажных мануалов.

Пишут, что попасть на орбиту гаджеты не могли очень долго — у Илона Маска взрывались ракеты Falcon 9 и уничтожали весь груз для станции.

Алгоритмоцентрический дизайн. UX для дата-сцайнтистов. Ч.3

Человеческие ошибки в обучающих данных могут быть более или менее важными, в зависимости от варианта использования. Если модель машинного обучения используется только для выявления трендов в поведении потребителей, вероятно, ошибки не будет иметь значения критического значения. Но если алгоритм, на котором работает Тесла не видит 1% пешеходов из-за ошибок, полученных из плохих обучающих данных, результат будет катастрофическим. Некоторые алгоритмы могут обрабатывать небольшой шум в обучающих данных, а случайный шум даже помогает некоторым алгоритмам стать более точными, избегая переобучения. Но человеческие ошибки, как правило, не являются случайным шумом; следовательно, они, как правило, вносят непоправимую погрешность в обучающие данные. Ни один алгоритм не может пережить действительно плохие обучающие данные.

Для простых задач, таких как бинарные метки для объективных задач, статистика довольно простая для решения. Но для субъективных задач или даже объективных задач с непрерывными данными не существует простой эвристики для выбора правильной метки. Подумайте о критической задаче создания обучающих данных, поместив ограничивающую рамку вокруг каждого пешехода, распознанного беспилотным автомобилем. Что, если у двух аннотаторов немного разные поля? Какая рамка правильная? Ответ не обязательно либо эта рамка, либо среднее значение двух коробок.

Ключевым фактором является квалификационная рабочая сила: обучение и специализация разметчиков повышают качество алгоритмов, а информация, полученная от опытной рабочей силы, может помочь в разработке модели совместно с экспертами в предметной области. Лучшие модели создаются в результате конструктивного постоянного сотрудничества между машиной и человеческим интеллектом. Так, некоторые разметчики медицинских данных работают под руководством профессиональных медиков, анатомов и хирургов. Например, https://imerit.net/industries/medical-ai/

Инопланетяне. Рубрика «Друг утят». И немного не про интерфейсы, но про «Что там в СССР?»

Первая международная конференция по внеземным цивилизациям и проблемам контакта с ними состоялась в сентябре 1971 года в Советской Армении. Конференция собрала специалистов в самых разных областях — астрономии, физики, радиотехники, информатики, химии, биологии, лингвистики, археологии, антропологии, социологии, истории и криптоанализа — и представляет собой международную плеяду ученых. , Крик, Дайсон(который сфера), Дрейк, Шкловский(который астроном), Гинзбург, Платт, Минский(который из МИТ), Амбарцумян и Моррисон. Конференция была организована совместно Национальной академией наук США и Академией наук СССР. Участники пересмотрели и обновили свои материалы, и в результате получилась блестящая и захватывающая дискуссия, затрагивающая многие из наиболее важных вопросов в науке и делах человека. Некоторые из самых увлекательных взаимодействий представлены в дословных расшифровках дискуссий.

Особое внимание уделено следующим вопросам: множественность планетных систем во Вселенной, зарождение жизни на Земле, возможность жизни на других космических телах, зарождение и развитие техногенных цивилизаций, проблемы поиска разумных сигналов или свидетельства астроинженерной деятельности, а также проблемы и возможные последствия установления контакта с внеземными цивилизациями.

вот, например, считали химические элементы в составе астрономических объектов в составе Солнечной системы

Видеодемо первых технологий взаимодействия Человек-Машина

Пока все ставят новые поколения ИИ-сгенерированных аватарок уместно вспомнить как и кто перезентовал самые повседневные цифровые технологии, которые стали частью современного мира, насколько они стали уместны и привычны

https://jackrusher.com/classic-ux/

Сайт с подборкой видеодемо из золотой эпохи HCI: от первых браузеров до звука и стилусов, гипертекста и ноу кода. Ссылки ведут на ютуб канал ACM SIGCHI (Группа специальных интересов по взаимодействию компьютера и человека), оказывается там каждый день публикуется очень годное по HCI и артефактам.

Автор - бывший сотрудник Bell Labs

Запахи и вкусы в UX и этом вашем HCI

Нет более дискриминированного органа чувств, чем запахи. Особенно когда мы говорим о запахах в этих ваших модных дисциплинах эргономики, интерфейсов и опыте пользователя. Оцифровка запахов и вкусов уже идет, но сколько еще пройдет времени, прежде, чем технология выйдет на «плато»? Обо всем по порядку.

В Малайзии есть уникальная исследовательская организация Imagineering Institute. Само слово Imagineering обычно определяется, как «воплощение креативных идей в практическую форму». А вообще слово зарегистрировано в качестве товарного знака Disney. В общем, креативный инжиниринг, индустрия развлечений и вот это вот все. Последние десятилетия Imagineering Institute занимается исследованиями природы запахом и вкусов для задач HCI. Горизонт планирования будущего и стратегическая цель таких экспериментов — мультисенсорный интернет, интернет, который подобно нашей нервной системе обрабатывает и собирает все виды информации из всех органов чувств.

Обоняние и вкусовая нервная система еще и сами имеют высокую устойчивость и зависимость(волшебная сила привычки!), а еще речь иногда идет о специфических нарушениях вкуса и запахов. Первые digital taste interface поэтому должны иметь куда более тонкие настройки, чем первые GUI, когда они только возникли. Вторым вызовом для исследователей вкусового взаимодействия стала температура — терморецепторы играют зачастую большую роль в нашем восприятии вкуса, поэтому параллельно тестируются и термические интерфейсы вкуса. Особенно успешными были запуски термальных интерфейсов, которые симулировали «сладкий» вкус. Выглядит пугающе: нагреваем язык, чтобы почувствовать вкус печенья.

У запахов ситуация скорее обратная: их надо отделять от запахов внешней среды при помощи специальной сенсорамы.

А где почитать обо всем этом? Следующим постом выложу книгу «Virtual Taste and Smell Technologies for Multisensory Internet and Virtual Reality»

О социальных сетях и почему глубина рынка еще не исчерпана

На фоне сложных и непростых новостей кризиса BigTech появляются и гаснут сервисы, которые позиционируют себя как социальные медиа. Скептики могут заверить, что не полетят, но это очень условная оценка, которая не основана на расчетах рынка.

https://www.halcyonmaps.com/#/map-of-the-internet-2021/

Очень люблю эту картинку-артефакт, он меняет восприятие размеров социальных сетей и медиа.

Визуализация включает в себя несколько тысяч самых популярных веб-сайтов, представленных в виде отдельных «стран», которые сгруппированы вместе с другими веб-сайтами аналогичного типа или категории, образуя десятки различных кластеров, регионов и континентов, раскинувшихся по всей карте, таких как «новостные сайты», «поисковые системы», «социальные сети», «электронная коммерция», «развлечения для взрослых», «обмен файлами», «компании-разработчики» и многое другое.

Относительные территориальные размеры веб-сайтов на главной карте основаны на их среднем рейтинге веб-трафика Alexa в период с января 2020 г. по январь 2021 г

Видно, что есть огромное число социальных медиа - о которых, мы даже не слышали, и которые, тем не менее, просто гигантские. Обратите внимание, например, на русские Пикабу и аналоги.

Алгоритмоцентрический дизайн. UX для дата-сцайнтистов, часть III

Итеративный процесс в системе машинного обучения с участием человека. Сначала (вверху) вы аннотируете случайную выборку немаркированных элементов, чтобы отложить их в качестве оценочных данных. Затем вы помечаете первые элементы, которые будут использоваться для обучающих данных (посередине), также начиная со случайного выбора. После этого вы начинаете использовать активное обучение (внизу) для выборки элементов с низкой достоверностью или выбросов.

Пальцевое исчисление. Manual knowledge

Одно из самых ранних способов исчисления и вычислений, основанных на внешних сущностях можно считать тело человека. Это достаточно древняя мысль, но давайте обратимся к фактам и визуальным артефактам истории, которые могут помочь лучше представить ситуацию возникновения подобного рода изобретений. В далеком нортумбрийском монастыре Беда Достопочтенный в 725 году публикует трактат «Об исчислении времен», в котором, наряду с обсуждением теней, лунного света и солнцестояний, изложил метод определения того, когда Пасха приходится на тот или иной год. Это может показаться тривиальным упражнением, но для христиан того времени сложно представить более важную проблему. Важно отметить, что для подсчета Пасхи только в 19 веке изобрели внятный алгоритм (лично Гаусс рассчитывал, который формула Гаусса).

Беда Достопочтенный использовал материальный калькулятор, который есть у пользователя все время: пальцы.

Чтобы найти дату Пасхи, которая выпадает после весеннего равноденствия в Северном полушарии, в воскресенье сразу после первого полнолуния, нужно считаться с планетарными ритмами, которые Беда нанес на карту. Он заметил, что пять пальцев содержат четырнадцать суставов плюс пять ногтей — всего девятнадцать ориентиров. Это число отслеживает метонический цикл: сколько лет требуется Луне, чтобы вернуться в ту же фазу в тот же календарный день. Суставы обеих рук, взятые вместе, за вычетом ногтей, дают вам двадцать восемь ориентиров: приблизительную длину полного солнечного цикла в годах. Таким образом, как заметил Беда, руки могут «легко удерживать циклы обеих планет». Помимо этой базовой установки, он оставил детали неясными и не удосужился включить иллюстрацию. (Эта техника, как писал Беде, «лучше передается живым голосом, чем работой пишущего пера».) Но его система, известная как computus digitorum или просто computus нашла благодарную аудиторию. Он был широко распространен и адаптирован, и на протяжении веков оставался краеугольным камнем христианского учения.

Картиночки прилагаются