Цифровой геноцид
5.21K subscribers
1.55K photos
13 videos
308 files
1.08K links
Наша миссия — быть проводником в мире современных интерфейсов, предлагая разработчикам, менеджерам и учащимся экспертизу в самых разных отраслях в области человеко-машинного взаимодействия самыми разными(и экстравагантными!) методами. Автора! @lilalogos
Download Telegram
Медицина, человек, космос

Для решения вопроса возможности работать в стрессовых ситуациях в методических приемах психологического отбора закладывается принцип воспроизведения той деятельности, тех условий, в которых предстоит работать человеку.

Чтобы понять способен ли человек работать в условиях эксперимента — надо понять, а может ли он работать, если воспроизвести стрессовые условия работы устройств. Такой подход к анализу труда оператора был особенно важен для тех авторов, которые трудились в советской авиационной и космической индустрии — целого поколения инженерных психологов и врачей для которых исследования стресса, монотонности, усталости оператора было связано с развитием военной индустрии и аэрокосмических технологий XX века. Остановимся на фигуре Федора Дмитриевича Горбова и его эпистемологических объяснений и описаний опыта пользователя.

После окончания войны молодой врач руководил службой психоневрологической экспертизы в Центральном научно-исследовательском авиационном госпитале в Москве, а затем возглавил психологическую лабораторию в Институте авиационной и космической медицины. Разрабатывал проблемы пространственных иллюзий у лётчиков в полете, возникновения у них пароксизмальных состояний. Обосновал методы психофизиологической тренировки. В 1953 г. защитил кандидатскую диссертацию, основным положением исследования стал факт, что работа в условиях помех приводит к нарушению предвидения как одного из важнейших качеств лётчика. В 1963 г. защитил докторскую диссертацию на тему «Пароксизмы при непрерывной деятельности». Горбов также входил в состав группы специалистов, осуществлявших отбор и подготовку первого отряда космонавтов, был ответственным за психологическую готовность кандидатов.

Обратимся к главной работе Горбова — “Психологический аспект труда оператора” в которой речь пойдет о тонкостях взаимодействия пользователя и устройств: каким качеством с точки зрения психологии труда должен обладать оператор летального аппарата, диспетчер или оператор? Надежностью - психологическое качество, которое определяет возможность работать в условиях стресса и, которая, является важной составной частью профессиограммы.

В связи с возможностью совершения ошибок в состоянии растерянности или полного отказа в работе операторов при развитии острых аффективных реакций в критических ситуациях в инженерной психологии возникла проблема надежности. Проблема надежности в настоящее время решается в основном в русле психологического отбора, в задачу которого входит изучение не только наличных качеств личности, но и потенциальных психических возможностей человека, его резервов в соответствии с профессиограммой. Таким резервом, в частности, является способность продуктивно работать в условиях эмоционального стресса.
Психологические аспекты труда операторов. М.: Медицина, 1975.
Не менее любопытен и традиционный для исторического и диалектического материализма референс - к классикам марксизма-ленинизма, которые выполняли определенный идеологический элемент работы. Основоположники диалектического материализма всесторонне обосновали и развили в своих работах значение труда в развитии человека и человеческого общества. В процессе труда люди преобразуют не только окружающую природу, но и самих себя. Но как бы «…различны ни были отдельные виды полезного труда, писал Қ. Маркс,- или производительной деятельности, с физиологической стороны это - функции человеческого организма, и каждая такая функция, каковы бы ни были ее содержание и ее форма, по существу есть затрата человеческого мозга, нервов, мускулов, органов чувств и т. д.»

Вследствие траты «человеческого мозга, нервов, мускулов» в процессе трудовой деятельности у человека возникают явления утомления или переутомления. Усталость и утомляемость интерпретируются как трата ресурса тела, даже, если угодно, пресловутая отчуждаемость о которой так много пишут культурные марксисты. Это любопытный историко-культурный феномен, который, впрочем, можно отнести к исторической реальности эпохи
👍91🥰1💋1
Горбов сидит на заднем фоне, за Гагариным. В этот момент он начальник лаборатории
в Государственном научно-исследовательском испытательном институте авиационной и космической медицины.
👍81💋1
Гонзо-обзоры статей: LLM и создание макетов при помощи Large Language Models, понятие UI грамматики
Exploring Mobile UI Layout Generation using Large Language Models Guided by UI Grammar

Грамматика пользовательского интерфейса – новый подход, который китайские товарищи предлагают для представления иерархической структуры, присущей пользовательскому интерфейсу. Целью этого подхода является руководство для LLM - чтобы повысить объяснимость и управляемость процесса генерации макета. Статья аффилирована с University of Notre Dame, Notre Dame, USA и Шанхайском университетом

Действительно датасеты пользовательского интерфейса существуют с конца десятых - авторы отмечают особенную роль датасета RICO, в котором собраны наборы экранов и интерфейсов мобильных приложений(https://www.semanticscholar.org/paper/Rico%3A-A-Mobile-App-Dataset-for-Building-Data-Driven-Deka-Huang/775f7845e4df2576762960943294bd28733e2046 ), который используется как для генерации интерфейса, так и для и ноукод приложений, насколько могу судить не очень используемыми в индустрии. Теперь эти датасеты заиграли новыми красками с выходом больших языковых моделей.

Большие языковые модели (LLM) для выполнения задач по моделированию пользовательского интерфейса посредством контекстного обучения и промтов в виде цепочки мыслей. Также некоторые исследователи провели автоматическое тестирование графического интерфейса, моделируя взаимодействие человека с графическим интерфейсом с помощью LLM.

Каргаран и др. ( статья Menucraft: Interactive menu system design with large language models https://arxiv.org/abs/2303.04496 ) исследовал проектирования меню пользовательского интерфейса с помощью LLM с помощью описаний на естественном языке намерений дизайнеров. Эти усилия продемонстрировали возможности LLM эффективно работать с пользовательскими интерфейсами на уровне промтов. Некоторые эксперименты также продемонстрировали конкурентоспособность по показателям оценки задач пользовательского интерфейса (по сравнению с человеком видимо)

Ключевая задача LLM для создания макетов связана с представлением иерархической структуры присущие элементам пользовательского интерфейса в процессе генерации.

“В ответ на эту проблему мы предлагаем грамматику пользовательского интерфейса — новый подход, который точно представляет иерархическую отношения между элементами пользовательского интерфейса. Этот подход служит руководить процессом создания LLM, тем самым делая поколение более структурировано и контекстуально приемлемо. С человекоцентрированной точки зрения мы обсуждаем, как включение грамматики пользовательского интерфейса обеспечивает промежуточный уровень представление, которое потенциально могло бы улучшить объяснимость и управляемость LLM в процессе генерации. Пользователи могут лучше понимать и управлять внутренними механизмами генерации LLM, просматривая и редактируя грамматику используется для получения окончательного результата”

Элементы пользовательского интерфейса на экране имеют иерархические отношения, что может быть отражено в принцип атомарного дизайна (Фрост, 2016), функций группировки инструментов проектирования пользовательского интерфейса, таких как Figma, и иерархий представлений Android. Некоторые предыдущие работы сгладили иерархические структуры элементов пользовательского интерфейса и уменьшили задач создания макета в предсказание плоской последовательности элементы и соответствующие ограничивающие рамки. Сохранение иерархических отношений между элементами пользовательского интерфейса и использование их - улучшит качество генерации макетов

Грамматика UI определяется как набор производственных правил для описание отношений родитель-потомок между элементами пользовательского интерфейса в рамках иерархической древовидной структуры данного экрана. Каждое производственное правило имеет форму A → B, где A представляет собой родительский элемент пользовательского интерфейса, а B представляет собой последовательность одного или больше дочерних элементов.
👍3💋1
Используя это определение проблемы, разрабатываем наш промт с
целями:
1. Использование формата пользовательского интерфейса, который будет понятен и понятен специалистам LLM для создания макетов
2. Инкапсуляция иерархических отношений между элементами пользовательского интерфейса с помощью грамматики пользовательского интерфейса.
3. Удаление лишней невизуальной информации, которая
несущественно для создания макета
Исходя из этих целей, мы решили использовать JSON в качестве данных.
формат для представления пользовательских интерфейсов при создании макета пользовательского интерфейса.

JSON, кстати, и для чат-ботов используется, замечу 🙂
💋1
UI Grammar
💋1
LLM без UI грамматики

Для создания макетов без использования грамматики пользовательского интерфейса (рис.
2), мы сначала случайным образом выбираем экран из CLAY (библиотека веб-элементов https://clayui.com/), чтобы использовать его в качестве пример нашего контекстного обучения (т. е. одноразового подсказки) и исключить его из генерации, чтобы предотвратить утечку данных. Для каждого экрана пользовательского интерфейса в CLAY мы получаем соответствующее описание на естественном языке из SCREEN2WORDS(https://paperswithcode.com/dataset/screen2words). в качестве описания нашей цели генерации. Чтобы контролировать результат генерации и получать макеты только со значимым элементов пользовательского интерфейса, мы использовали семантически значимый список 25 меток элементов пользовательского интерфейса, определенных в CLAY и включенных в наше приглашение как ограничение.
💋1
LLM c грамматикой

Вместо того, чтобы просить LLM напрямую сгенерировать окончательный макет экрана мы описываем создание макета пользовательского интерфейса как двухэтапный процесс: сначала мы выводим на экран список грамматик пользовательского интерфейса, затем объясняем, как мы можем создать пример макета пользовательского интерфейса, используя предоставленная грамматика пользовательского интерфейса.
🔥4💋1
Сравнение результатов с использованием грамматики и без нее
👍3💋1
Работа, интерфейсы рабочих мест и природа рутины. Андон

Андон — термин, который изначально обозначал в японском бумажный фонарь, а в бережливом производстве термин обозначает систему, которая сигнализирует о проблемах качества или нарушения стандартов. Изначально бумажные фонари использовали на первых японских фабриках. В отличие от обычных систем типа светофора андон может включать цвета для обозначения особенных состояний, например, дополнительный “синий” подает сигнал “нехватка материалов”. Фонарь обычно указывает место проблемы, а также может предоставить краткое описание. Современные системы могут включать текст, графику или аудиоэлементы.

Смысл механизма андона в том, чтобы рядовой оператор мог остановить процесс и вмешиваться в работу на линии, не дожидаясь ответа из офиса. Некоторые платы автоматически выключают производство, чтобы избежать масштабирования проблемы на всей производственной линии.
💋1
Однажды Сакити Тоеда разработал для своей бабушки механический ткацкий станок. Однако главная проблема механического станка состояла в том, что если рвалась нить, то вся ткань сотканная после обрыва, представляла собой брак. А остановить станок и прекратить производство брака можно было только если увидеть, что нить оборвалась. Размышляя о том, как решить эту проблему, Сакити Тоеда понял, что нужно наделить станок способностью обнаруживать проблему и самостоятельно останавливаться. Так Сакити Тоеда разработал систему андон
🤩2💋2
Вышла! Количественные методы для User Experience от Криса Чапмана из Amazon Lab
https://www.linkedin.com/in/cnchapman/

Чего клевого? Кажется, что первое человеческое описание MaxDiff, примеры кода для него на R, попытки отсроить количественные методы от других ролей в исследованиях и классических DS и маркет рисерчеров.

https://quantuxbook.com/code.html где лежит пакет с R для прикладных задач

choicetools is an R package in development with utility functions for simulating conjoint surveys, estimating models, working with MaxDiff data, doing market simulation, and other tasks.
7💋1
Chris_Chapman,_Kerry_Rodden_Quantitative_User_Experience_Research.pdf
5.2 MB
Quantitative User Experience Research: Informing Product Decisions by Understanding Users at Scale
6💋1
Первая схема синеэстетических визуализаций в истории

Фрэнсис Гальтон опубликовал самую первую цветную таблицу синестетических визуализаций в своих «Исследованиях человеческих способностей и их развития» 1883 года, но начинал он с исследования числовых линий. Числовая линия — это ментальная карта чисел, автоматически и непреднамеренно появляющаяся, когда человек, ею обладающий, думает о числах. Числа появляются в определенных местах в пространстве, и эти места могут быть различными у разных индивидуумов.

В апреле 1879 года Гальтон получил письмо от своего друга Джорджа Паркера Биддера, лондонского адвоката, чей отец был известным гением расчета. Письмо включало диаграммы его визуализаций чисел, месяцев года и исторического времени, представленных как преемственность английских королей, что побудило Гальтона разработать анкету, которую он разослал сотням научных и литературных коллег в Старом и новом свете. Выводы можно посмотреть на этой табличке
👍3🔥3💋1
Пятиминутка постмодернизма о технологии

Надо сказать, что иногда и французские философы бывают весьма своевременны и убедительны. Например, книга "Теория дрона". Книга аж 2013 года, не так давно на русском.

Вот в чем может заключаться теория определенного оружия:
определить, что подразумевает владение им, попытаться понять,
какой эффект оно производит на тех, кто его использует.
Как на врага, который является его мишенью, так и на сами
отношения между ним и тем, кто это оружие применяет.

Поэтому главным вопросом будет следующий: какое воздействие оказывает дрон на саму военную обстановку?
Что он привносит в отношение к врагу, а также в отношение
государства к своим гражданам? Это разнообразные процессы,
которые имеют весьма серьезные последствия. Пока их можно
набросать в виде динамических зарисовок, не выдавая
за конечный результат. «Показать механизм вооруженного противостояния», то есть провести стратегический анализ
« социальных отношений, которые оно вызывает», — такова
будет in fine программа критической теории вооружений.

Это оружие развивает и производит радикализацию уже существующих способов дистанционной войны, приводя к тому, что сам бой практически исчезает. А это приводит к глубокому
кризису самого понятия войны.

Главная проблема в следующем:
если «война при помощи дронов» больше не является собственно войной, то какому «режиму насилия» она соответствует?

«Война без риска», наиболее совершенным орудием которой, вне всякого сомнения, является дрон, вызывает кризис базовых метаюридических принципов права на убийство во время войны. Но фоне этой фундаментальной дестабилизации формируются проекты нового определения суверенного права на жизнь и смерть. Речь идет о создании права на «целевое убийство», которое на практике равнозначно полному пересмотру права военных конфликтов.

Шамаю Грегуар
Теория дрона
👍6🤔2👎1🔥1💋1
Метафоры стресса и HCI
“Вот я повелеваю тебе: будь твёрд и мужествен, не страшись и не ужасайся; ибо с тобою Господь Бог твой везде, куда не пойдёшь.”
И. Навина 1:9.

Одна из проблем стресса — это как описать и объяснить «перенагруженность» пользователя? Нет никакого консенсуса относительно возможностей, которые «обрабатывают» информацию. В целом, в литературе описывается некоторые умственные ресурсы. Только вот теория не может объяснить, что это за ресурсы на самом деле.

И тут есть две метафоры:
Метафора энергии и метафора структуры.

Под структурой чаще всего понимали память, сравнивая с памятью компьютера.

Но большинство ранних теорий ресурсов, включая оригинальный взгляд Канемана рассматривают ресурсы как энергию — когнитивные способности тратятся на решение каких либо задач, подобно электричеству или товарам на рынке. Стресс — это ситуация, когда потребность в ресурсах превышает доступное предложение. Красивая метафора, но оставляющая много пространства для спекуляций.
Более того, в термодинамических аналогиях ресурсы понимаются как топливо и в стрессовых условиях количество доступного топлива недостаточно для удовлетворения задач. Но не существует единого мнения относительно вместимости такого резервуара или наличия многочисленных резервуаров, в которых хранятся только ресурсы, специфичные для вида деятельности. Один бензин для чтения, а второй бензин, например, для задач по коммуникациям — это тоже странная метафора.

В чем проблема?

Проблема использования небиологических метафор для представления биологических систем не может учитывать уникальные свойства живых организмов. Например, обучаемость и адаптивность, способность к саморегуляции. Поэтому стоит избегать такого рода метафор - особенно когда мы говорим о взаимодействии пользователя с интерфейсом.

Приведем классический стрессовый фактор - проверка на качество продукции. Термин пока-ёке был применен Сигэо Синго в 1960-х годах для промышленных процессов, ориентированных на предотвращение человеческих ошибок. Заводские рабочие при сборке небольшого переключателя часто забывали вставлять нужную пружину под одну из кнопок переключателя. После реинжиниринга рабочий выполнял задачу в два этапа, сначала подготовив две требуемые пружины в заполнитель, а затем вставив пружины из заполнителя в коммутатор. Когда пружина оставалась в заполнителе, рабочие знали, что они забыли вставить ее и могли легко исправить ошибку.

Описывая другой случай использования Синго описывает отношение рабочих к этому инструменту:
«Когда одного из рабочих спросили, что он думает по этому поводу, он ответил на местном сленге: «Пока-ёкэ? О, это анки!», что означает «весело». В данном случае устройство пока-ёкэ, работающее по методу шагов-движений, выполняет функцию самоконтроля и освобождает рабочих от необходимости обращать внимание на выбор деталей арматуры.»

Здесь мы видим, что пользователя можно увлечь работой, что ставит интересные вопросы для теоретиков “топлива” и траты умственных ресурсов.
👍5💋1
Блог Сураба Мангрулкара и Саяка Пола о том, как создать своего личного второго пилота на основе собственного кода. Они описывают, как создали, обучили и настроили своего личного второго пилота под названием HugCoder. Статьи октября 2023 года, свежак

Ничего не понятно, но очень интересно и перспективно - тренировка собственного ассистента как персонального помощника - заезженная тема любителей экзокортексов

https://huggingface.co/blog/personal-copilot?fbclid=IwAR1vVRKJ-XfMwUWoFsfDgnsw372za8WkqeF3KQK4pf29B0Z9hVpOqAm8u98
👍1🔥1💋1
Медицина, человек, космос. Часть 2
Продолжение:
https://xn--r1a.website/gulagdigital/2352

А как определяется стресс? Горбов, конечно же, врач, ему не очень интересны когнитивные и психологические проблемы: клинические критерии заявляются в качестве основных для определения стресса. Известно, что изменения в состоянии крови, так же как и реакции со стороны высшей нервной деятельности, сердечно-сосудистой и других систем, являются «зеркалом», в котором отражается стрессовое состояние организма. Горбов обращается к исследованиям А. И. Киколова, который в своих исследованиях установил, что за 30 мин до работы у диспетчеров аэропорта уровень сахара в крови повышается до 100 180 мг.

Такое повышение уровня сахара в крови в литературе того времени оценивается как предстартовое стрессовое состояние. Этот уровень сахара держится у диспетчеров до конца рабочей смены. Аналогичные изменения имеются и у железнодорожных диспетчеров. C большим потоком информации сталкиваются в своей работе режиссеры и ассистенты студии телевидения, работающие за пультом управления, Им одновременно приходится следить за несколькими изображениями, держать непрерывную микрофонную связь с операторами, актерами и другими участниками работы, следить за точностью передачи.

Концепция “остаточного” утомления и доминанты

Советский физиолог Алексей Ухтомский выступал как один из видных теоретиков работы, усталости, утомления: такие факторы как активный отдых и ночной сон, в большинстве случаев, полностью снимают ощущение усталости. Однако в ситуациях, когда возвращение к исходному уровню не наблюдается и человек продолжает работать, возникает явление аккумуляции. Остаточное утомление продолжает накапливаться, что в дальнейшем приводит к развитию переутомления, и продолжение работы становится невозможным.

Это любопытная и интересная концепция в которой можно выделить некоторые моменты философии Ухтомского - богослова и невролога, предполагающего наличие специфической части биологии поведения человека, которая отражает теорию безусловных рефлексов Павлова. ​​По А. А. Ухтомскому, доминанта — это возникающий очаг возбуждения в нервной системе, создающий готовность организма к определенной деятельности при одновременном торможении других рефлекторных актов. Это временно господствующий рефлекс, который в данный момент подчиняет себе и направляет другие рефлексы и работу нервной системы в целом. При этом раздражения из различных источников уже не вызывают обычных для них реакций, а лишь усиливают деятельность этого доминирующего в данный момент центра.

Ухтомский явно стоит в одном ряду c большой интеллектуальной традицией позитивизма второй волны или махизма - движения столь же мощного, сколько и опасного для советской идеологии: за несколько лет до выхода работ Ухтомского Владимир Ленин пишет работу «Материализм и эмпириокритицизм», которая направлена против Богданова, врача и сторонника Маха и Авернариуса, лидера отдельного крыла в партии большевиков, которое могло противостоять марксизму с позиций позитивизма.

Как формируется доминанта в таком медицинском позитивизме? Для иллюстрации Ухтомский ссылается на Льва Толстого! Обратимся к его работе “Доминанта как рабочий принцип нервных центров”. Впервые опубликована в Русском физиологическом журнале, т. VI. в. 1­3, 1923.

Первая стадия
Доминанта возникает под влиянием внутренней секреции (например, полового созревания) и внешних раздражителей. В качестве поводов для подпитки доминанта привлекает самые разнообразные раздражители. Вспомним, как видит Андрей Болконский Наташу Ростову на первом балу в Петербурге: "Он любовался на радостный блеск ее глаз и улыбки, относившейся не к говореным речам, а к ее внутреннему счастью... вы видите, как меня выбирают, и я этому рада, и я счастлива, и я всех люблю, и мы с вами все это понимаем, - и еще многое, многое сказала эта улыбка".
👍2💋1
Вторая стадия
Это стадия образования условного рефлекса по И.П. Павлову, когда из прежнего множества действующих возбуждений доминанта выделяет группу, которая для нее особенно "интересна", - идет выборка раздражителя для данной доминанты... "... князь с бережливо-нежным выражением стоял перед нею и говорил ей что-то. Она, подняв голову, разрумянившись и, видимо, стараясь удержать порывистое дыхание, смотрела на него. И яркий свет какого-то внутреннего, прежде потушенного огня опять горел в ней. Она вся преобразилась. Из дурной опять сделалась такой же, какой она была на бале". Отметим: на балу раньше Наташа возбуждена, красива и счастлива для всех; теперь она хороша, и возбуждена, и счастлива для одного князя Андрея; доминанта нашла своего адекватного раздражителя.

Третье стадия
Между доминантой и внешним раздражителем устанавливается прочная связь так, что раздражитель будет вызывать и подкреплять ее. Внешняя среда целиком поделилась на отдельные предметы, лишь части из которых отвечает определенная доминанта. И уже даже не сам князь Андрей, а лишь его имя тотчас вызывает в Наташе ту, единственную среди прочих, доминанту, которая некогда создала для Наташи князя Андрея.

Горбов вполне серьезно видит проблему в том, что доминанты нервных центров при переутомлении могут привести к тому, что называют неврозом летного состава: монотонность может приводить к тому, что военная медицина того времени описывает как неврозы летного состава ( например ссылается на А. И. Северский лечение и предупреждение неврозов у летного состава, М. 1965). Итак, как выглядел этот невроз пилота?

За медицинской помощью несколько позднее заставило обратиться не чувство утомления и головные боли, а своеобразные непонятные для больного явления, которые стали возникать у него в длительных ночных полетах. В этих полетах по условиям видимости направление и положение самолета приходилось выдерживать только по приборам, однако с необходимостью при этом и ведения постоянного наблюдения за световыми земными орнентирами (объекты наблюдения). Во время таких полетов у обследуемого 3. стали возникать своеобразные ложные переживания «остановки самолета», «потери скорости» с появлением затем потемнения в глазах, чувства онемения рук, жара во всем теле. Иногда близкие к такому состоянию явления стали возникать и в дневных полетах, однако в более легкой степени. Эти явления легко проходили после активного пилотирования самолетом (снижение его с последующим подъемом, изменение скорости), которое совершалось летчиком с таким расчетом, чтобы не нарушить грубо заданный режим полета. Обследуемый полагал, что этот разработанный им «комплекс» активного пилотирования мог бы помочь ему и при совершении полетов в ночное время, но применить его в этих условиях он просто не решался.

Но уже при развитии этих состояний высший пилотаж, тренировочный воздушный бой с большими перегрузками переносились обследуемым по-прежнему хорошо.
​​Горбов. Указанное сочинение, стр 55

Когнитивное явление “остановки самолета” и привлекает внимание Горбова. Перерыв в полетах привел к обратному развитию всех более болезненных явлений с восстановлением вновь хорошего самочувствия. Но в дальнейшем, с возобновлением полетов, вновь развились явления переутомления. Перерыв в полетах не давал восстановления хорошего самочувствия. Это состояние было расценено как развившийся невроз (нарушение сна, раздражительность, напряженность, сопровождающаяся переживанием остановки самолета, потеря интереса к полетам - летать стало неохота).

Последнее, а именно потеря интереса к любимому делу,- признак, имеющий большое практическое значение
👍5💋2