в среду у нас внезапно образовалась вторая сессия NLP в Москве, но к сожалению это все в районе обеда, регистрация тут
👍2
сразу две новости последнего времени из Китая: первая - компания Huawei (недавно выпускали свою большую языковую модель PanGu-Ultra, но что даже более важно - они делают ИИ-ускорители) объединяет усилия c UBTech для создания гуманоидных роботов; и вторая новость, что DeepSeek-R1 уже помогает человекоподобным роботам на заводе Zeekr выполнять сложные задачи
🔥18
Джон Кармак (создатель оригинального Doom и хардкорный программист) высказался на тему того, что если бы люди уделяли время оптимизации, нам бы не понадобились новые мощные компьютеры, хватило бы и текущих; я думаю, в его словах есть своя правда, но сейчас все идет к более быстрому созданию кода, следуя максиме Марка Цукерберга "Move Fast and Break Things"; в эту сторону смотрит и нашумевший вайб-кодинг, и даже автоматическое создание ПО через обучение нейросети решать конкретные задачи (недавно выкладывал видео); а оптимизацию пытаются тоже свалить на машинное обучение
👍19
передают слова Хинтона, что школы и университеты будут не нужны; тут всегда надо делать скидку на то, что ученый изнасиловал журналиста (как это недавно случилось со мной), но аргумент такой, что ИИ будет учить лучше, чем преподаватели-люди; на мой взгляд даже если это и так (у меня по этому поводу большие сомнения), то вторую, более важную миссию школы и университета ИИ заменить не сможет - эта миссия по социализации человека, обучение его существованию в коллективе; нравится это кому-то или нет, но мы животные социальные, именно коллективная работа позволила построить нашу цивилизацию, где во многих странах нет голода, как массового явления, например; так что может быть стоит переосмыслить роль школы и университета, но отказываться от этих социальных институтов на мой взгляд преждевременно, т.к. нет замены для второй важнейшей функции
@valuableai
@valuableai
👍19💯4💊3❤1
только недавно обсуждали достижение Sakana AI cо статьями на воркшопе; а тут подъехала новость, что статью от ИИ-агента приняли на ACL; будущее уже здесь, с добрым утром
🔥8😁2👏1🤯1
китайские коллеги научились с помощью диффузионок восстанавливать лицо по ДНК; на мой взгляд это серьезный прорыв (хотя, надо признать, я не слежу внимательно за этой областью); в работе провели верификацию на людях: взяли десять добровольцев, давали им сгенерированное изображение лица, а потом ряд реальных фотографий, в 75% случаев добровольцы смогли выбрать правильное фото из 5 вариантов
🔥17🤯11
Дэвид Сильвер (один из основателей DeepMind) и Ричард Саттон (автор классического учебника по обучению с подкреплением) выпустили статью, только это не привычная нам статья с результатами, а то, что в англоязычной литературе называется position paper; в этой работе они постулируют начало "эры опыта", когда модели начнут получать информацию непосредственно взаимодействуя с миром; это аналог того, как обучаются дети
с одной стороны я согласен, т.к. к 13 годам человек в среднем видел 100 миллионов слов, но способен выполнять задачи, на которые современные LLM, которые видели по нескольку триллионов слов; из этого с очевидностью следует, что опыт взаимодействия с миром важен; с другой стороны, не очень понятно, как это все будет интегрировано - мультимодальность еще далека от идеала
с одной стороны я согласен, т.к. к 13 годам человек в среднем видел 100 миллионов слов, но способен выполнять задачи, на которые современные LLM, которые видели по нескольку триллионов слов; из этого с очевидностью следует, что опыт взаимодействия с миром важен; с другой стороны, не очень понятно, как это все будет интегрировано - мультимодальность еще далека от идеала
✍7💯4👍2
с моим коллегой произошла типичная история кражи идеи из головы: вышла работа, где предлагается концепция soft thinking (первая картинка); простыми словами это про то, что рассуждения в виде слов ограничивают выразительную способность модели (думаю, что и человека тоже), если это ограничение снять (вторая картинка), то результата можно достичь быстрее (третья картинка)
P.S. сейчас пошла мода делать одностраничные сайты для статей, где выкладывать основные результаты с красивыми картинками,я такие сайты называю комиксами, и только приветствую их появление, т.к. доходчивость у них действительно больше
P.S. сейчас пошла мода делать одностраничные сайты для статей, где выкладывать основные результаты с красивыми картинками,
❤12👍7
завтра буду участвовать в онлайн-дискуссии в рамках конференции "AI-инструменты и разработка"; дискуссия будет под лозунгом «ИИ в разработке: мечта менеджера, кошмар инженера»; участие в конференции бесплатное, начало дискуссии в 14:10, регистрация тут
👍7❤2
Google выпустил AI Edge Gallery - это приложение под андроид, которое позволяет скачивать модели с HuggingFace (первая картинка) и запускать их на мобильном устройстве (вторая картинка)
на мой взгляд тут уместно вспомнить уже классическую историю про сравнение с Apollo Guidance Computer (третья картинка): у него было 32 кб памяти и 43 Гц частоты (именно Герца без приставок), для сравнения у последнего Google Pixel 16 Гб памяти и 3,4 ГГц частоты (на 8 ядрах), что делает его примерно в 1 000 000 раз мощнее; это к вопросу об эффективном программировании; зато на нем можно LLM крутить, да
на мой взгляд тут уместно вспомнить уже классическую историю про сравнение с Apollo Guidance Computer (третья картинка): у него было 32 кб памяти и 43 Гц частоты (именно Герца без приставок), для сравнения у последнего Google Pixel 16 Гб памяти и 3,4 ГГц частоты (на 8 ядрах), что делает его примерно в 1 000 000 раз мощнее; это к вопросу об эффективном программировании; зато на нем можно LLM крутить, да
💯10❤2
Эрик Шмит говорит, что 99 процентов электроэнергии будет использоваться под нужды ИИ; мы недавно эту тему обсуждали; как я понимаю, про США он вот такое говорит:
тогда за полтора года надо добавить 2,5% процента от общей генерации (она составляла 1188 ГВт в 2023 году, согласно EIA) и еще 5% за следующие 3 года, темпы прямо скажем стахановские
"Many people project demand for our industry will go from 3 percent to 99 percent of total generation... an additional 29 gigawatts by 2027 and 67 more gigawatts by 2030,"he said.
тогда за полтора года надо добавить 2,5% процента от общей генерации (она составляла 1188 ГВт в 2023 году, согласно EIA) и еще 5% за следующие 3 года, темпы прямо скажем стахановские
Futurism
Former Google CEO Tells Congress That 99 Percent of All Electricity Will Be Used to Power Superintelligent AI
Billionaire tech tycoon Eric Schmidt told Congress that 99 percent of electricity will soon be used to power AI.
👍2⚡1
я много лет пользуюсь StackOverflow для вопросов по программированию, в том числе по TeX, а сегодня я заметил шапку сайта; эльфийские письмена, да, именно так нормальные люди воспринимают эти наши научные статьи
😁25😐1
оказывается, у нас тоже не отстают в плане внедрения ИИ в медицину от Саудовской Аравии (ну ладно, отстают, но в этом случае, я считаю, поспешать нужно медленно)
кстати, про внедрение ИИ у нас в судопроизводство тоже была не так давно новость
ФГБНУ "НИИГБ имени Краснова" готовится внедрить передовую систему диагностики, мониторинга и лечения возрастных заболеваний сетчатки на основе ИИ-технологий, которая опирается на обширную базу офтальмологических медицинских данных
кстати, про внедрение ИИ у нас в судопроизводство тоже была не так давно новость
TACC
НИИГБ им. Краснова готовится внедрить систему диагностики сетчатки на основе ИИ-технологий
Технологии будут основываться на клинической базе, которая позволяет создавать системы, способные ставить очень точный диагноз
❤4👍4