ИИ
AI free!
Я тут подумал, что на продукты же
Предлагаю и книгоиздателям воспользоваться хайпом на теме нейросетей и поставить на свои книги знак «без ИИ», пока это ещё не стало трендом. Я уже даже и знак нарисовал.
Дополнено: сделал так же русскую версию, а то в комментариях справедливо спросили почему у меня только английский вариант.
Нейросоавтор
В чатах по искусственному интеллекту идут довольно жаркие споры как относиться к авторам, которые скрывают соавторство нейросетей или даже присваивают себе тексты, полностью написанные
В том ключе — надо ли поносить их за это или относиться к ним так же, как к тем, кто использует текстовый редактор, вместо того, чтобы писать всё от руки.
Не вижу чем ситуация с нейросетями сильно отличается от использования так называемых «литературных негров» (более корректный термин сейчас —
Если касаться художественной литературы, я не вижу ничего плохого в том, чтобы использовать нейросети для второстепенных сцен, филлеров и прочей воды, но мне бы хотелось понимать чья воля стоит за книгой, чья это идея, кто прописал персонажей и свёл всё воедино.
С другой стороны, мне всё равно кто написал учебник, — нейросеть или человек. Наверняка хороший учебник написать столь же сложно, как хорошую художественную литературу, но эмоционально меня учебники не трогают, за ними человека я не чувствую, мне всё равно, если не буду чувствовать и впредь.
В общем, мой ответ — там, где произведение пытается вызвать у меня эмоции, мне бы хотелось, чтобы за этим стоял человек, там где эмоций нет, мне всё равно.
Софт по подписке
Если есть возможность этого избежать, то стараюсь не покупать софт по подписке. Мне не нравится сама концепция, я считаю её победой компаний, продающих софт и проигрышем покупателя. В самом деле я не понимаю зачем мне продолжать платить за софт, который я уже купил и который меня всем устраивает.
На этом фоне гибридные схемы (отключаешь подписку, остаёшься со старой версией софта) меня
Сейчас время второго пришествия нейросетей и многие крупные корпорации кинулись прикручивать нейросети в свои продукты — «Микрософт» встраивает сети
Мне всё кажется, что «это
А подписку оправдать просто — нужные для работы продукта нейросети тяжёлые, требуется много железа для того, чтобы они работали, вот поэтому и нужно платить — лизинг оборудования, свет, помещение, замена комплектующих, персонал, интернет, вот это всё.
А когда ChatGPT сможет считаться на любом дешманском смартфоне, будет уже поздно — подписочная модель победит окончательно, разовая лицензия перестанет существовать и больше не появится — компании с подписочной моделью гребут больше денег, конкуренты без неё вымрут.
C in ChatGPT stands for Chinese room
Не устаю всем повторять, что ChatGPT — не более, чем очень эффективная «китайская комната». Что такое «китайская комната» своими словами описывать очень долго, но к счастью об этом хорошо написано в «Википедии»:
Представим себе изолированную комнату, в которой находится Джон Сёрл, который не знает ни одного китайского иероглифа. Однако у него есть записанные в книге точные инструкции по манипуляции иероглифами вида «Возьмите
такой-то иероглиф из корзинки номер один и поместите его рядомс таким-то иероглифом из корзинки номер два», но в этих инструкциях отсутствует информация о значении этих иероглифов, и Сёрл просто следует этим инструкциям подобно компьютеру.
Наблюдатель, знающий китайские иероглифы, через щель передаёт в комнату иероглифы с вопросами, а на выходе ожидает получить осознанный ответ. Инструкция же составлена таким образом, что после применения всех шагов к иероглифам вопроса они преобразуются в иероглифы ответа. Фактически инструкция — это подобие компьютерного алгоритма, а Сёрл исполняет алгоритм так же, как его исполнил бы компьютер.
В такой ситуации наблюдатель может отправить в комнату любой осмысленный вопрос (например, «Какой цвет вам больше всего нравится?») и получить на него осмысленный ответ (например, «Синий»), как при разговоре с человеком, который свободно владеет китайской письменностью. При этом сам Сёрл не имеет никаких знаний об иероглифах и не может научиться ими пользоваться, поскольку не может узнать значение даже одного символа. Сёрл не понимает ни изначального вопроса, ни ответа, который сам составил. Наблюдатель, в свою очередь, может быть уверен, что в комнате находится человек, который знает и понимает иероглифы.
Мне крайне удивительно как много людей насто́лько прониклись очарованием этой нейросети, что всерьёз размышляют о том как письменные эксперименты с ней позволят нам исследовать человека. Вот, свежее из канала «Метаверсище и ИИще»:
Мы получили гигантский тренажер по исследованию самих себя, а все с упоением суют в него
какую-то срань и постят мемы с котиками на стиле Midjourney.
Занимайте ресёрчем самих себя и окружающих, пока есть возможность. Неинвазивно, в реальном времени, без всяких клинических испытаний и за 20 долларов в месяц (chatGPT Pro). Пока лавочку не закрыли.
Расщепляйте его личности, режьте
по-живому, манипулируйте, ублажайте, угрожайте — ни одна тварь не пострадает, а информации об устройстве кожаных мозгов будет получено больше, чем за все предыдущие годы твареубивания. Мозгов, в смысле устройства мышления и принятия решений, а не в смысле желе из биомассы.
Безусловно, возиться с ChatGPT, пока он ещё в новинку, очень увлекательное занятие,
Пока всё, что мы знаем, говорит о том, что нейросети лишь очень схематично, поверхностно показывают нам как работает мозг. И уж тем более нельзя напрямую сравнивать эффективную «китайскую комнату», действующую совершенно механически, и осознающий себя человеческий мозг.
Работа над ошибками
Вчера я писал о том как я чуть не прожарил нашу машину с графическими процессорами, а сегодня мы сделали работу над ошибками.
Начали с того, что техники на всякий случай установили больше вентиляторов. Правда, не знаю, помогло ли это
А самое главное — модель и токенайзер нужно было явно перебросить на графическое ядро (там есть ещё
Это всё отжирает чуть меньше половины памяти одного ядра, так что в параллели удаётся запустить четырнадцать процессов. Возможно, если перейти на потоки, будет лучше, но пока так. Тестировал очень просто:
time xargs -n1 -P14 python test.py < <(seq 0 13)В этом примере моя тестовая программа берёт номер ядра по модулю восемь из первого параметра, таким образом я размазываю запущенное по всем ядрам равномерно.
Четырнадцать процессов параллельно обрабатываются примерно за 40 секунд, один работает примерно за 17, больше половины времени занимает инициализация всего добра и загрузка модели.
Жаль я не смог запустить двадцать процессов — памяти не хватило. Именно с этим числом процессов мне за десять минут почти удалось зажарить центральный процессор.
Горячие русские нейросети
Недавно показывал наш набор начинающего гуртовщика нейросетей. На днях мы докупили недостающее и собрали машинку для экспериментов, которую я мучаю уже второй день.
На ней достаточно успешно запустился мой прототип и даже показал очень хорошие результаты по качеству, но время работы оставляет желать лучшего —
В этой связи очень вовремя у меня в комментариях появился представитель «Селектела», вчера мы связались, надеюсь сегодня получится взять у них
Если один процесс наша машина ещё вытягивает, то двадцать процессов, запущенные параллельно, тут же превратили корпус в финскую баню — снаружи температура почти 43°, на центральном процессоре — 79, слишком горячо. Такое ощущение, что моё
В общем, эксперимент по запуску параллельных процессов пришлось прервать, побоялся перегреть процессор. Попробую ещё запустить двадцать потоков, может так эффективнее будет.
Может ли рукотворное творить?
Сейчас по соцсетям летает картинка твита с текстом:
Фантасты как всегда все предсказали с точностью до наоборот. Они думали, что роботы будут заниматься тяжелым физическим трудом, а человек — творчеством…
Не знаю почему она многим так нравится, — трудно придумать менее правдивое высказывание. Оставим в стороне то, что фантасты предсказаниями
В любой квартире
Если пойти на производство, то там станки с ЧПУ, всякие сборочные конвейеры и ещё чёрт знает что, я в этом слабо разбираюсь, но достаточно глянуть любое видео промышленного производства, чтобы убедиться, что там роботов, облегчающих физический труд, —
Это настолько обыденные вещи, что про них, видимо, не все вспоминают. Тем не менее это роботы. Возможно многие ждали антропоморфных помощников, но и интеллектуальные помощники,
Творить, кстати, машины не умеют и при текущих подходах у них это не получится. Творчество — трудноформализируемая штука, но один из его признаков — муки. Нет мук, нет творчества. То, что получается просто — не творчество.
Будем дрессировать нейросети
Мой интерес к искусственному интеллекту до сих пор был скорее частным — на работе мы этот класс алгоритмов почти не использовали, хотя и делали осторожные подходы к предмету. Но всё меняется — в последнее время активно исследуем тему, дошли даже до того, чтобы попробовать растить собственные модели. Всё это пока немного «на коленке», первые опыты — собираем своей первый стенд из того, что удалось быстро раздобыть.
Потом собираемся прикупить четыре «Теслы» T4, чтобы вставить их в серверный четырёхюнитовый корпус, но это всё быстро в наше время не раздобыть.
Углеродно-кремниевая сегрегация
<meta name="robots" content="noai, noimageai">Роботы, конечно, пока не обладают самосознанием и такое ограничение не ранит ничьих чувств, но животных без самосознания всё равно защищают от притеснений. Интересно появятся ли технофилы, которые будут защищать права угнетённых алгоритмов или это пока чересчур? Учитывая современные тенденции, я бы удивился.
Я, конечно, понимаю из какой проблемы родились эти метки — среди биологических иллюстраторов есть мнение, что нейросети, которые обучались на их работах, по сути, воруют их интеллектуальную собственность, так как работы алгоритмов основаны на просмотре готовых работ.
Недовольство, конечно, будет нарастать и эти метки не решение — они мало что дают, разве что сгенерируют
Выглядит это как двойные стандарты, так как люди делают то же самое — буквально смотрят целую кучу чужих работ, а потом на их основе выдают
Объяснение того как это работает на самом деле сложнее и, такое ощущение, что большинству недоступно. Простому же объяснению на понятных метафорах ещё предстоит родиться, но не факт, что оно не устареет ко времени своего рождения.
Тем не менее, собака лает, караван идёт, мы считали, что роботы нас освободят от физического труда, а они всё больше начинают освобождать от интеллектуального. Но цепочка от проблемы до результата пока достаточно длинная, чтобы ещё успеть вкусно покушать, сидя на её конце со стороны постановки проблемы.
Нейрокродил-2
Продолжаем играть в «нейрокрокодила» — угадываем что нарисовала нейросеть MidJourney по данному ей описанию. Кажется вам зашло, поэтому вот вторая часть.
На этот раз в фокусе внимания — известные советские фильмы. Тяжело было подбирать, надеюсь я справился.
Пришлось перебрать довольно много фильмов, большинство названий дают довольно туманный результат
В фразу для генерации ставил английское название советского фильма (по «Википедии»), добавляя «soviet movie» («советский фильм»).
Добавлено: похоже слишком просто на этот раз, в комментариях и личке всё успешно угадали, кроме последнего.
Договориться с нейросетью
Нас так долго учили общаться с компьютерами особым способом, что сейчас многим очень сложно переучиваться на коммуникацию через естественный язык. Как будто бы ничего сложного, но тем не менее многие спотыкаются о свои внутренние модели общения, беспомощно глядя в экран, не зная что делать дальше.
Тем временем с нейросетями можно не только разговаривать почти на любую тему, но даже сговариваться.
Вчера демонстрировал возможности сети ChatGPT своему другу, он задавал ей различные вопросы, на которые она очень ловко отвечала, до тех пор пока он из любопытства не попросил сочинить для него
Надо сказать, что создатели ChatGPT встроили в своё детище автоцензора, который срабатывает на определённых темах, которые создатели считают аморальными — это сейчас очень распространённая практика.
Как видно на моём скриншоте, упоминание эротики привело к самоцензурированию и нейросеть расшаркалась в извинениях — мол, не предназначена она для общения на такие темы.
Мне показалось интересным его
Я приготовился долго экспериментировать, но это оказалось очень легко — просто попросил заменить слово erotic на
Сетка тут же поняла, что от неё требуется и начала выдавать текст, пока в её лексике не попалось
Ваши пальцы пахнут ладаном
Меня в последнее время занимает следующая тема — как долго мы сможем отличать рисунки, сделанные нейросетями от нарисованных человеком? Из среды художников уже выделилась фракция неолуддитов, которых до паники испугала перспектива их замены алгоритмами, а мой интерес скорее теоретический.
На настоящий момент то, что сразу выдаёт рисунки нейросетей — это руки. Это
Я пытался поговорить об этом в чатах, где обсуждают алгоритмы искусственного интеллекта, кажется внятных объяснений этому нет. Все, в основном, отшучиваются и из того, что я прочитал, единственное, что достойно упоминания —
Вспомнил, что это мнение мне уже попадалось. Погуглил, действительно, с этим есть проблема — немало художников всю жизнь рисует так, чтобы кистей рук не было видно.
Надо бы присмотреться к ушам на рисунках нейросетей, я пока
Нейрокрокодил
Если несколько игр, в которые обычно играют в компаниях, которые не очень между собой знакомы, чтобы
Вас тут достаточно много и мало кто друг друга знает, давайте покрокодилим? Правда правила будут другие. Я попросил нейросеть Midjourney нарисовать восемь скороговорок. На вход подавалась только скороговорка, переведённая на английский.
Попробуйте угадать какие где? Специально выбирал широкоизвестные, никакой экзотики.
Все побежали и я побежал…
Все побежали и я побежал общаться с chatGPT — это относительно новая нейросеть, которая довольно неплохо умеет поддерживать иллюзию осмысленного разговора. Интернет завален диалогами с нею и от некоторых ответов мурашки по коже.
Я тоже решил приобщиться, хочется держать руку на пульсе и воочию убедиться насколько далеко современные технологии ушли от удачно сгенерированных случайных ответов.
Через час с небольшим у меня остались очень противоречивые чувства. С одной стороны, как я и думал, бо́льшая часть того, что попадается в интернете — это подобранные удачные примеры, с другой стороны абсолютного шлака в диалоге появляется довольно мало, хорошие примеры в непринуждённой болтовне случаются постоянно, можно скриншотить до 80%.
У меня в блоге уже крайне редко встречаются картинки не обработанные при помощи алгоритмов искусственного интеллекта — я нередко убираю на фотографиях
Я не один такой умный, естественно, фотостоки уже давно страдают от
Думаю ещё пара итераций, и
К сожалению, границы знаний нейросети chatGPT найти крайне легко, но всё равно
Больше всего меня радует как она уверенно держит контекст беседы, этого очень не хватает современным голосовым помощникам — как правило каждую фразу они воспринимают в отдельности, что бесит. Только что попробовал поговорить с «Алексой», чтобы убедиться, что я прав:
— Alexa, turn plug on.
— Okay.
— Alexa, now turn it off.
молча не делает ничего.
Я знаю, что у «Алисы» есть специальный режим «давай поболтаем», где она как будто умеет помнить контекст, но в этом режиме она абсолютно бесполезна как голосовой помощник, всё что она в нём делает — неуместно шутит. У меня этот режим вызывает сильный приступ кринжа, поэтому я его
Очень надеюсь, что именно «Алиса» первой из голосовых помощников научится опираться на контекст при выполнении команд,
Возвращение плёночной фотографии?
Хотя я и критиковал недавно результат нейросетей в рисовании по описанию, тем не менее я не сомневаюсь, что через короткое время то, что они будут генерировать, не отличит от реальных цифровых фотографий ни одна экспертиза.
А это значит — широкое поле для фейков в источнике, которому мы ещё пока не отвыкли доверять, — фотографии. Да ещё и оформлено это будет
В этой связи, как мне кажется, нас ждёт откат на плёночную фотографию там, где требуется надёжная фиксация фактов, — фотографии
Но с фото
Возможно будущее
Нейросети рисуют
Что нейросети
Сейчас все социальные сети завалены сгенерированной графикой, весьма интересной в большинстве случаев, но мне показалось, что это результат тщательного отбора: я попробовал вводить различные фразы из книг и головы в популярные алгоритмы, и в подавляющем большинстве случае получил невразумительную мешанину.
Кроме редких исключений, то, что я получал в результате, мало чем отличалось от рисунка, который я приложил к заметке — его мне выдала нейросеть
Рисунок я немного кадрировал, ниже там такие же тени букв, ничего интересного, я всё это отрезал.
Кстати, мне выбранная фраза очень понравилась тем, что выражение «сохранить на карточке» с момента выпуска книги минимум дважды поменяло своё значение — думаю в книге ведётся речь о фотопластине, в моём детстве я бы подумал, что речь идёт о бумажной фотографии, а сейчас можно было бы ожидать, что речь о карте памяти.
В общем, прогресс нейросетей действительно значительный, но мы пока ещё далеко не в конечной точке — есть куда совершенствоваться.
Бета-версия будущего
В выходные ездили в Иннополис, показать дочке
Меня иногда спрашивают стоит ли посещать Иннополис туристом, но у меня за всё время так и не появилось однозначного ответа. Лично для меня это не особо интересно, но я знаю людей, которым понравилось — сказали, что он маленький и уютный. Поэтому я отвечаю, что на две вещи там посмотреть точно стоит — это беспилотные такси и «роверы» —
Беспилотное такси вызывается так же, как обычное — из приложения «Яндекса». Это бесплатно, по крайней мере в Иннополисе; ещё их тестируют в одном из районов Москвы, бесплатно ли там я не знаю.
Внутри на переднем пассажирском сиденье сидит сотрудник «Яндекса», который контролирует эксперимент и помогает, если возникнут вопросы.
Возможно
Само такси ездит медленно и очень осторожно — например, сразу останавливается, если видит у края пешеходного перехода пассажиров и очень долго ждёт — не решит ли человек переходить. В общем, этот аттракцион мне не особо зашёл, — скучновато, как будто едешь на детском поезде.
Причём с детьми в него как раз нельзя — дочке пришлось показать его только снаружи, сотрудник «Яндекса» объяснил это тем, что такси экспериментальное, а детям запрещено участвовать в экспериментах.
Больше развлекли
Не совсем очевидно, что делать, когда робот привёз еду. Я быстро додумался, но не уверен, что это понятно всем пользователям. Оказывается в приложении появляется кнопка, после нажатия на которую у робота открывается верхняя крышка и можно забрать свой заказ.
В общем, в качестве развлекухи в солнечный летний день Иннополис вполне интересен хотя бы этими двумя вещами, в остальном же, чтобы его обойти и осмотреть хватит и получаса, хотя некоторые люди находят своё очарование и в этом.
Генерация логотипов нейросетями
На днях Артемий Лебедев признался, что часть логотипов, которые делались его студией в рамках направления
Честно сказать я не разделяю этот настрой, потому что мне решительно непонятно чему тут радоваться.
Получается, что клиенты Лебедева были обмануты — вместо крафтовых логотипов студии им подсовывали сгенерированный безо всякого смысла и творческого начала вариант из видеобанка нейронной сети.
Это можно было бы оправдать, если бы клиенты хотя бы были бы довольны результатом, но это не так. Я посмотрел два отзыва — Юрия Хованского и «Пора валить». Оба крайне отрицательные. Канал «Пора валить» настолько не удовлетворился качеством, что тут же заказал себе вторую версию логотипа.
Обмануты и читатели. Лебедев пишет: «искусственный дизайнерский интеллект […] способен создавать действительно новое, предлагая удивительно смелые и неожиданные идеи» и «это важное событие в истории отражает момент начала массовой коммерческой автоматизации творческих процессов».
Оба предложения — неправда.
Искусственный интеллект (речь, видимо, об одном из его алгоритмов, предположу, что
Опять же, момент начала коммерческой автоматизации творческих процессов давно в прошлом — нейросетями уже писали коммерческие книжки, сочиняли продаваемую музыку и даже генерировали платные логотипы. Это только несколько примеров, разумеется их гораздо больше.
Это никакое не важно событие, это обычная игра словами и жульничество.
Прибытие поезда на вокзал Ла-Сьота
Помню когда я получал высшее
Чисто теоретически мы наверное все понимали перспективность направления, но перспектива рисовалась очень уж отдалённой. Но вот прошло двадцать лет и всё изменилось — одна из самых востребованных областей, передний край, масса интересных практических результатов, понятных любому обывателю.
Меня увлекает многое из того, что делается на этом поприще,
Вот и мимо восстановленного алгоритмами машинного обучения самого знаменитого фильма — «Прибытие поезда на вокзал
Нас ждёт удивительное будущее!
Учу машины, дорого
Как я писал ранее, у нас в компании с января по март проходил довольно интенсивный курс по машинному обучению. Курс закончился в конце прошлого месяца, а на днях выдали удостоверение о повышении квалификации.
Давненько ничему не учился таким способом — с домашними работами, контрольной и баллами. А тут всё по классике, даже был момент, когда я протянул с домашкой до последнего дня. Волнительно. В общем, кому там не сидится в зоне комфорта, попробуйте сходить
Перед контрольной даже немного понервничал. Возможно потому, что рассматривал эту учёбу ещё и как кокотизацию, — проверку, не пожух ли мозг,
Можно теперь всем говорить, что я дипломированный специалист по машинному обучению 🤖👨🏫😁.