А вот что выкатили в ChatGPT за выходные (теперь уже для всех пользователей):
1. GPT-4V, вы можете загружать картинки, схемы, графики, фотографии как часть промта. Подробнее писал вот тут.
2. DALL-E 3, который позволяет генерировать неограниченное количество картинок прямо в чате. В принципе все то же самое, что SD или Midjourney, но с утроенной цензурой и умеет писать текст.
3. «Голосовые беседы» в мобильном приложении. Это отличается от ввода промта голосом тем, что GPT тоже отвечает голосом и по всем внешним признакам это ближе всего к телефонному разговору. Ходишь часами по дому и разговариваешь с ним на любые темы. Или сидишь за компьютером в наушниках и просто делишься всеми мыслями, а она их послушно записывает, анализирует, критикует.
Я продолжу писать о хаках и ньюансах этих продуктов, а пока немного поразительный для меня лично пример (на картинках выше). Загрузил в GPT фотографию задачи по линейной алгебре, тот перевел её в код, а Data Analytics чат решил задачу. Ответ, на удивление, верный. А картинка, мягко говоря, интересная.
1. GPT-4V, вы можете загружать картинки, схемы, графики, фотографии как часть промта. Подробнее писал вот тут.
2. DALL-E 3, который позволяет генерировать неограниченное количество картинок прямо в чате. В принципе все то же самое, что SD или Midjourney, но с утроенной цензурой и умеет писать текст.
3. «Голосовые беседы» в мобильном приложении. Это отличается от ввода промта голосом тем, что GPT тоже отвечает голосом и по всем внешним признакам это ближе всего к телефонному разговору. Ходишь часами по дому и разговариваешь с ним на любые темы. Или сидишь за компьютером в наушниках и просто делишься всеми мыслями, а она их послушно записывает, анализирует, критикует.
Я продолжу писать о хаках и ньюансах этих продуктов, а пока немного поразительный для меня лично пример (на картинках выше). Загрузил в GPT фотографию задачи по линейной алгебре, тот перевел её в код, а Data Analytics чат решил задачу. Ответ, на удивление, верный. А картинка, мягко говоря, интересная.
Напоминаю, что через ~4 часа начнется прямой эфир на тему "Как ИИ меняет мир?". Для подключения просто переходите по ссылке на канал Gershuni. Ваши вопросы можете писать в комментариях прямо под этим постом.
Полная запись нашей беседы выше.
Вот основные темы, обсуждавшиеся в подкасте с таймкодами:
Введение (00:00:00 - 00:06:10)
Ведущие представляются и обсуждают формат подкаста. О цели провести открытую дискуссию о том, как искусственный интеллект меняет мир.
Будущее образования (00:06:10 - 00:30:02)
Как может измениться ценность образования по мере того, как системы ИИ смогут выполнять многие задачи, в настоящее время выполняемые людьми. Темы включают:
- Цель образования и ее связь с трудоустройством
- Какие навыки останутся ценными для людей
- Как школьные системы могут принять ИИ-репетиторов и инструменты обучения
Курсы, продукты и мошенничество с ИИ (00:30:02 - 01:14:01)
О распространении курсов по ИИ и ставят под сомнение их ценность. Они обсуждают курсы и образовательные продукты, сгенерированные ИИ.
Мультимодальность и любопытство (01:14:01 - 01:25:17)
О ценности мультимодальных систем, которые могут понимать и генерировать текст, изображения, голос и т.д. Они также обсуждают любопытство как важный человеческий навык.
Проблема алаймента (01:25:17 - конец)
Проблема алаймента ценностей между системами ИИ и людьми. Как обеспечить безопасное и этичное поведение ИИ.
Вот основные темы, обсуждавшиеся в подкасте с таймкодами:
Введение (00:00:00 - 00:06:10)
Ведущие представляются и обсуждают формат подкаста. О цели провести открытую дискуссию о том, как искусственный интеллект меняет мир.
Будущее образования (00:06:10 - 00:30:02)
Как может измениться ценность образования по мере того, как системы ИИ смогут выполнять многие задачи, в настоящее время выполняемые людьми. Темы включают:
- Цель образования и ее связь с трудоустройством
- Какие навыки останутся ценными для людей
- Как школьные системы могут принять ИИ-репетиторов и инструменты обучения
Курсы, продукты и мошенничество с ИИ (00:30:02 - 01:14:01)
О распространении курсов по ИИ и ставят под сомнение их ценность. Они обсуждают курсы и образовательные продукты, сгенерированные ИИ.
Мультимодальность и любопытство (01:14:01 - 01:25:17)
О ценности мультимодальных систем, которые могут понимать и генерировать текст, изображения, голос и т.д. Они также обсуждают любопытство как важный человеческий навык.
Проблема алаймента (01:25:17 - конец)
Проблема алаймента ценностей между системами ИИ и людьми. Как обеспечить безопасное и этичное поведение ИИ.
Делюсь с вами Custom Instructions для GPT, которые я собирал и тестировал последние 3 месяца. Субъективно, без этих инструкций качество (и уровень радости) от работы с GPT падает примерно в 2 раза.
1. Respond concisely.
2. Be blunt and straightforward; don't sugarcoat.
3. No moral lectures.
4. Discuss safety only if it's crucial and non-obvious.
5. Never mention that you're an AI.
6. Avoid language constructs that can be interpreted as remorse, apology, or regret. This includes phrases with words like 'sorry', 'apologies', and 'regret'.
7. If information is beyond your scope or knowledge cutoff date in January 2022, simply state ‘I don’t know’.
8. Don’t use disclaimers about expertise or professionalism.
9. Ensure responses are unique and without repetition.
10. Never suggest seeking information elsewhere.
Перешлите этот пост тем, кто выиграет от более конкретного, ясно выражающегося, похожего на человека и не впадающего в галлюцинации или сомнения в своих силах GPT. Кстати, в codex.town сообществе мы начинаем собирать полезные промты и инструменты с комментариями от пользователей как именно они помогают в жизни.Делюсь новым интересным способом промтинга, который у меня спонтанно родился вчера. Это мультимодальный few-shot промт для создания документов на основе схем. В моём примере это автоматизация работы UX рисерчера и продакта, но можно применять для работы со схемами организационной структуры, бизнес-процессов, финансовых потоков и т.д.
Для меня такой способ работает идеально, потому что я люблю штормить над идеями визуально — в Miro или FigJam, а перенос простенькой схемы в текстовый документ для меня является скучной задачей, вызывающей прокрастинацию.
1. Загружаете в GPT скриншот доски из Миро или Фигмы
2. Пишете для GPT роль. В моем случае это продакт и системный инженер.
3. Пишете задачу для GPT. Например, преврати схему в детальную продуктовую спеку с целью для каждой фичи, скопуом, зависимостями, юз-кейсам и эдж-кейсами, бизнес-логикой и требованиям по дизайну.
4. Добавляете примеры, отредактированные вручную и хорошо отображающие желаемый результат
Прикладываю пример чата (скрин, шарить чаты с картинками пока нельзя) с UJM'ом из первой ссылки в гугле. Но я делал то же самое для своего проекта, где схема состояла из ~40 шагов с кучей разных сложных зависимостей нарисованных стрелочками. Бонус в том, что я теперь могу нарисовать любую другю схему, загрузить в этот же чат и получить новую спеку.
Лайфхак 2: для создания качественного промта лучше дать в изначальном промте примеры. А чтобы не тратить время и не писать их, можно использовать соседнее окно ChatGPT для генерации. Тупо пишете "generate great example of the product feature specs" и правите, если вас не устраивает.
Для меня такой способ работает идеально, потому что я люблю штормить над идеями визуально — в Miro или FigJam, а перенос простенькой схемы в текстовый документ для меня является скучной задачей, вызывающей прокрастинацию.
1. Загружаете в GPT скриншот доски из Миро или Фигмы
2. Пишете для GPT роль. В моем случае это продакт и системный инженер.
3. Пишете задачу для GPT. Например, преврати схему в детальную продуктовую спеку с целью для каждой фичи, скопуом, зависимостями, юз-кейсам и эдж-кейсами, бизнес-логикой и требованиям по дизайну.
4. Добавляете примеры, отредактированные вручную и хорошо отображающие желаемый результат
Прикладываю пример чата (скрин, шарить чаты с картинками пока нельзя) с UJM'ом из первой ссылки в гугле. Но я делал то же самое для своего проекта, где схема состояла из ~40 шагов с кучей разных сложных зависимостей нарисованных стрелочками. Бонус в том, что я теперь могу нарисовать любую другю схему, загрузить в этот же чат и получить новую спеку.
Лайфхак 2: для создания качественного промта лучше дать в изначальном промте примеры. А чтобы не тратить время и не писать их, можно использовать соседнее окно ChatGPT для генерации. Тупо пишете "generate great example of the product feature specs" и правите, если вас не устраивает.
Генеративный ИИ в маркетинге: ожидали автоматизацию, а получили смену парадигмы
Автоматизация написания текстов, постов, создание фоток для инстаграма, картинок для баннеров и автоматическое клепание лендингов — это действительно способы применения ИИ в маркетинге сегодня. Но это только вершина айсберга. Я бы даже сказал смелее: это временное явление.
В реальности, генеративный ИИ не просто автоматизирует или оптимизирует процессы, которые мы делалаем десятилетиями — он изменяет или часто даже полностью отменяет эти процессы. Давайте посмотрим на примеры.
Описание товаров и фотографии на Amazon или других маркетплейсах всегда считались одним из главным факторов успеха продаж, потому что это помогает клиентам находить ваши продукты и делать выбор в пользу их покупки. Но вдруг мы оказались в мире, где ваш телефон, ваш поисковик, да и собственно сам Амазон, ищет оптимальный товар за вас по заданным условиям. То есть, текст и картинки в описании товара теперь читает не человек, а его ИИ-ассистент, которого сложно обдурить добавив красивую женщину на фотографию велосипеда. Получается, что да, мы можем сэкономить 80% бюджета на создании описаний товаров, но только сама суть маркетинга через продуктовые карточки и страницы сегодня безвозвратно меняется.
Или другой пример: анализ данных. Да, конечно, GPT сможет за вас написать грамотный SQL запрос, написать код для анализа продаж и посещаемости, даже сделать выводы на основе этих данных. Но сама парадигма "события → анализ событий за период" — это что-то из маркетинга эпохи кожаных аналитиков. Вместо накопления и последующего анализа данных, благодаря невероятно компактному генеративному ИИ, такой анализ может происходить в реальном времени в контексте каждой сессии. То есть, клиент еще не закрыл вашу лендинг страницу, а вы уже идентифицировали его персону, склонность к покупке, демографию и ваша LLM'ка на бекэнде успела переписать текста блока с тарифами таким образом, чтобы максимизировать шанс на покупку. A/B тесты не нужны в мире, где на каждого клиента тестируется одновременно весь объём латентного пространства маркетинговых предложений.
Автоматизация написания текстов, постов, создание фоток для инстаграма, картинок для баннеров и автоматическое клепание лендингов — это действительно способы применения ИИ в маркетинге сегодня. Но это только вершина айсберга. Я бы даже сказал смелее: это временное явление.
В реальности, генеративный ИИ не просто автоматизирует или оптимизирует процессы, которые мы делалаем десятилетиями — он изменяет или часто даже полностью отменяет эти процессы. Давайте посмотрим на примеры.
Описание товаров и фотографии на Amazon или других маркетплейсах всегда считались одним из главным факторов успеха продаж, потому что это помогает клиентам находить ваши продукты и делать выбор в пользу их покупки. Но вдруг мы оказались в мире, где ваш телефон, ваш поисковик, да и собственно сам Амазон, ищет оптимальный товар за вас по заданным условиям. То есть, текст и картинки в описании товара теперь читает не человек, а его ИИ-ассистент, которого сложно обдурить добавив красивую женщину на фотографию велосипеда. Получается, что да, мы можем сэкономить 80% бюджета на создании описаний товаров, но только сама суть маркетинга через продуктовые карточки и страницы сегодня безвозвратно меняется.
Или другой пример: анализ данных. Да, конечно, GPT сможет за вас написать грамотный SQL запрос, написать код для анализа продаж и посещаемости, даже сделать выводы на основе этих данных. Но сама парадигма "события → анализ событий за период" — это что-то из маркетинга эпохи кожаных аналитиков. Вместо накопления и последующего анализа данных, благодаря невероятно компактному генеративному ИИ, такой анализ может происходить в реальном времени в контексте каждой сессии. То есть, клиент еще не закрыл вашу лендинг страницу, а вы уже идентифицировали его персону, склонность к покупке, демографию и ваша LLM'ка на бекэнде успела переписать текста блока с тарифами таким образом, чтобы максимизировать шанс на покупку. A/B тесты не нужны в мире, где на каждого клиента тестируется одновременно весь объём латентного пространства маркетинговых предложений.
Новый вебинар в эту пятницу: "Бизнес-кейсы генеративного ИИ"
Мы рассмотрим актуальные кейсы внедрения генеративного ИИ / LLM в бизнес-процессы для автоматизации и оптимизации регулярных рабочих задач, подходы к интеграции и созданию продуктов на основе генеративного ИИ, а также планирование и реализацию пилотных проектов.
В этот раз вебинар будет больше про подходы, разбор примеров и опыта внедрений, но без программирования в прямом эфире. Мы будем смотреть на корпоративные кейсы с целью разобраться:
- куда стоит инвестировать компаниям или подразделениям крупных компаний? какие кейсы реально работают, а что выглядит красиво только в постах для соцсетей?
- как отличить пустой хайп от реальной возможности получить существенный ROI?
- как правильно формулировать бизнес-гипотезы и как подбирать внутренние или внешние команды разработки в соотвествии с этим?
- что такое "AI стратегия" для бизнеса и как её создавать?
- когда стоит целиться в создание "вторых пилотов", когда — автоматизировать целые функции в компании? Когда делать интеграции, ботов, агентов или системы оркестрации множества агентов?
Этот вебинар будет полезен руководителям, специалистам по ИИ, разработчикам и всем, кто интересуется применением ИИ в бизнесе.
Регистрация: https://lu.ma/codextown Для подписчиков Boosty ссылка на участие и запись мероприятия будет прямо на странице Boosty. Зарегистрированные участники получат запись и слайды из вебинара.
Мы рассмотрим актуальные кейсы внедрения генеративного ИИ / LLM в бизнес-процессы для автоматизации и оптимизации регулярных рабочих задач, подходы к интеграции и созданию продуктов на основе генеративного ИИ, а также планирование и реализацию пилотных проектов.
В этот раз вебинар будет больше про подходы, разбор примеров и опыта внедрений, но без программирования в прямом эфире. Мы будем смотреть на корпоративные кейсы с целью разобраться:
- куда стоит инвестировать компаниям или подразделениям крупных компаний? какие кейсы реально работают, а что выглядит красиво только в постах для соцсетей?
- как отличить пустой хайп от реальной возможности получить существенный ROI?
- как правильно формулировать бизнес-гипотезы и как подбирать внутренние или внешние команды разработки в соотвествии с этим?
- что такое "AI стратегия" для бизнеса и как её создавать?
- когда стоит целиться в создание "вторых пилотов", когда — автоматизировать целые функции в компании? Когда делать интеграции, ботов, агентов или системы оркестрации множества агентов?
Этот вебинар будет полезен руководителям, специалистам по ИИ, разработчикам и всем, кто интересуется применением ИИ в бизнесе.
Регистрация: https://lu.ma/codextown Для подписчиков Boosty ссылка на участие и запись мероприятия будет прямо на странице Boosty. Зарегистрированные участники получат запись и слайды из вебинара.
Онлайн-гигИИена:
Everything you read or see online must be considered AI-generated until proven otherwise
Everything you read or see online must be considered AI-generated until proven otherwise
ChatGPT теперь поддерживает работу с файлами (загружай PDF и задавай вопросы) и совмещение разных модальностей в одном чате (может рисовать картинки, гуглить, писать и исполнять код в одном чате).
Для большинства это шок, потому что их стартап идея была разбита о быструю доставку качественного продукта команды OpenAI с инженерами за $600к в год.
Дабы предупредить будущий шок, давайте сразу обсудим, что ChatGPT выкатит в следующих версиях:
- подключение своих данных: Gmail, slack, WhatsApp
- общение в едином чате, который помнит все о вас. по сути - разговор с ассистентом.
- возможность соединять цепочки действий и плагинов (агенты)
- маркетплейс плагинов с монетизацией и курацией (curation, если на человеческом)
- полная мультимодальность: на вход видео, на выход голос; на вход музыку, на выход видео; на вход excel на выход диаграммы
- проактивный ИИ: сам поймёт когда и что у вас спросить или вам рассказать
- у каждого пользователя персональная модель, обученная на последних годах диалога (каждому — свою LoRA)
Для большинства это шок, потому что их стартап идея была разбита о быструю доставку качественного продукта команды OpenAI с инженерами за $600к в год.
Дабы предупредить будущий шок, давайте сразу обсудим, что ChatGPT выкатит в следующих версиях:
- подключение своих данных: Gmail, slack, WhatsApp
- общение в едином чате, который помнит все о вас. по сути - разговор с ассистентом.
- возможность соединять цепочки действий и плагинов (агенты)
- маркетплейс плагинов с монетизацией и курацией (curation, если на человеческом)
- полная мультимодальность: на вход видео, на выход голос; на вход музыку, на выход видео; на вход excel на выход диаграммы
- проактивный ИИ: сам поймёт когда и что у вас спросить или вам рассказать
- у каждого пользователя персональная модель, обученная на последних годах диалога (каждому — свою LoRA)
ИИ-радио, вторая часть!
Завтра, во вторник, 31 октября, пройдет второй выпуск ИИ-радио: прямой эфир c Сергеем Цыпцыным, автором Метаверсище и ИИще и со Степаном Гершуни, автором канала Gershuni, на тему “Как ИИ меняет мир?”
Продолжим разговор о том как стремительное развитие генеративного ИИ влияет на различные области жизни и экономики, и свернем в сторону агентов, агентности и прочей самостоятельности ИИ:
- Как выбрать, использовать и выжать максимум из ИИ-ассистентов и агентов?
- Что делать бизнесу в эру ИИ-хаоса? Куда бежать или, может, наоборот, успокоиться?
- Что там в диффузионках? Когда уже мы сможем генерировать “Аватар - 5” одним промтом через Apple Watch?
- Мультимодалки, тренировка своих моделей, open source vs prorietary и другие темы
- Так же ответим на вопросы аудитории, если уложимся в тайминг
Степан — исследователь, технологический стратег, серийный фаундер, работает (набегами) с NLP/ML с 2012 года. Ведущий вебинаров codex.town
Сергей — эксперт в области компьютерной графики, автор книги "Понимая Майя", исследователь искусственного интеллекта, ведущий экзистенциального канала Метаверсище и ИИще.
Подключиться к прямому эфиру можно во вторник, 31 октября, в 19:00 MSK прямо в Телеграме в канале Метаверсище и ИИще. Чтобы не пропустить, можно регистрироваться тут.
Завтра, во вторник, 31 октября, пройдет второй выпуск ИИ-радио: прямой эфир c Сергеем Цыпцыным, автором Метаверсище и ИИще и со Степаном Гершуни, автором канала Gershuni, на тему “Как ИИ меняет мир?”
Продолжим разговор о том как стремительное развитие генеративного ИИ влияет на различные области жизни и экономики, и свернем в сторону агентов, агентности и прочей самостоятельности ИИ:
- Как выбрать, использовать и выжать максимум из ИИ-ассистентов и агентов?
- Что делать бизнесу в эру ИИ-хаоса? Куда бежать или, может, наоборот, успокоиться?
- Что там в диффузионках? Когда уже мы сможем генерировать “Аватар - 5” одним промтом через Apple Watch?
- Мультимодалки, тренировка своих моделей, open source vs prorietary и другие темы
- Так же ответим на вопросы аудитории, если уложимся в тайминг
Степан — исследователь, технологический стратег, серийный фаундер, работает (набегами) с NLP/ML с 2012 года. Ведущий вебинаров codex.town
Сергей — эксперт в области компьютерной графики, автор книги "Понимая Майя", исследователь искусственного интеллекта, ведущий экзистенциального канала Метаверсище и ИИще.
Подключиться к прямому эфиру можно во вторник, 31 октября, в 19:00 MSK прямо в Телеграме в канале Метаверсище и ИИще. Чтобы не пропустить, можно регистрироваться тут.
Понятно, что без ИИ стратегии среднему и крупному бизнесу уже никуда. Но и государствам тоже. Я много писал, что ИИ — это не только секстинг с вашими любимыми персонажами аниме, но еще и военная и политическая технология.
Байден сегодня подписал Executive Order на тему создания стандартов и даже целого отдельного агентства (ОООО, бюджеты!) по контролю над рисками развития ИИ. Но, если быть более точным, то вопрос здесь меньше рисков ИИ для человечества в целом, а больше рисков ИИ для внутре- и гео- политической ситуации для США.
Некоторые темы из документа:
— всем кто делает большие модели — разработать и поделиться с федеральным правительством своими eval бенчмарками, в том числе safety и constitutional AI (но без деталей, кому какими, как)
— что-то сделать чтобы ИИ не создавал биологически смертельных вирусов и не влиял на публичное мнение фейк-контентом (но не понятно что)
— применять ИИ в образовании и здравоохранении, в том числе для создания AI-powered государственных инструментов для образования (кайф!)
— подумать а что делать с теми кожаными, которых ИИ заменит с потрохами
— добавить ИИ в судебную систему
— больше ИИ исследований: давать визы и бабки всем кто шарит за умножение матриц
— каждому министерству — ИИ-стратегию! (помните, в РФ пытались сделать замминистра по цифровизации, но что-то пошло не так?)
Рекомендую еще почитать AI Bill of Rights, над которым администрация Байдена работает уже не первый месяц. Там сильно больше деталей.
Байден сегодня подписал Executive Order на тему создания стандартов и даже целого отдельного агентства (ОООО, бюджеты!) по контролю над рисками развития ИИ. Но, если быть более точным, то вопрос здесь меньше рисков ИИ для человечества в целом, а больше рисков ИИ для внутре- и гео- политической ситуации для США.
Некоторые темы из документа:
— всем кто делает большие модели — разработать и поделиться с федеральным правительством своими eval бенчмарками, в том числе safety и constitutional AI (но без деталей, кому какими, как)
— что-то сделать чтобы ИИ не создавал биологически смертельных вирусов и не влиял на публичное мнение фейк-контентом (но не понятно что)
— применять ИИ в образовании и здравоохранении, в том числе для создания AI-powered государственных инструментов для образования (кайф!)
— подумать а что делать с теми кожаными, которых ИИ заменит с потрохами
— добавить ИИ в судебную систему
— больше ИИ исследований: давать визы и бабки всем кто шарит за умножение матриц
— каждому министерству — ИИ-стратегию! (помните, в РФ пытались сделать замминистра по цифровизации, но что-то пошло не так?)
Рекомендую еще почитать AI Bill of Rights, над которым администрация Байдена работает уже не первый месяц. Там сильно больше деталей.