Сегодня 60 лет Илье Сегаловичу. https://iseg.ya.ru

Очередной ответ на периодически задаваемый мне вопрос “Где можно тебя послушать вживую?”. Со 2 по 4 октября в Иннополисе пройдет форум Digital Innopolis Days 2024 & Innopolis AI Conference. Спасибо организаторам, они не стали задавать тему, а предложили самому выбрать, что хочется сказать про будущее любимых технологий:)
Почитайте программу, кстати, там есть кого послушать и без меня, немало крутых спикеров, — а если живьем доехать, то можно много с кем из ценных людей пообщаться (и на роботов посмотреть).
По традиции, будет нормальная трансляция, регистрация открыта до 20 сентября для офлайн-участников и до 2 октября — для онлайн-участников.
(Промокод на скидку - PartnerDID :) )

Казалось, на фоне Google, Microsoft и даже X с их датацентрами, где счет мощнейших GPU если еще не идет, то очень скоро пойдет на сотни тысяч штук, Oracle как-то затерялся.
Но нет. В недавнем квартальном отчете Ларри Эллисон не только рассказал о хороших результатах, но и обрисовал интересное будущее своей компании.
Он полагает, что сейчас создание новой большой качественной модели с нуля обойдется в $100 млрд и 4,5 года разработки — и эти игры он оставляет другим, сосредотачиваясь в основном на инференсе, благо клиентам массово нужно именно это.
И Oracle находится в процессе создания вычислительного суперкластера, который can scale up to 131,072 Blackwell GPUs with NVIDIA ConnectX-7 NICs for RoCEv2 or NVIDIA Quantum-2 InfiniBand networking to deliver an astounding 2.4 zettaflops of peak AI compute to the cloud.
Число самих датацентров тоже будет быстро расти: от текущих 160 его планируется довести до 2000. Потребление мощности каждым из них ожидается на гигаваттном уровне и при этом без перегрузки электросетей и увеличения углеродного следа: три компактных ядерных реактора на каждый ДЦ полностью решают проблему:)
https://wccftech.com/oracle-to-deploy-a-supercluster-of-130000-nvidia-blackwell-gpus-alludes-to-a-gigawatt-capacity-data-center-that-will-be-powered-by-3-nuclear-reactors/

В альтернативной истории сериала “Во имя всего человечества” конкуренция на Луне разворачивается между миссиями двух сверхдержав: СССР и США, где-то сбоку не очень заметно присутствует Северная Корея. В нашей текущей версии наблюдаемой истории герои гонки и борьбы обещают быть частично другими: США никуда не делись, а вот место СССР явно занимает Китай (в связке с Россией). Страна официально заявила, что первая фаза разворачивания лунной базы в районе южного полюса должна завершиться в районе 2035 (то есть всего примерно через десятилетие!); а полноценная база заработает в 2050.
Рендеры ILRS (International Lunar Research Station) напоминают кадры “For All Mankind” 😉
https://www.livescience.com/space/space-exploration/china-plans-to-build-moon-base-at-the-lunar-south-pole-by-2035

Любопытная заметка про то, как благодаря развитию современных моделей ИИ растет их прожорливость в отношении вычислительных ресурсов: раньше запросы росли примерно по закону Мура, а теперь — удваиваются каждые полгода.
И это обстоятельство вновь вывело на первый план компании, которые занимаются микропроцессорами, которые долго были где-то в тени софтверных гигантов. И выяснилось, что основные идеи и принципы создания чипов не менялись десятилетиями, постоянные улучшения были, в сущности, косметическими. Этот подход себя, кажется, исчерпал:
To maintain exponential gains in performance, chipmakers need new ideas. Some, like tighter integration between hardware and software, are incremental. Others are radical: rethinking silicon or ditching digital processing for other techniques.

https://www.economist.com/technology-quarterly/2024/09/16/ai-has-returned-chipmaking-to-the-heart-of-computer-technology

Разнообразие очков смешанной реальности в последнее время радует — а учитывая их низкую в сравнении с навороченными VR-шлемами цену, еще и позволяет надеяться, что их действительно начнут покупать.
Вчера во многих технологических изданиях появились сообщения, что Snap выпустил свои новые очки Spectacles 5, выглядящие, возможно, несколько вызывающе за счет своей громоздкости, — но зато получившие очень положительные отклики.
Сейчас их целевая аудитория — разработчики, поэтому распространяют их по подписке, $99 в месяц (и при этом надо коммититься на год).
Очки полностью автономны и при этом не слишком тяжелы (226 г), СТО Snap описывает их как computing overlaid on the world that enhances our experience of the people in the places that are around us.
При этом Snap подчеркивает свое партнерство с OpenAI и соответственно, возможности мультимодального общения с тамошними моделями. Считается, что оно will help developers create experiences with real-world context about the things people see or hear (or say).
Еще одна интересная заявка на ИИ-девайс, за которой интересно следить 🙂

https://www.technologyreview.com/2024/09/17/1104025/snap-spectacles-ar-glasses/. 

https://www.cnet.com/videos/i-wore-snaps-new-self-contained-ar-spectacles-and-snap-os/     

https://techcrunch.com/2024/09/17/snaps-extremely-large-spectacles-bring-impressive-ar-to-developers-at-99-a-month/

Я много лет топил (и продолжаю топить) за пользу, а подчас и необходимость, всем читать Канемана — и работникам технологических компаний в первую очередь. Я здесь не одинок, конечно: например, Илюша Сегалович когда-то много лет назад тоже убеждал программистов Яндекса читать его “Думай медленно…” — впрочем, без особого успеха.
И потому особенно приятно, что смысл прогресса моделей от OpenAI Сэм Альтман объясняет в канемановских терминах “системы-1” и “системы-2”: “The GPT series of models were amazing at 'system-1' type thinking, but what we wanted was systems that could reason. There is so much value if AI can reason across problems.” В этой терминологии, модели начиная GPT-4o1-preview начинают демонстрировать способности, свойственные “системе-2”: неторопливо и последовательно рассуждать, а не доверяться быстрым эвристикам.
Пока компания тут в самом начале пути: она справляется с рассуждениями настолько же (не)успешно, насколько GPT-2 справлялась с эвристиками. Первые признаки прогресса в новом направлении Альтман обещает нам показать, когда случится переход от o1-preview к o1: “The improvement curve is very steep, and things models can't solve today will be able to solve in a few months."

https://www.tomsguide.com/ai/chatgpt/chatgpt-is-upgrading-itself-sam-altman-says-next-gen-ai-could-invent-breakthroughs-cure-diseases

Ну ладно, пусть сегодня на канале день OpenAI — я стараюсь не злоупотреблять ссылками на них. Второй раз за день — как и в случае с Канеманом (см. предыдущий пост), радует знакомый тренд: любая крупная ИТ-компания, пусть и молодая, пусть и невеликая по численности, понимает, что без связи с образовательными институциями, без разработок специально под нужды образования — жить и выжить нельзя 🙂
И потому OpenAI наняла опытную Лию Бельски, много проработавшую в Курсере и в 2020 попавшую в список Forbes “40 under 40 in Tech”, которой предстоит стать first general manager of education, leading the artificial intelligence startup’s efforts to bring its products to more schools and classrooms.
В Курсере Лия отвечала за монетизацию, так что наверняка и академические партнерства OpenAI будут не только про социальную ответственность, но и про новые источники дохода. А главная ее задача звучит прямо как фрагмент целей хорошо знакомого Яндекс Образования и уже надвигающейся конференции YAC/e-2024 :)) “...work with leading academic institutions to ensure that people working across all disciplines and industries have the training they need to maximize the benefits of AI”
https://www.bloomberg.com/news/articles/2024-09-18/openai-hires-former-coursera-executive-to-bring-ai-to-classrooms

Иииии - по игре Atomic heart выйдет сериал от Кинопоиска. Краткое содержание от продюсеров: панк, безумие, роботы

Где-то на расстоянии около 20 млрд км от Земли летит сейчас давно потерявший с ней связь зонд “Пионер-10”. Но он продолжает нести то, что называют “посланием инопланетянам от жителей Земли” — металлическую пластину , на которой выгравированы фигуры мужчины и женщины, атом водорода и схема расположения Земли относительно нескольких пульсаров.
“Пионер-10” покинул Землю в 1972 году — с тех пор достигнут заметный прогресс в плотности и способах записи информации и в достижениях науки. На второй фотке можно различить знакомые человеческие фигурки, те самые, что на зонде (и человеческие пальцы для масштаба). А вот дальше интересней.
В том, что кажется сероватым прямоугольником на круглой стеклянной пластинке, записан человеческий геном целиком. А рядом — как и на пластинке на зонде — графическое объяснение того, что зашифровано в объемной решетке фемтосекундным лазером в объеме стекла. Утверждается, что на такую стекляшку можно записать до 360 терабайт данных, причем срок их сохранности достигает многих миллиардов лет, лишь бы температура не превысила 1000 С.
Пока что артефакт хранится в древней соляной пещере в Австрии, вдруг однажды пригодится, пусть даже и не нам 🙂
https://newatlas.com/technology/5d-crystal-360-terabytes-human-genome/

На прошедшей неделе вышел эпизод подкаста Acquired с Марком Цукербергом. И в нем есть любопытный и не часто обсуждаемый момент: Марк вспомнил, что когда он переместился в Долину, то обратил внимание на отсутствие технических знаний и/или технического образования у людей в руководстве стартапов:
“The CEO wasn't technical, the board of directors had no one technical on it, they had like one dude on the management team who was the head of engineering who was technical and everyone else wasn’t”
Удивительно, но эти стартапы считали себя технологическими компаниями. Марк счел, что в этом их слабое место , но и в другую крайность решил не ударяться:
"You don't want everyone to be an engineer because there's other things that matter too, but if you don't have enough of your kind of share of the company as engineers, then you're not a technology company. And I think that that also is important to the board in terms of how you weigh decisions and culturally things inside the company matters a lot."
Интересно, конечно, было б с этой точки зрения посмотреть на руководство сегодняшних стартапов — на первый беглый взгляд, ситуация изменилась не сильно:)

https://www.yahoo.com/tech/mark-zuckerberg-says-leaders-technical-092702401.html

…И почти тут же на глаза попался материал, перекликающийся с мыслями Цукерберга из предыдущего поста: обзор книжки Reentry, посвященной тому, как SpaceX под железным руководством Маска перезапустила глобальную космическую гонку, плавно угасавшую после эпохи прорыва в космос в прошлом веке.
Previously, it was a “cost-plus” industry, where companies bid on projects and got paid even if the work was massively over budget or overdue. SpaceX changed that model by bringing a startup mentality to the industry.
Автор ее отмечает, что компанию отличала и отличает крутая смесь блестящих инженеров (в широком смысле этого слова) и опытных людей из бизнеса. Именно поэтому переговоры, например, с NASA, велись в таком составе, что половина из заседавших утром на бизнес-встрече после обеда лично начинала в своих командах воплощать договоренности.
А еще был важный третий компонент: всех, от бизнесменов до технарей, собравшихся в компании, объединяла вера в ее миссию и преданность ей. При всей экстравагантности Маска, в своей любви к космосу он всегда был искренен, полагая, что if SpaceX makes a boatload of money, but doesn’t reach Mars, the company has failed.
Еще там много про интересно сложившиеся и на удивление плодотворные отношения с NASA, но это уж сами почитайте:)
https://nypost.com/2024/09/21/tech/elon-musks-spacex-began-a-new-space-race/

В мире бизнеса тихо и без лишнего шума появилась новая «мафия». За последние годы бывшие сотрудники OpenAI основали более 30 стартапов, которые в общей сложности привлекли инвестиции на миллиарды долларов. На инфографике — самые заметные из них. 

Предсказуемо, что практически все стартапы, основанные членами OpenAI Mafia — работают в сфере ИИ и часто конкурируют друг с другом. А некоторые из них (например, Anthropic и Perplexity) буквально отбирают хлеб у «материнской» компании. Попил кровушки OpenAI и её бывший соучредитель — великий и ужасный Илон Маск, который не только развивает собственный ИИ-стартап xAI, но и периодически судится со своими бывшими коллегами. 

И этот горшочек продолжает варить. Несколько месяцев назад из OpenAI ушёл директор по продуктам Питер Денг, а соучредитель Грег Брокман взял подозрительно длительный отпуск. Вполне возможно, что скоро мы увидим обоих в роли основателей собственных стартапов.

Как знаете, есть Paypal Mafia (Питер Тиль, Рид Хоффман, Илон Маск и др.). Активно развивается мафия Google — я писал про неё. Есть мнение, что в будущем OpenAI Mafia станет самой крупной из всех «технологических мафий». В компании сейчас около 2500 сотрудников, и какая-то часть из них обязательно отпочкуется с собственными проектами. Ну а за деньгами дело не станет — венчурные капиталисты буквально выстраиваются в очередь, чтобы вложить деньги в ИИ-стартапы.

Это уже много где успело промелькнуть, но и я примкну — правда же интересно и многообещающе. Легендарный Джонни Айв, создавший эстетику (очень при том функциональную!) устройств Apple, собрался что-то замутить с OpenAI, некоторые даже конкретно говорят, что это будет новое ИИ-устройство.
Мне лично интересно как раз потому, что Айв никогда не был замечен в красоте ради красоты: его решения прекрасны неожиданной практичностью и основаны на тщательном погружении в пользовательские сценарии. Значит, раз он в такую затею ввязался, он что-то видит про использование, которое надо облечь в адекватную и лаконичную форму — и тем отличается от создателей натужных и провальных устройств типа AI Pin от Humane. Интересно, что он увидел и что получится.
https://www.techradar.com/computing/artificial-intelligence/jony-ive-confirms-hes-working-on-a-device-for-openai-but-what-could-it-be

Про фрагментацию ИТ-мира и интернета в частности написано и сказано немало, тут и национальные запреты на использование китайского оборудования, и санкции в разные стороны, и блокировки с большими файрволами…
Но фрагментация расползается за пределы ИТ. Наряду с прочими актами, призванными защищать национальные интересы США, палатой представителей принят и Biosecure Act, который призван разграничить американскую и китайскую экосистемы биотеха.
Привычные приемы, опробованные на айтишечке: запрет на госконтракты для компаний, посмевших работать с Китаем и т.д.
Примечательно, что этот акт партийных разногласий не вызвал: поддержали и республиканцы, и демократы.
Сторонники акта прямо говорят: важен не сам прогресс и его результаты, а сохранение американского лидерства в процессе. Пострадают в том числе и американские разработки, затормозится создание новых лекарств — но это неважно, если такой ценой Китай можно оставить на вторых ролях.
Посмотрим, чем кончится дело. Попытка удушения того же Huawei привела к росту его самостоятельности и неожиданным успехам.
И теперь уже остается смотреть, до каких сфер ужмется научно-техническое сотрудничество двух стран и как поведет себя американский Сенат, когда в него поступит Biosecure Act. Авторы статьи замечают: The outcome is likely to shape the future of global life sciences R&D— и это, к сожалению, не преувеличение.
https://www.scmp.com/opinion/china-opinion/article/3279475/biotech-next-battleground-us-china-decoupling

Ох, не зря на днях писал тут про Лию Бельски, пришедшую в OpenAI налаживать связи с образованием. Недели не прошло, как анонсировали Академию OpenAI: она, впрочем, не то чтоб про академические связи, а про другую сторону образования, про инвестирование, в том числе экспертизой, в создателей AI-first продуктов (в профессиональное развитие и переподготовку, если на канцелярском).
Академия предоставит:
1. Обучение и технологическое наставничество
2. Кредиты на использование API
3. Сообщество единомышленников
4. Соревнования и инкубаторы в партнерстве с разными филантропами
Over the past year, we've seen first-hand that investing in AI education, resources, and community-building can have an outsized impact. — ну и сделали выводы:)
https://openai.com/global-affairs/openai-academy/

Юбилей, про который мало кто напишет: исполнилось 20 лет материалу, который раньше не был известен людям и за открытие которого авторы получили Нобелевскую. Имя материала — графен. Как обычно, сразу после его появления журналисты, способные транслировать только нечто сенсационное, и жадные стартаперы обещали златые горы и переворот мира. Автор статьи самокритично замечает: The popular media can certainly exaggerate science stories for clicks, but academics—including myself—are not immune from over-egging or speculating about their pet projects either.
Не случилось. Уже который раз не по делу все подряд использовали слово “революция”, в то время как открытие запустило куда более типичный эволюционный процесс: не создание новинок на ровном месте, а последовательную интеграцию нового материала в давно нами создаваемый новый материальный мир. Оказалось, что за 20 лет своей жизни графен проник в спортивное оборудование и обувь, смазочные материалы и электротехнику, наушники и кондиционеры — список можно долго продолжать. Автор заканчивает перечень весьма точной фразой, описывающей судьбу почти любой новинки, на старте окружаемой хайпом: I'm still waiting for my ride on a space elevator, but in the meantime, I'll take comfort in the fact that graphene is already helping to shape a better future—quietly and steadily.
https://phys.org/news/2024-09-graphene-space-elevator-material-quietly.html

И практически в подтверждение тезиса из предыдущего поста: очень похожий ореол окружает ИИ, и он своим сверканием только отвлекает от реально важного для большинства людей и бизнесов: от эволюционной модификации уже существующего с помощью новинки с необычными свойствами.
Это особенно касается уже работающих бизнесов. Автор лонгрида занимает любопытную должность в очень традиционной фирме: chief futurist with Deloitte Consulting.
И его советы, как и положено высказываниям консалтера, носят вполне деловой и практический характер: Keep your attention on business problems worth solving, and then (and only then) reach for these shiny new tools. Focusing on, (or worse, blindly idolizing) the AI tools themselves is supply-side thinking. Hammers in search of nails. Start with nails.
Вот это “начните с гвоздей” дорогого стоит:)) Вот еще бы люди прислушались:)

https://bigthink.com/business/humanity-strikes-back-the-5th-industrial-revolution/

Stability AI, от которой что-то уже несколько месяцев не было обсуждаемых новостей, выпустила неожиданный пресс-релиз: Джеймс Кэмерон (“Аватар”, “Титаник” и т.д.) вошел в совет директоров; называют его при этом не просто режиссером, а technology innovator, and visual effects pioneer — немаловажные свойства в контексте новой роли.
Компания на фоне новости скромно про себя пишет Both Cameron and Stability AI operate at the intersection of emerging technology and creativity.
Но гораздо интересней, что говорит сам Кэмерон. А он подчеркивает, что всю свою творческую жизнь искал новые способы рассказывать невероятные истории, и всю жизнь новые технологии ему в этом помогали — начиная с CGI 30+ лет назад.
Now, the intersection of generative AI and CGI image creation is the next wave. The convergence of these two totally different engines of creation will unlock new ways for artists to tell stories in ways we could have never imagined.
Можно много фантазировать на тему куда с точки зрения бизнеса этот кадровый шаг приведет Stability AI. Но мне куда интересней придумывать, куда индустрию заведет точка зрения Кэмерона:)

А в это время Майкл Бей...

Только где Кэмерон, и где Майкл Бей, снимающий одноразнообразные катастрофы, где вся идея "навалить побольше визуальных эффектов, а то, что сценария нет в принципе - так пипл и так схавает".

@cgevent