LLM — это как zip-архив всего человеческого знания, упакованный в несколько сотен гигабайт. Чтобы создать такую модель, нужны тысячи GPU и миллиарды долларов, но в итоге она умещается на карте, которую можно положить в ладонь. Этот процесс сжатия информации в так называемое «латентное пространство» — пожалуй, самая недооценённая особенность AI. Модель не хранит копии текстов или картинок: в ней нет текстов Шекспира, но есть вся абстрактная информация о его пьесах — сюжеты, персонажи, стиль. Нет фотографий лиц, но есть знание о «лицевости» и «собачности».
Латентное пространство — это многомерная карта, где каждому понятию соответствует свой вектор-направление. «Кошачесть» — это направление, «пушистость» — тоже, и их можно комбинировать: сделать предмет более пушистым или менее кошачьим. В этом пространстве связанные вещи лежат рядом: собаки и кошки пересекаются по векторам «хвост», «уши», «четыре лапы». Огромное достижение в том, что всё — от звука всплеска воды до понятия простого числа — сосуществует на одной карте. LLM не думает, а потом пишет: письмо для неё и есть мышление.
С помощью этого пространства можно делать невероятные вещи. Например, перенести стиль акварели Уинслоу Хомера на ваш набросок — стиль это просто вектор. Или ответить на вопрос «что было бы, если бы римляне изобрели порох?» — для AI это тривиальная прогулка по карте.
Вот что можно делать с латентным пространством. Прототипирование: «добавить Африки» в пароли, кухни или йогу — это просто сдвиг по вектору. Разведка белых пятен: между известными вещами есть неизученные области, и теперь их можно исследовать систематически. Поиск аналогий: паттерн решения из геологии может идеально подойти для иммунологии — человек редко видит такие пересечения, а LLM видит. Измерение: можно делать примитивную арифметику — «король минус мужчина плюс женщина равно королева». Симуляции: латентное пространство умеет точно воспроизводить физику, от траектории мяча до плавления керамики. Параллельные миры: построить трёхмерный мир с одной третью гравитации или где победил Танос — теперь это дёшево.
Наконец, появится пространство личное: вы сможете за полмиллиарда долларов обучить свою модель на собственных дневниках, идеях и творчестве — получится уникальный AI с вашим уклоном. Лабиринт из миллиардов векторов станет основой для новой эры творчества.