Latent Space
Определение
Latent Space — многомерное пространство скрытых представлений, где нейросеть кодирует семантику данных.
Простое объяснение
Latent Space — как карта смыслов в голове AI. Похожие вещи расположены рядом, и можно "путешествовать" между концепциями.
Подробнее
Связанные термины
VAE
Variational Autoencoder — генеративная модель, которая учится кодировать данные в компактное латентное пространство и декодировать обратно, используя вероятностный подход.
FlashAttention
FlashAttention — алгоритм вычисления attention, оптимизированный для GPU, который значительно снижает использование памяти и ускоряет обучение и inference.
Scaling Laws
Scaling Laws — эмпирические закономерности, связывающие производительность модели с её размером, объёмом данных и compute.
Zero-shot Learning
Zero-shot обучение — способность AI выполнять задачи, на которых модель не обучалась напрямую, используя общие знания и инструкции.