Deep Learning
Определение
Глубокое обучение — подраздел машинного обучения, использующий многослойные нейронные сети для обработки сложных данных и выявления абстрактных паттернов.
Простое объяснение
Представь много-много слоёв фильтров, через которые проходит информация. Каждый слой находит что-то важное, и в конце получается умный вывод.
Подробнее
«Глубина» означает множество слоёв в нейросети. Преимущества:
- Автоматическое извлечение признаков
- Работа с неструктурированными данными
- Масштабируемость с ростом данных
Архитектуры: CNN (изображения), RNN/LSTM (последовательности), Transformer (текст).
Связанные термины
Self-Attention
Самовнимание — разновидность attention, где каждый элемент последовательности сравнивается со всеми остальными элементами той же последовательности.
CLIP
CLIP (Contrastive Language-Image Pre-training) — модель OpenAI, связывающая изображения и текст в общем пространстве представлений.
Transfer Learning
Трансфер обучения — перенос знаний, полученных моделью на одной задаче, для решения другой, родственной задачи, ускоряя обучение и улучшая результаты.
Quantization
Квантизация — техника сжатия AI-моделей путём уменьшения точности чисел (например, с 32-bit до 4-bit), ускоряющая инференс и снижающая требования к памяти.