ONE is preparing: 01 / INITIALIZING MODEL ROUTER. Evaluating routing across providers.
Current state
01 / INITIALIZING MODEL ROUTER.

Evaluating routing across providers.

Start learning
← AI Researcher

AI Researcher

Kiến trúc tiên tiến

Vietnamese onlyThe learning content is available in Vietnamese only. The surrounding interface follows your language.

Transformer and Flash Attention; VAE, GAN, diffusion, autoencoder MoE, state-space models, ViT, U-Net, NeRF

23h12 lessonsAI Researcher

Format

Guided module

Duration

23h

Lessons

12

What you will practice

  • Transformer and Flash Attention; VAE, GAN, diffusion, autoencoder
  • MoE, state-space models, ViT, U-Net, NeRF

Lesson order

12 lessons
1

Kiến trúc Transformer

Kiến trúc nền tảng của mọi LLM hiện đại, dùng self-attention thay vì hồi quy

lesson115 min
2

Tự chú ý

Cơ chế cho phép mỗi vị trí trong chuỗi chú ý đến mọi vị trí khác

lesson115 min
3

Flash Attention

Thuật toán tối ưu tính attention nhanh hơn và tiết kiệm bộ nhớ GPU bằng kỹ thuật tiling

lesson115 min
4

Bộ tự mã hóa

Mạng nén dữ liệu vào biểu diễn chiều thấp rồi tái tạo lại, học đặc trưng quan trọng nhất.

lesson115 min
5

Bộ tự mã hóa biến phân

Autoencoder với không gian tiềm ẩn có cấu trúc xác suất, cho phép sinh dữ liệu mới

lesson115 min
6

Mạng đối sinh

Hai mạng cạnh tranh: Generator tạo dữ liệu giả, Discriminator phân biệt thật/giả

lesson115 min
7

Mô hình khuếch tán

Sinh dữ liệu bằng cách học đảo ngược quá trình thêm nhiễu từng bước

lesson115 min
8

Hỗn hợp chuyên gia — Chia để trị

Kiến trúc mô hình sử dụng nhiều mạng con chuyên biệt (chuyên gia), chỉ kích hoạt một vài chuyên gia cho mỗi đầu vào.

lesson115 min
9

Mô hình không gian trạng thái — Đối thủ của Transformer

Kiến trúc mô hình tuần tự hiệu quả dựa trên lý thuyết hệ thống điều khiển, xử lý chuỗi dài nhanh hơn Transformer.

lesson115 min
10

Transformer thị giác

Áp dụng kiến trúc Transformer trực tiếp cho hình ảnh bằng cách chia ảnh thành các patch

lesson115 min
11

Kiến trúc U-Net

Kiến trúc encoder-decoder hình chữ U với skip connections cho phân đoạn ảnh

lesson115 min
12

Trường bức xạ nơ-ron

Biểu diễn cảnh 3D bằng mạng nơ-ron, tái tạo góc nhìn mới từ ảnh 2D

lesson115 min