T3 Chip và phần cứng NVIDIA Tuyển sinh viên mới tốt nghiệp
NVIDIA AI Infra tuyển mới tốt nghiệp (2)
Câu hỏi phỏng vấn tuyển mới tốt nghiệp AI Infra tại NVIDIA thật, gồm tối ưu toán tử
Tối ưu toán tử
Kiến thức cơ bản
- Ý nghĩa và nguyên lý SIMT (Single Instruction, Multiple Threads).
- Occupancy chịu ảnh hưởng yếu tố nào? Điều chỉnh thế nào?
- Độ hạt của bank conflict là bao nhiêu?
- Chọn kích thước tile GEMM bị ràng buộc bởi yếu tố nào?
- Vì sao đọc/ghi global memory bằng float4 cải thiện hiệu năng?
- Một Block có thể bị schedule sang các SM khác nhau không?
- Dung lượng Cache của các dòng GPU mainstream?
- Warp Divergence ảnh hưởng hiệu năng cụ thể thế nào.
- Cách hiện thực instruction-level parallelism (ILP) trên NVIDIA GPU.
Bài lập trình
- Hiện thực chuyển vị ma trận CUDA.
- Hiện thực tích ngoài vector.