T0 Công ty lớn Tencent Tuyển sinh viên mới tốt nghiệp Vòng 1-2
Tencent AI Infra tuyển mới tốt nghiệp vòng một và hai (1)
Câu hỏi phỏng vấn Tencent AI Infra tuyển mới tốt nghiệp vòng một và hai thật, gồm tối ưu toán tử và các hướng liên quan
Tối ưu toán tử
Vòng một
Tối ưu suy luận
- So sánh khác biệt hiện thực source của TensorRT-LLM, AGI và vLLM
- Động lực thiết kế của continuous batching là gì
- Giới thiệu cấu trúc source và hướng hiện thực của fastllm.cpp
Kiến thức nền
- Trong Python, tác vụ nặng compute nên dùng multiprocess hay multithread
- Cơ chế hiện thực inheritance ở tầng thấp trong C++
- Các cách tăng tốc inference mô hình YOLO phổ biến
Bài lập trình
- Tổng mảng con lớn nhất
Vòng hai
Tối ưu suy luận
- Giới thiệu nguyên lý cốt lõi của vLLM và PagedAttention
- Hướng hiện thực PagedAttention bằng Triton
Kiến thức nền
- Phân tầng và đặc điểm của CUDA memory model
- Cách chạy ở compile time trong C++ (constexpr và tương tự)
Bài lập trình
- Đếm số bit 1 trong biểu diễn nhị phân của một số nguyên