T0 Công ty lớn ByteDance Tuyển sinh viên mới tốt nghiệp
ByteDance AI Infra tuyển sinh viên (1)
Câu hỏi phỏng vấn ByteDance AI Infra tuyển sinh viên, gồm tối ưu suy luận
Tối ưu suy luận
Tối ưu suy luận
- Các phương pháp tăng tốc suy luận mô hình lớn phổ biến là gì?
- Có những kỹ thuật nén mô hình và lượng tử hóa nào? Lợi thế chính của lượng tử hóa nằm ở đâu?
- Lượng tử hóa trọng số, activation và KV Cache lần lượt mang lại lợi ích gì?
- Nguyên lý KV Cache là gì? Vì sao PagedAttention cải thiện hiệu quả?
- Cơ chế Prefix Cache là gì? Phù hợp kịch bản nào?
- Xây một ứng dụng AI Agent, đại khái cần những module cốt lõi nào?
Kinh nghiệm dự án
- Hãy đào sâu kinh nghiệm dự án của bạn.
Bài lập trình
- Một vòng có 10 nút (đánh số 0-9), xuất phát từ nút 0, mỗi bước đi một nút theo chiều kim đồng hồ hoặc ngược chiều, tìm tổng số cách đi khác nhau sau n bước quay về nút 0.