66b hay 66 tỷ tham số là một khái niệm dùng để chỉ một kích thước của mô hình ngôn ngữ lớn. Các mô hình như vậy được huấn luyện trên một tập dữ liệu cực lớn và có khả năng sinh văn bản tự nhiên, trả lời câu hỏi, tóm tắt văn bản và tham gia vào nhiều tác vụ NLP.
Phương pháp mới nhất dựa trên kiến trúc Transformer cho phép xử lý ngữ cảnh dài và tăng hiệu suất học hỏi khi số tham số tăng lên. Với 66 tỷ tham số, mô hình cần nguồn lực tính toán lớn, chú ý đến chi phí, tối ưu hoá phân phối tài nguyên, và quản trị rủi ro liên quan đến sai lệch và thiên vị dữ liệu.
66b có thể hỗ trợ viết mã, sáng tạo nội dung, phân tích cảm xúc, dịch ngôn ngữ, và hỗ trợ giáo dục. Tuy nhiên, nó đối mặt với thách thức về sự an toàn, khả năng kiểm soát đầu ra, độ tin cậy và chi phí vận hành. Việc tinh chỉnh và giám sát tác vụ cụ thể giúp khai thác hiệu quả hơn nhưng cần dữ liệu đầy đủ và đánh giá rủi ro thích hợp.