#apro $AT @APRO Oracle $AT #APRO token" (hoặc đơn giản là token trong AI) đề cập đến một mảnh văn bản—một từ, một phần từ, hoặc ký tự—mà các mô hình ngôn ngữ lớn (LLMs) như GPT chia nhỏ văn bản để xử lý, hoạt động như đơn vị cơ bản của ngôn ngữ cho các mô hình này. Các token cân bằng kích thước từ vựng và ý nghĩa, với các từ phổ biến là các token đơn lẻ và các từ phức tạp được chia nhỏ (ví dụ, "hamburger" thành "ham," "bur," "ger"). Trong AI, các token rất quan trọng để hiểu ngữ cảnh, tính toán chi phí (các mô hình định giá sử dụng token), và quản lý các cửa sổ ngữ cảnh, ảnh hưởng đến chất lượng và tốc độ phản hồi, với ~100 token tương đương khoảng 75 từ tiếng Anh.

Chức năng: Chuyển đổi văn bản thành dữ liệu số để AI hiểu và tạo ra ngôn ngữ.

Kích thước: Thay đổi; khoảng 4 ký tự