Nghiên cứu: ngôn ngữ phi tiếng Anh tiêu tốn nhiều token AI hơn, ngôn ngữ đắt nhất dùng 1,5x-5x nhiều hơn ngôn ngữ rẻ nhất, gây ra "thuế tokenizer" (Ananya Bhattacharya/Rest of World)

Ananya Bhattacharya / Rest of World : Nghiên cứu: ngôn ngữ phi tiếng Anh tiêu tốn nhiều token AI hơn, ngôn ngữ đắt nhất dùng 1,5x-5x nhiều hơn ngôn ngữ rẻ nhất, gây ra "thuế tokenizer" — Một số ngôn ngữ yêu cầu nhiều token hơn để các mô hình AI xử lý, làm tăng chi phí và giảm ngữ cảnh cho những người sử dụng chúng.