Đếm Token AI & Tính toán Chi phí API

Phân tích số lượng tokens thời gian thực theo chuẩn bộ mã hóa o200k_base (GPT-4o) và cl100k_base, hiển thị trực quan phân rã từ ngữ và ước tính chính xác chi phí API.

Văn bản đầu vàoo200k_base
Chỉ số & Chi phí TokenGPT-4o
Số lượng Tokens
0tokens
Ký tự / Từ
0chars (0 words)
Tỉ lệ nén
~0chars/token
Chi phí Input ước tính
$0.00USD

Dán văn bản để phân tích Token và ước tính chi phí

Hỗ trợ tách từ BPE trực quan, bảng giá theo thời gian thực của GPT-4o, Claude 3.5 và Gemini 1.5.

Nhóm Trí tuệ nhân tạo (AI)•Tài liệu kỹ thuật & Đặc tả RFC

Tài liệu & Hướng dẫn chuyên sâu: Đếm Token AI & Tính toán Chi phí API (AI Tokenizer & Cost Calculator)

1. Tổng quan & Nguyên lý hoạt động

Khi làm việc với các Mô hình ngôn ngữ lớn (LLM) như OpenAI GPT-4o, Anthropic Claude 3.5 hay Google Gemini 1.5, việc hiểu rõ cách thức phân tách câu chữ thành Token (Tokenization) và dự trù ngân sách API là yếu tố sống còn cho mọi kiến trúc ứng dụng AI. Thuật toán Byte-Pair Encoding (BPE) không chia từ theo dấu cách đơn thuần mà chia nhỏ văn bản thành các đoạn chuỗi nhị phân tối ưu. Tiện ích AI Tokenizer của Verdbench cung cấp bộ đếm token chuẩn xác 100% Client-Side sử dụng thư viện `js-tiktoken`, hỗ trợ đầy đủ bộ từ vựng 200,000 token mới nhất (`o200k_base` của GPT-4o/o1/o3-mini) và bộ mã hóa 100,000 token kinh điển (`cl100k_base` của GPT-4/Claude/Gemini). Người dùng có thể trực quan hóa từng token riêng biệt với dải màu pastel bắt mắt, theo dõi tỉ lệ ký tự trên token và tra cứu bảng giá so sánh chi phí đa mô hình theo thời gian thực.

2. Ưu thế kiến trúc & Tính năng nổi bật

Bộ mã hóa BPE o200k_base & cl100k_base chuẩn xác

Sử dụng thuật toán Tiktoken nguyên bản chạy trực tiếp trên trình duyệt, đảm bảo số lượng token trả về trùng khớp tuyệt đối 100% với OpenAI API.

Trực quan hóa Tokens với dải màu Pastel luân phiên

Từng token được phân biệt rõ ràng bằng màu sắc riêng biệt, cho phép rê chuột để tra cứu Token ID, mã Hex, độ dài byte và sao chép ID chỉ với 1 cú nhấp chuột.

Bảng tính chi phí đa mô hình (Multi-Model Cost Comparison)

Tự động tính toán chi phí Input, Output và chi phí cho 1,000 lượt gọi API trên các mô hình hàng đầu hiện nay: GPT-4o, GPT-4o mini, Claude 3.5 Sonnet, Claude 3.5 Haiku, Gemini 1.5 Flash và DeepSeek V3.

3. Bảng đối chiếu giá API và bộ mã hóa của các mô hình AI phổ biến

Thông số kỹ thuật và mức giá tham chiếu tiêu chuẩn (tính trên 1 triệu tokens):

Mô hình AIBộ mã hóaGiá Input / 1MGiá Output / 1MContext Window
GPT-4oo200k_base$2.50 (Cached: $1.25)$10.00128,000 tokens
GPT-4o minio200k_base$0.15 (Cached: $0.075)$0.60128,000 tokens
o3-minio200k_base$1.10 (Cached: $0.55)$4.40200,000 tokens
Claude 3.5 Sonnetcl100k_base eq.$3.00$15.00200,000 tokens
Claude 3.5 Haikucl100k_base eq.$0.80$4.00200,000 tokens
Gemini 1.5 Flashcl100k_base eq.$0.075$0.301,000,000 tokens
Gemini 1.5 Procl100k_base eq.$1.25$5.002,000,000 tokens
DeepSeek V3cl100k_base eq.$0.14 (Cached: $0.014)$0.2864,000 tokens

4. Câu hỏi thường gặp (FAQ)

Giải đáp các thắc mắc phổ biến của lập trình viên khi sử dụng tiện ích Đếm Token AI & Tính toán Chi phí API (AI Tokenizer & Cost Calculator).

Token là đơn vị cơ bản mà các mô hình AI đọc và xử lý văn bản. Một token không nhất thiết là một từ nguyên vẹn: nó có thể là một từ ngắn (ví dụ: 'cat'), một phần của từ dài (ví dụ: 'token' và 'ization'), hoặc thậm chí là một ký tự đơn hay dấu cách. Theo quy tắc kinh nghiệm thông thường với tiếng Anh, 1 token tương đương khoảng 4 ký tự hoặc 0.75 từ. Đối với mã nguồn lập trình hoặc ngôn ngữ có dấu thanh như tiếng Việt, số ký tự trên mỗi token có thể dao động từ 1.5 đến 3 ký tự.

5. Công cụ liên quan