Token

Yapay zeka modellerinde metnin işlenme birimidir. Bir kelime genellikle 1-3 token'a karşılık gelir. Model maliyetleri ve bağlam penceresi token cinsinden ölçülür.