Что такое токены, и с чем их едят.

Наткнувшись на очередную публикацию что такая-то нейронка обладает столькими-то токенами, я задался вопросом «А что вообще такое эти токены?». Я, как бывший преподаватель информатики и практикующий программист, знаю про мощность компьютера. А вот как эту машинную мощность продают разные сервисы от чатботов до генераторов видео в виде токенов для меня была загадка. С этими запросами за пояснением я обратился в ChatGPT. Дальше объясняет он. Разберёмся по полочкам, без воды. Читайте по ссылке: https://www.softmaster95.ru/chto-takoe-tokeny-i-s-chem-ih-edyat/