（来源：上观新闻）
这一观点🖋🇸🇹与 Anthr🇻🇺🌻opi🇸🇷c 内部一些声🦀🎪音一致，例如 🈂🍥Cla☺ude Code💏🛂 开发🍠者鲍里斯🗼🍤 · 切尔尼🌵曾表示，软件🇧🇮工程师这一🇻🇳🚴♀️职业将在今年🕰开始逐步淡化🇧🇾👨⚖️。
Cred🕚o高管将这😜笔交易🚊视为公司光通信业👄🆎务的转折点，预🏛计其ZeroF🇹🇷lap🚘😜光收发器、光🐣DSP和硅光子产💬👭品组合将在🇰🇭202🚀🥄7财年产生超过🦵😤5亿美元（约合人💰欧美成人国产精品高潮民币34亿元）的⛄🖥光业务收入🇨🇴。
例如：🌘🇬🇭 “的”🇻🇳🔌 → 🧤单独1👳🛍个token “🔝中国” → 1🖍💆♂️个token（高📉🐙频组合） “🇲🇲人工智🚭🍩能” → 2🇮🇲🎏个token（🇲🇾“人工”+“智🍛能”） 💿单个生僻字和长🇫🇮词被拆解成多🇧🇷个词元 对于低🧦频字或©🛁专业术语🇨🇫🥚，BPE算🇸🇹法缺乏足够的合并🤓🇦🇪动力，只能拆✍🔻分为基础字符🇧🇱🗓甚至UTF-8🗻👨❤️👨字节： “薹”🔭↩（生僻♎💶字）→ 可能被🙆♂️拆为2-🕤🆑3个token😋 “意大☸利薄底萨拉斯米肠🧺🚳欧美成人国产精品高潮披萨” 🥈→ 可能🇬🇮被拆为10+个🎟token 这种📪差异直接体🇲🇲现在计费上🌳。
