除了json和yaml,这个适合大模型的配置格式toon在推特上火了

68 阅读1分钟

刷到好几个了,每个都有5k点赞

image

image

G5qMVMlacAAosFZ

下面是我试的token对比,直接省了50%的tokens

imageimage

下图是原推有人评论这种简单格式是否能处理特殊情况

image

不得不说海外刻板印象真人头像,不过这两老哥的头像有点阴间了,实在想笑,。。其实大模型还真不认识这个叫toon的格式,太新了,期待后续发展。

原推链接 x.com/DataChaz/st…

{
  "reviews": [
    {
      "id": 101,
      "customer": "Alex Rivera",
      "rating": 5,
      "comment": "Excelllent!",
      "verified": true
    },
    {
      "id": 102,
      "customer": "Brij Pandey",
      "rating": 5,
      "comment": "Game changer!",
      "verified": true
    },
    {
      "id": 103,
      "customer": "Casey Lee",
      "rating": 3,
      "comment": "Average",
      "verified": false
    }
  ]
}

OpenAI官方token计算器,大文本也不容易卡,不同模型token是相近的。其他厂商都是提供库要本地运行

platform.openai.com/tokenizer