RubyGems Navigation menu

ru_token 0.1.23

[DEPRECATED] switch to 'j_r_r_token'. RuToken is a Ruby gem that wraps the tiktoken Rust library, enabling fast and efficient tokenization for OpenAI models. It supports multiple models including o200k_base, cl100k_base, p50k_base, and r50k_base.

Gemfile:
=

安裝:
=

版本列表:

  1. 0.1.23 August 03, 2025 (13.5 KB)
  2. 0.1.22 August 03, 2025 (13.5 KB)
  3. 0.1.21 August 01, 2025 (13.5 KB)
  4. 0.1.20 August 01, 2025 x86_64-linux (24.6 MB)
  5. 0.1.20 August 01, 2025 arm64-darwin (23.9 MB)
顯示所有版本(共 100)

Development 相依性套件 (3):

bundler >= 2.0
rake ~> 13.0

擁有者:

推送者:

作者:

  • Logan Bresnahan

SHA 256 總和檢查碼:

=

總下載次數 14,014

這個版本 296

版本发布:

授權:

MIT

Ruby 版本需求: >= 2.7.0

RubyGems 版本需求: >= 3.0.0

相關連結: