巷でウワサの TypeSafe.AI の Jev、招待がやってきたので使ってみる。汎化性能がすこぶる高い classifier という感じで面白い。インストラクションも自由に書けるしね。情報検索好き、としては rerank タスク計測してみるかね〜と軽くベンチマークを取ると、結構高速で良好な面白い結果に。

これは本格的にベンチマークを取らねば！とJev を reranker として計測できる実装を書いて、APIの無料枠を超えたので課金し、英語blog記事を書いて、みたいなことを進めていたら、エーアイ氏が「利用規約 Aug 27, 2026 2.3-fではベンチマーク結果の公開NGですよ？良いんですか？」と教えてくれる。まじか。確認するとちゃんと書いてあるね…。というわけでしばしお蔵入りとなったのであった。そのうち解禁されるだろうから、その時また…。

自分の仕事の1つは、特化性能が高いモデルを作ること(LLMにやらせるより100-1000倍ぐらい速く、かつ安価)だったりするが、Jev のような汎化性能が高くて速度も費用対効果も十分なモデルが溢れてきたら、その仕事の価値はだいぶ目減りしちゃうね。

近隣の草木が身をつける。1つ目の球状に身をつけているのはウド。2つ目のブドウっぽいものはヨウシュヤマゴボウ、毒。