LMArena上に秘密裏に追加されたと噂される新モデルについての検証動画である。Gemini 3.0 ProまたはGemini 3.0 Flashと推測される「lithium flow」と「Orion Nist」というコードネームのモデルが話題となっており、実際にバトルモードで試した結果、予想外にもGLM 4.5が優れたSVG生成能力を示した。秘密モデルへのアクセス方法と実際の性能テストを通じて、これらの匿名モデルの正体に迫る内容となっている。
LMArenaに追加された秘密モデルの噂
Gemini 3.0 ProまたはおそらくGemini 3.0 FlashがLMArenaに追加されたという強い噂があります。そしてこれらのモデルのコードワードは、lithium flowとOrion Nistです。これが正確にGemini 3.0 Proだとは思いません。なぜなら、私たちがテストで行ったものとはまったく近くないからです。しかし正直なところ、これらのモデルは非常に興味深いものです。
そこで私はLMArenaに行って、モデルを使ってみることにしました。そして幸運にもOrionistを入手することができ、シンプルなニンテンドースイッチのSVGを尋ねてみました。そうするとSVGが得られて、そのSVGをプレビューしてみると、これが表示されました。これはどのLLMから見ても、ニンテンドーに対して見られる最高のSVGデザインの1つです。
では、もう一度やってみて運試しをしてみます。皆さんもこのモデルにアクセスする方法を試すことができます。LMArenaに行きます。LMArenaに行くと、このように表示されます。このLMArenaを純粋にリフレッシュしてみます。そうすれば、最初から何をすべきか正確に分かるでしょう。
バトルモードでの秘密モデルへのアクセス方法
ここにバトルモードのサイドバイサイドがあります。サイドバイサイドではこのモデルは表示されません。もしOrionを検索しても、ここにはOrionは表示されません。バトルモードにいる必要があります。バトルモードに行って、何か尋ねるだけです。例えば「ゲームボーイコントローラーのシンプルなSVGを作成して」と言って送信します。
送信すると、あなたのクエリまたはプロンプトが2つの異なるLLMに送信されます。どのLLMかは表示されません。これは二重盲検テストです。アシスタントAとアシスタントBがあります。正直なところ、もしこれがGemini 3.0 Proなら、これほど速いとは期待していませんでした。でも見てみましょう。
ここでSVGをコピーして、SVGビューアーに戻って貼り付けます。これが1つ目です。かなり悪いと言わざるを得ません。そして2つ目がこちらです。コピーして貼り付けます。これは少なくとも十分まともだと言えるでしょう。でも、接戦です。両方とも悪いと言いたいです。ここで両方とも悪いと表示されています。両方とも悪いと言います。どちらがどちらか見てみましょう。
Claude OpusとShashaが表示されました。正直なところ、Shashaが何なのか全く分かりません。
予想外の結果を見せたGLM 4.5
それでは、ゲームボーイコントローラーの同じクエリをもう一度送信します。ゲームボーイコントローラーのシンプルなSVGを作成してもらいました。レスポンスが返ってきました。シンプルなSVGと書いてあります。SVGをコピーして、ここに戻って貼り付けます。
これはかなり良いです。おそらくこれまで見た中で最高だと言わなければなりません。そしてこれをコピーして、ここに戻って貼り付けます。これはまあまあです。左側のものが絶対に気に入りました。左の方が良いです。では、これがどのモデルか見てみましょう。
これはGLM 4.5です。GLM 4.5は私を驚かせ続けています。これがlithium flowです。人々がこれをGemini 3.0 Proだと言っている理由が分かりません。これは私たちが以前見たものとは全く似ていません。
リーク時やA/Bテスト中にGemini 3.0 Proが非常に良い性能を発揮しているのを見てきました。これはGemini 3.0 Proには見えません。Gemini 3.0 Flashの可能性はあります。なぜなら、再び速いからです。しかし、GLM 4.5がこれほど優れているとは思いませんでした。私はGLM 4.5の大ファンです。しかしSVGテストでもこのモデルはかなり良い性能を示しています。
秘密モデルを試す方法
これを試してみたい場合は、LMArenaに行ってバトルモードを選択し、新しいチャットをクリックして、クエリを送信するだけです。そして適切なモデルが提示されるのを待ちます。これが皆さんのお役に立てば幸いです。また別の動画でお会いしましょう。ハッピープロンプティング。
コメント