XのGrokは、AIコーディングテストでの期待を上回ります

Xが最初にチャットボットをリリースしたとき、それは有料の壁の裏に隠されていました。しかし、ことわざにあるように、「タダで昼食は食べられない（TANSTAAFL）」という状況でしたが、最近、XがGrokを全員に開放することを決定するまではそうでした。その能力に興味を持った私は、プログラミングテストを通じてそれ試してみることにしました。

私はGrokにいつも特別な愛着を持っていました。その名前のおかげです。この名前は、私が最も好きなSF作家の一人、ロバート・ハインラインによって作られました。ハインラインの作品は、私の若い心を形成する上で大きな役割を果たしました。メディアの消費に対してかなり厳格だった私の両親は、地元の図書館でSFを読むことを許してくれました。「科学」とラベル付けされたものは教育的なものに違いないという前提のもとで。

ハインラインの物語は単に面白かっただけでなく、考えさせられるもので、社会規範に挑戦し、科学的テーマと社会的解説を織り交ぜていました。『異邦人』で紹介された「grok」という言葉は、深い基本的な理解を体現しており、AIチャットボットの名前にふさわしいものです。

しかし、ここに落とし穴があります...

Grokが使用している大規模言語モデル（LLM）について尋ねたところ、*銀河ヒッチハイク・ガイド*の機知と反抗心にインスパイアされていると述べました。*ヒッチハイク*には確かに魅力がありますが、実際には「grok」という言葉は使われていません。それでは、プログラミングテストに移りましょう。

1. WordPressプラグインの作成

このテストでは、AIにPHPプログラミングスキルとWordPressプラグイン開発の知識を示すことが求められました。これは私の妻からの実際の依頼に由来しており、彼女のeコマースサイトの月次関与デバイス用に名前をランダム化するツールが必要でした。ひねりは、一部のユーザーが複数エントリーを持つ可能性があるため、ランダマイザーはこれらの名前が隣り合わないようにする必要がありました。

コードはユーザーにとって使いやすく、名前を貼り付けてボタンをクリックするだけでリストを取得できるようにする必要がありました。Grokはこのテストを見事に通過しました。インターフェースはクリーンで機能的で、求められた通りの動作をしました。

2. 文字列関数の書き換え

2番目のテストは、ドルとセントの金額を検証する関数に関するユーザー報告の問題を修正することでした。私の元のコードは整数のみを受け入れていたため、$5は有効でしたが、$5.25は無効でした。Grokは正規表現を書き換え、勝利に近づきました。しかし、.5のような数字を有効な通貨として認識できず、2重変換による非効率な方法を使用していました。よって、このテストでは負けです。

3. 厄介なバグの発見

このテストでは、WordPressフレームワークとAPIを理解して微妙なバグを特定する必要がありました。多くのLLM、最初は私自身も含めて、これに苦労しました。しかし、Grokはこれを正確かつ有用な解決策を提供し、見事に成功しました。3つのテストのうち2勝です。

4. スクリプトの作成

最後のテストは難易度が高く、ニッチなMacスクリプトツールであるKeyboard Maestroの知識と、Keyboard Maestro、Chrome、AppleScriptの複数の環境で同時にコードを書く能力が必要でした。これまでこのテストを通過したのは、Google GeminiとGPT-4以上のChatGPTだけでした。しかし、Grokはこれを見事にクリアし、4つのテストのうち3勝を確保しました。

最終的な感想

Grokはこれらのテストでよく持ちこたえました。先行ゼロなしの通貨値を受け入れていれば完璧だったでしょう。XがTwitterを置き換えてからの変化に対して複雑な気持ちを持っていますが、Grokは特にプログラミングスキルにおいて堅牢なチャットボットであることが証明されました。

Grokについてどう思いますか？試してみましたか？また、『異邦人』や*銀河ヒッチハイク・ガイド*についてはどうですか？以下のコメントであなたの考えを共有してください。それでは、また会いましょう、そしてすべての魚に感謝！