プログラミングコード生成。Claude vs GPT-4

こんにちは。フリーランスエンジニアの太田雅昭です。

ChatGPTが登場してから、プログラミングにはAIによるサポートが欠かせなくなりました。VSCodeのGithub Copilotなどはその典型ですが、今回はブラウザでのChatの使用について。

ClaudeとGPT-4の違い

Claudeは2023年8月21日現在、2023年前半までのデータを持っています。対してGPT-4は2021年までのデータですので、最新情報を取れるClaudeの方が良いかと思って、使用してみました。

Claudeは現在日本では使用できないため、Poeを介して利用することとなります。

https://poe.com/

試してみた

以下は、米国株のランキングを取得するためのサンプルコードを作ってもらったときの、ClaudeとGPT-4の違いです。

Claude

Alpha Vantageのドキュメントには、GLOBAL_RANKING関数などは存在しません。AIによくある、息をするように嘘をつく現象が出ています。

GPT-4

こちらは自前でランキングを取得することを提案してくれています。まだこのコードは試していませんが、少なくともClaudeよりは地に足がついているかと思います。

最後に

Claudeには少し期待していたのですが、この結果からはあまりプログラミングには使えないかなという印象でした。以上、簡単ですが、ClaudeとGPT-4のプログラミングでの使用についてでした。