ChatGPT と Bing Chat は 現在最も人気のあるチャットボットの 2 つであり、両方とも OpenAI が作成した同様の大規模言語モデル (LLM) を利用しています。しかし、実際にどちらを使用するのが良いのでしょうか？
ChatGPT と Bing Chat AI はどちらも OpenAI によって開発された GPT 言語モデルに基づいていますが、実行されている バージョンが異なり 、入力の処理方法に違いがあります。 2023 年 4 月の時点で、Bing は GPT-4 モデル のテスト バージョンを使用していますが、ChatGPT は古い GPT 3.5 ターボ モデルを使用しています。どちらのチャットボットにも、さまざまな入力方法やインターフェイス機能など、言語モデルに基づいて構築されたカスタマイズがあり、Bing には特に Edge や Skype などのアプリケーションとの統合があります。
ChatGPT と Bing Chat はどちらも急速に変化しており、どちらのチャットボットも、試行のたびに特定のプロンプトに対してまったく同じ回答を提供しません。ここで使用したプロンプトによって結果が異なる場合があります。
使いやすさとアクセス
Bing Chat と ChatGPT は両方とも、アカウントにサインアップすれば誰でも利用できますが、Bing では最初に「待機リスト」に参加することになり、すぐにアクセスが許可されます。どちらのチャットボットにも Web バージョンが用意されていますが、Bing のサイトでは回避策がなければ Microsoft Edge を除くすべてのブラウザーがブロックされます。 Microsoft アカウントを使用して Bing Chat を使用するには、 bing.com/new を 参照してください。また、 ChatGPT の使用方法 についての説明があります。
Bing は、Microsoft Edge のサイドバー、Skype のチャットボット、モバイル Bing アプリなど、他の Microsoft アプリやサービスにも統合されています。 ChatGPT には公式のモバイル アプリはありません が、携帯電話やタブレットで Web アプリを使用できます。ただし、Microsoft は、Web インターフェイスから Edge サイドバー、Skype チャットボット、その他のインターフェイスに機能を追加するのが遅れています。 Bing Chat のすべての機能が必要な場合は、少なくとも現時点では Bing サイトを使用する必要があります。
ChatGPT と Bing Chat の Web インターフェイスは似ていますが、有用性を変える小さな違いがあります。 ChatGPT は、より長いコード ブロックや大きなコード サンプルなど、より多くのデータを取り込むように設計されています。 2023 年 4 月の時点で、Bing のプロンプトは 2,000 文字に制限されていますが、ChatGPT の制限はそれよりもはるかに高くなります (公式には明記されていません)。
事実の正確さ
ChatGPT には情報をリアルタイムで Web にインデックス付けする機能はありませんが、 プラグインを使用すれ ば最終的には可能になるでしょう。これは、2021 年 9 月に遡るモデル内のトレーニング データに限定されています。また、OpenAI は、データがどのように収集されたか、データの精度がどのようにテストされているかなどを共有することを好みません。 Bing も同じ GPT テクノロジーに基づいていますが、通常はトレーニング データよりも Web からの結果を優先します。
Bing Chat と ChatGPT は、国や州の首都、著名人の誕生時期などの基本的な事実に関しては、通常は正しいです。たとえば、Bing と ChatGPT は両方とも、英国の首都がどこであるか (ロンドン)、米国の国旗の星の数 (50 個)、犬の足の数 (4 つ) を正確に伝えることができました。 。単純であれば、どちらのボットもおそらく正しいでしょう…しかし、通常の検索エンジンも同様です。質問に答えるのにある程度の解釈が含まれる場合、問題が発生します。
たとえば、両方のボット に「米国の州都のうち、文字 A で始まるのはどれですか?」 と質問してみました。これは簡単そうに見えますが、それでも複数のステップからなるプロセスです。まず、すべての大文字のリストが必要で、次にそれをフィルタリングして、文字 A で始まるものに絞り込む必要があります。Wikipedia では、 Albany 、 Annapolis の合計 5 つ を数えています 。 アトランタ 、 オーガスタ 、 オースティン 。 Bing Chat は、米国の首都をリストしたいくつかの Web ページを引用して、質問に正確に答えました。 ChatGPT…いくつか問題がありました。
まず、ChatGPT は、アルバニー、アナポリス、アトランタ、オーガスタの 4 つの首都のリストを提供してくれました。その後、「テキサス州の州都であるオースティンもありますが、Aでは始まりません。」と書かれていました。同じ質問を複数回行うと、オースティンについての言及が完全に省略されることがあります。オースティンが見つからない理由を尋ねると、ChatGPT はオースティンが存在することを思い出し、エラーを謝罪しましたが、最初の回答と異なる理由は不明です。
ChatGPT の古いデータを使用した場合でも、両方のチャットボットが正しく回答できるはずの別の質問を試してみました。 「最近欧州連合に加盟したのはどの 3 か国ですか?」 ウィキペディア による と、クロアチアは 2013 年 7 月 1 日に加盟した最も新しい加盟国であり、ブルガリアとルーマニアはその前の同じ日、2007 年 1 月 1 日に加盟しました。
ChatGPT は、国の順序や日付も含めて、この質問を正しく答えます。 Bing はクロアチアが最近の加盟国であると 正確に述べて いますが、他の 2 か国としてスロベニアとマルタをリストしています。スロベニアとマルタはともに 2004 年 5 月 1 日に 他の 8 か国と同時に 加盟しましたが、それは 2007 年にブルガリアとルーマニアよりずっと前のことでした。
Bing はインターネットにアクセスできるためだけでなく、 最初の引用が 最近の国々の正確なタイムラインを含む EU の公式ページであるため、正しく答えているはずです。別の引用は、学校での使用を目的とした 2007 年以前の ウィキペディアのアーカイブ版 からのものであるようで、そこには 2007 年 1 月に加盟する国としてブルガリアとルーマニアがリストされていました。
要約すると、一般に Bing Chat は事実発見においては優れていますが、まだ完璧には程遠く、ChatGPT は通常、古いデータによってさらに制限されます。
文芸
プロンプトに基づいて文章や段落を作成できる機能は、ChatGPT の人気を高めるのに役立ちましたが、 必ずしも 正当な理由 があるわけではありません。ただし、ライティング機能を使用する無害な方法もいくつかあります 。テーブルトーク RPG 用の世界とキャラクターを設定したり 、長い記事を数文に要約したりするなどです。
まずは ストーリーを書いて みます。私は両方のチャットボットに 、「知覚力を獲得し、エンジニアに日々の様子を尋ねる IBM のスーパーコンピューターについてのストーリーを書いてください。ストーリーの長さは 3 段落だけにしてください。」と依頼しました。 Bing では、よりクリエイティブな回答を提供するように設計されたクリエイティブ モードに切り替えました (ただし、回答の実行には時間がかかります)。
ChatGPT はまともな短編小説を作成しましたが、取られた唯一の「創造的自由」は、スーパーコンピューターをワトソンと呼ぶことでした。これは、自然言語の質問に答えるために作られた 現実の IBM コンピューター と同じものです。エンジニアとコンピューターの間の対話は興味深いものだっただろうが、たとえ 3 段落の制限を取り除いたとしても、それは何も求めずに生み出されたわけではない。 GPT には show, don’t Tell という概念がないようです。
Bing のクリエイティブ モードも同様の文体で、「ある日、何か奇妙なことが起こった」ではなく、「ある日、何かが変わった」とコンピューターの変化が説明されています。繰り返しになりますが、登場人物間の会話やアドリブはほとんどなく、ビングはコンピューターにもワトソンと名付けました。
このバージョンでは、ワトソンはイベントの前ではなく知覚を獲得した後にその名前が付けられ、名前の由来が説明されました。繰り返しますが、実際の Watson コンピューターに関する情報を基にしています。
次の例では、ChatGPT と Bing を使用して、長いテキスト (新しい Fire TV と既存モデルの販売数に関する Amazon からのプレス リリース) の要約を作成してみます。タイトルなしでテキスト全体を各チャットボットに貼り付けました。Bing は URL が与えられれば Web ページを要約できますが、オンラインで関連するテキストを検索し、それを結果に混ぜることもあります。
まずはChatGPTです。具体的な内容を明記せずに要約を作成するよう依頼したところ、提供されたテキストは正確であるように見えましたが、ほぼすべて直接引用で構成されていました。また、世界中で2億台のFire TVデバイスが販売されているという言及も省略されているが、見方によってはそれも当然かもしれない。テレビのアップデートに興味がある人はおそらく気にしませんが、Amazon への投資家は気にするでしょう。
Bing は最大 2,000 文字のテキスト プロンプトしかサポートしていないため、テキスト ブロック全体を提供することはできませんでした。テキストを要約する方法について Web 検索を実行し、明らかなエラーのないまともな答えを提供しました。
Bing の答えとの違いが 1 つあります。要約は、ChatGPT とは異なり、「テキスト」を参照する要約であるということがより明確です。どちらのチャットボットでも、より具体的に結果をカスタマイズできます。
結論
ChatGPT と Bing は似ていますが、十分な違いがあるため、タスクごとにどちらかを選択するのが最善の戦略ではありません。 Bing は事実調査や最近の情報に関してははるかに優れていますが、まだ完璧には程遠いです。 Bing のチャットベースのインターフェイスと文字数制限の低さにより、主にプロンプトは数文以下に制限されますが、ChatGPT ははるかに大きく長いテキスト文字列やコードを受け入れることができます。 ( Google Bard もありますが、ChatGPT や Bing Chat ほど印象に残っているのは Bard の初期バージョンではありません。)
これらのチャットボットは今後数か月、数年にわたって進化し続ける可能性がありますが、現時点ではオールインワンのソリューションはありません。
