Perplexity Proでは、複数のAIモデルが使えるので、それらの回答にどのような違いがあるのか調べてみた。
調査方法
フォーカスを「ビデオ」とし、複数のAIモデルに同じ質問をして回答の違いをChatGPT4oで分析する。
20個の動画を上げてと各AIに指示を与えましたが、20個回答していないAIもあります。
各AIが何個回答しているかを回答してください。
GPT-4o: 9個
Sonar Huge: 10個
Sonar Large: 6個
Claude 3.5 Sonnet: 10個
Perplexity: 11個
Claude 3 Opus: 12個
これらの結果から、いくつかのAIは20個の動画をリストアップしていませんでした。
各AIが回答した動画の公開日は、それぞれいつからいつまでのものですか。
各AIが回答した公開日の期間を教えてください
GPT-4o:
公開日の明記は少なく、唯一明確に記載されているのは「2024年9月12日」。
期間: 2024年9月12日 (不明なものが多いため、限定的です)。
Sonar Huge:
公開日の明記は少ないですが、「2024年10月」に関連する動画が含まれています。
期間: 2024年10月(他は不明)。
Sonar Large:
公開日が2024年9月26日から2024年10月4日までの範囲で記載されています。
期間: 2024年9月26日~2024年10月4日。
Claude 3.5 Sonnet:
明確な公開日は少なく、「2024年10月1日」や「2024年9月12日」などが記載されています。
期間: 2024年9月12日~2024年10月1日(記載が不明確な動画が多い)。
Perplexity:
公開日が記載されていないものが多く、具体的な期間を算出するのは困難ですが、参考として「2024年9月~10月」に関連する動画がいくつか見つかります。
期間: 2024年9月~2024年10月(推定)。
Claude 3 Opus:
公開日は2024年9月30日から2024年10月3日までの範囲。
期間: 2024年9月30日~2024年10月3日。
これらの期間は、明確に記載された公開日を基にしたものです。多くの動画で公開日が不明なため、全体の正確な範囲は推測に基づく部分もあります。
公開日などで不明な点も多く、取得できる情報がAIによってかなり違う。
それぞれのAIで、他のAIが回答していないテーマの動画があれば教えてください
各AIが提供した動画の中で、他のAIが回答していないテーマや特徴的な動画を以下にまとめます。
GPT-4o
「ChatGPT Canvas」について解説
テーマ: ChatGPTに新機能として登場した「Canvas」について解説しています。
「OpenAIのボイスモードの使用感」について解説
テーマ: OpenAIの音声モード(ボイスモード)についての解説。
Sonar Huge
「Introducing Sora — OpenAI’s text-to-video model」
テーマ: OpenAIの新しいテキストから動画を生成するモデル「Sora」について。
「OpenAI DevDay 2024 Highlights in 5 Minutes」
テーマ: OpenAI DevDay 2024のハイライトを5分でまとめた内容。
Sonar Large
「OpenAI新機能解説:リアルタイムAPIとは?」
テーマ: OpenAIのリアルタイムAPIの機能に関する解説。
「OpenAIのプロンプトキャッシング」について
テーマ: プロンプトキャッシング(プロンプトのキャッシュ技術)についての解説。
Claude 3.5 Sonnet
「Sora」についての速報動画
テーマ: OpenAIの「Sora」という動画生成AIについての速報。
「Its Time To Talk About The Truth Behind OpenAI」
テーマ: OpenAIに関する「真実」について議論する動画。
Perplexity
「OpenAI Tutorial #1 – Intro & Setup」
テーマ: OpenAIの基本チュートリアル(導入およびセットアップ)。
「OpenAI Assistant API Tutorial With REAL Examples」
テーマ: OpenAI Assistant APIの実際の使用例を含むチュートリアル。
Claude 3 Opus
「NEW OpenAI ChatGPT-o1 is NOT What You Think」
テーマ: 新しいChatGPTモデル「o1」についての独自の解説。
「OpenAI Assistants API File Upload Support Added」
テーマ: OpenAIのAPIにファイルアップロード機能が追加されたことに関する解説。
解説動画、速報動画、チュートリアル動画と、各AIの特徴が現れた。
各AIの回答の特徴を分析してください
GPT-4o
特徴:
幅広いテーマのカバー: OpenAIの最新モデルからDevDayの発表、機能解説(Canvas、ボイスモード)など、OpenAIの技術的な進展に関する幅広い内容を含んでいます。
詳細な技術解説に重点: 特にChatGPTの新機能やボイスモードといった、具体的な技術的トピックにフォーカスしています。
少数の確定情報: いくつかの動画は詳細な情報が不明で、公開日や作成者などの情報が限られている点が他のAIと比べて目立ちます。
分析:
技術解説が中心で、ユーザーがOpenAIの最新ツールや機能を実際にどう利用するかを強調している点が強みです。一方、情報が不足している動画も多いです。
Sonar Huge
特徴:
新機能や技術的な発表にフォーカス: 「Sora」などの新しいモデルやDevDayでの発表に強く焦点を当てています。
最新のニュースやハイライト: DevDayの要約やハイライトといった、短時間で重要なポイントを把握できる動画が特徴的です。
技術的進展の速報: 新モデルやAPIの発表など、技術的な進展を迅速にカバーしています。
分析:
「Sora」のような独自のモデルや最新技術の速報を扱い、開発者や技術者に向けた情報提供に強みがあります。技術進展を素早く追いたい層に適しています。
Sonar Large
特徴:
開発者向けの技術解説: リアルタイムAPIやプロンプトキャッシングなど、技術的に高度なトピックに特化しています。
未提供情報も多い: 一部の動画はURLが提供されていないものもあり、情報が不完全な部分が目立ちます。
全般的に技術重視: AIの効率化や新機能の実装に関する内容が多く、エンジニアや技術者を意識した内容になっています。
分析:
APIや技術的なテーマに焦点を当てている点で、より高度な技術理解を必要とする視聴者向けのコンテンツが豊富です。ただし、動画情報が一部不足していることが弱点です。
Claude 3.5 Sonnet
特徴:
速報性の高い動画: 「Sora」の速報や、OpenAIの真実について議論する動画など、比較的トレンドに敏感な内容を扱っています。
多様なテーマのカバー: OpenAIの新モデル解説に加え、より包括的な議論や分析が含まれています(例: OpenAIの真実についての動画)。
日本語コンテンツも含む: 日本語の解説動画も多く、特に日本人視聴者向けの内容が多い点が特徴です。
分析:
ニュース性が高く、OpenAIに関する最新の話題を迅速にキャッチするのが得意です。一方で、技術的な深堀りは少なめで、速報やトレンド情報が中心です。
Perplexity
特徴:
教育的なコンテンツが豊富: チュートリアルやAPIの使い方に関する動画が多く、初学者や開発者向けの内容が目立ちます。
ニュース系動画も含む: OpenAIの資金調達など、ビジネス的な話題に触れている動画もあります。
実例を使った実践的な解説: APIの具体的な使用例を紹介するなど、実践に役立つ情報提供に注力しています。
分析:
学習者や初学者向けのチュートリアルが豊富で、実際にOpenAIの技術を使ってみたいと考える視聴者に役立つ内容が多いです。また、ビジネスに関連するトピックも扱っています。
Claude 3 Opus
特徴:
最新機能に特化: ChatGPT-o1やAPIの新機能に関する詳細な解説が中心です。
業界ニュースと技術の融合: DevDayでの発表内容に関する情報や、業界全体にインパクトを与えるニュース(資金調達など)も扱っています。
具体的な技術情報が豊富: ファイルアップロード機能や新しいAIエージェントについてなど、OpenAIの最新機能に関する詳細な説明が目立ちます。
分析:
最新技術に特化した内容が多く、開発者や技術者に向けた高度な情報提供に強みがあります。また、業界ニュースとのバランスも取れているため、幅広い視聴者層に対応可能です。
総合的な分析
GPT-4oとClaude 3 Opusは、特に技術的なトピックに強く、エンジニア向けの内容が豊富です。
Sonar HugeやSonar Largeは、新技術や速報性の高い内容を提供しており、特に開発者や技術者に有用です。
Claude 3.5 SonnetやPerplexityは、初心者向けの教育コンテンツや、ニュース、ビジネスに関連する話題に強みがあります。
それぞれのAIが異なる視点やテーマをカバーしており、視聴者の目的に応じて役立つ内容が変わります。
回答に不明な部分が少ない順にAIを並べてください
Claude 3 Opus
特徴: 動画の公開日や作成者、URLが比較的完全に提供されており、全体的に不明な部分が少ないです。
Perplexity
特徴: ほとんどの動画にURLが提供されており、ビジネスニュースやチュートリアルなど具体的な内容が多いです。ただし、20個全ての動画を提供しているわけではありませんが、情報は比較的明確です。
Sonar Huge
特徴: ほぼすべての動画にURLとある程度の公開日が提供されており、テーマも明確です。ただし、一部の動画で公開日が不明な場合があります。
GPT-4o
特徴: 多くの動画にURLが含まれていますが、公開日や作成者に関する情報が不明な動画がいくつかあります。
Sonar Large
特徴: 前半の動画はURLと公開日がある程度明確ですが、後半になるとURLや詳細情報が不足しているものが多いです。
Claude 3.5 Sonnet
特徴: 多くの動画で公開日や作成者情報が不明で、URLも一部しか提供されていません。他のAIと比較すると、全体的に情報の不明確さが目立ちます。
結論:
不明な部分が少ない順では、「Claude 3 Opus」が最も情報が充実しており、次に「Perplexity」や「Sonar Huge」が続きます。一方、「Claude 3.5 Sonnet」は情報が最も不明確であるため、最後に位置付けられます。
取得できる情報に不明な点も多く、目的によっては動画サイトで直接検索した方が効率が良いように思う。