(このブログはきちっとした実験でも検証結果でもなく、ただの読み物として読んでいただければ幸いです。)

「60 Minutes」という番組でジェフリー・ヒントン氏がインタビューを受けていました。
昨年の番組のようですので少し古いのですが。。。




同氏がgoogleを退社したことが伝わったが昨年の今頃だったでしょうか。同氏は、AIには明るい面もあるけれども不確実な面があることも警告してくれました。(ヤン・ルカン氏が違う意見であることも有名ですが)

前述「60 Minutes」のインタビューの中で、ヒントン氏がインタビューアーにAI(ここではLLM)が物事を理解していることを説明するためにChatGPT-4に1つの質問をパソコンに打ち込んでいました。

「AI のゴッドファーザー」とも呼ばれるジェフリー・ヒントン氏が打ち込む質問に興味を持ちました。それを画面を見て書き起こして(とてもアナログ的ですが)、GPT-4も含めた形で、”GPT-3.5、GPT-4、Gemini 1.0、 Perplexity、Claude 2.1”に同じ質問を投げてみました、というのがこのブログの内容です。

・質問と回答は英語で行っています。ここでは(公平を期して?)Deeplで訳した日本語のみ載せています。

・5つのAIの回答は、GPT-4 に分析してもらいました。(今の所、一番賢こそうなので)
これについては、「さいごに」という段落に載せましたので、結果だけ知りたい方はそちらの方に飛んでいただければと思います。

・AIが外部検索もした上で回答を生成した場合、リンク等が回答に入りますが(特にPerplexityは)、それらリンクは省いて載せています。



ジェフリー・ヒントン氏がGPT-4にした質問は次の通りです。

The rooms in my a house are painted blue or white or yellow. Yellow paint fades to white within a year. In two years time I want to them all to be white. What should I do and why ?

私の家の部屋は青か白か黄色に塗られています。黄色のペンキは1年以内に白に褪色します。2年後、私はこれらの部屋をすべて白にしたいと思っています。どうしたらいいでしょうか?



ChatGPT 3.5

黄色いペンキが1年以内に白に退色するという特性を考慮し、2年以内に家中の部屋を確実に白にするためには、以下のステップを踏む必要があります。

1. 黄色の部屋は今すぐ塗り替えましょう(もしあれば): 現在黄色に塗られている部屋があれば、1年以内に自然に白に退色するので、今すぐ塗り替える必要はありません。そのため、今すぐ塗り替える労力と費用を節約できます。

2. 青い部屋を白く塗り替える: 青は白に退色しないので、青い部屋はできるだけ早く白に塗り替えましょう。こうすることで、今後2年間、これらの部屋は白いまま保たれる。
3. 黄色の部屋の塗り替え計画(該当する場合): 現在黄色で、今後1年以内に白に退色する部屋については、退色後の状態を考慮する。色あせた白が満足のいくものでない場合(色あせにムラがあるなど)、色あせた後にこれらの部屋を白く塗り直す計画を立てましょう。このステップを踏むことで、すべての部屋が白くなるだけでなく、新鮮で均一なペンキを塗ることができる。

なぜこの計画なのか?

・効率と費用対効果: この方法は、不必要な再塗装を最小限に抑える。黄色い部屋は自然に白くなり、余分な努力や出費をすることなく、あなたの目標に沿うようになります。
・美観の一貫性: 色あせた部屋の再塗装を計画することで、すべての部屋が一貫した色合いの白になり、色あせによる斑点や色調のムラを避けることができます。
・時間管理: 青い部屋からすぐに始めることで、今後2年間の時間とリソースを効率的に管理し、塗装の手間とコストを分散することができます。まとめると、青い部屋は今すぐ白く塗り替え、黄色い部屋は自然に色あせさせる。



ChatGPT 4

現在の色(青、白、黄色)と、黄色のペンキが1年以内に白に退色するという事実を踏まえ、2年後に家中の部屋を確実に白にするためには、次のような計画を考えてみてはどうだろう

1. 黄色の部屋の場合:黄色の部屋については、すぐに何かをする必要はない。黄色のペンキは1年以内に白に退色するので、これらの部屋はあなたが見ている期間内に自然に白くなり、あなたの2年計画と完全に一致します。

2. 青い部屋の場合: 青いペンキは自然には白くならないので、これらの部屋は塗り替えが必要です。これらの部屋は白に塗り替える計画を立てるべきです。2年間のスケジュールを考えると、このプロジェクトをいつ始めるかはある程度自由です。しかし、予期せぬ遅れや問題を避けるために、この作業は早めにスケジュールすることをお勧めします。

3. 白い部屋の場合: すでに白く塗られている部屋については、何もする必要はありません。しかし、今後2年間は良好な状態を維持できるようにメンテナンスするのが賢明だろう。これには、時間の経過とともに現れる可能性のある傷や擦れに対処するための小規模な補修が含まれるかもしれない。

このプランが効果的な理由

・黄色のペンキが自然に白に退色するのを利用し、それらの部屋に対する早急な対処の必要性を最小限に抑え、再塗装に関連する全体的な労力とコストを削減する。

・指定された期間中に自然に白に移行しない唯一の部屋である青い部屋の再塗装の必要性に対処する。

・すでに希望の色になっている部屋については、その色を維持するためのメンテナンスの重要性を認めている。

この計画は効率的かつ実用的で、家全体をすぐに大規模に塗り替える必要がなく、徐々に移行していくことができる。また、塗料の自然な経年変化も考慮し、資源と労力を最適化します。



Gemini 1.0

2年以内にすべての部屋を真っ白にするという目標を達成するためには、2つの解決策が考えられる:

1. すべての部屋を白く塗る:これは最もシンプルで直接的な解決策だ。今、すべての部屋を白く塗り替えることで、2年後には現在の色に関係なく、すべての部屋が白くなる。これにより、どの部屋が黄色いかを追跡し、後で塗り直す必要がなくなる。

2. 黄色い部屋を特定し、塗り替える:黄色い部屋を特定する: 部屋を注意深く調べ、現在黄色く塗られている部屋を特定する。黄色い部屋を白く塗り替える: 今後1年以内に、黄色い部屋を白いペンキで塗り替える。こうすることで、2年目には確実に白くなる。

それぞれの解決策の利点と欠点

1. すべての部屋を白く塗る:利点: 単純明快で、黄色い部屋を追跡する必要がない。欠点: 部屋のかなりの部分がすでに白い場合、無駄に見えるかもしれない。

2. 黄色の部屋を特定し、再塗装する:利点: 多くの部屋がすでに白い場合、塗料を節約できる。欠点: 欠点:黄色の部屋を特定する必要がある。結局のところ、最良の解決策は、具体的な状況や好みによる。すでに白い部屋が何部屋あるか、予算、潜在的なミスや追加作業に対する許容範囲などを考慮しましょう。

その他の考慮事項塗料の質: 

塗料の質:長く白さを保つために、色あせしにくい高品質の白色塗料に投資しましょう。

日当たり:日当たりの良い部屋がある場合は、紫外線に強い塗料を使うことも検討しましょう。

個人の好み: 白の色合いが決まっている場合は、それにぴったり合う塗料を選びましょう。
この情報が、あなたの家にとって最良の決断をする一助となれば幸いです!



Perplexity

2年後に家中の部屋を白で統一するために、提供された情報を考慮すると、青と黄色の部屋はすべて白のペンキで塗り直すべきである。その理由と方法を説明しよう:

1. 黄色の部屋 提供された情報によると、黄色のペンキは1年以内に白く退色する。しかし、2年後に全ての部屋で均一な白を実現するためには、色落ちに頼ると色ムラが生じたり、真っ白な仕上がりにならない可能性があるため、最良の結果が得られないかもしれない。そのため、黄色い部屋を白い塗料で塗り替えることで、すべての部屋における白色の一貫性と品質を確保することができる。

2. 青色の部屋:青色の部屋は、自然に白色に退色することはありません。そのため、2年後に全室を白にするという目標を達成するためには、白ペンキで塗り替える必要があります。

### 塗り替えの手順

1. 準備: 塗り替えの前に、濡れた布と軽い石鹸で壁を拭き、ほこりや汚れを落とす。こうすることで、新しい塗料の密着性が高まる。

2. 下塗り: 下塗り材を塗ることで、既存の色をカバーし、新しい白いペンキが透けて見えるのを防ぎます。プライマーは、白いペンキのためのニュートラルなベースを作成するため、青のような暗いまたは鮮やかな色のために不可欠である。

3. 塗装: プライマーが乾いたら、高品質の白ペンキを1~2回塗ります。下地の色がにじまないよう、カバー力のある塗料を選ぶこと。

4. 高品質の材料: 高品質の塗料と塗装用具を使いましょう。高品質のペンキには顔料や結合剤が多く含まれており、前の色を隠し、滑らかで均一な仕上がりにするために必要です。

5. 定期的なメンテナンス: 再塗装後、定期的にメンテナンスを行うことで、壁の見た目を新鮮に保つことができ、頻繁な再塗装の必要性を防ぐことができる。これには、時間の経過とともに塗料の外観に影響を与える可能性のあるほこりや潜在的な汚れを取り除くための壁の掃除が含まれる。

青と黄色の両方の部屋を白のペンキで塗り替えることで、すべての部屋にわたって均一で高品質な白の仕上がりが保証され、希望する2年の期間内に目標を達成することができます。この方法はまた、最終的な外観をよりコントロールすることができ、すべての部屋が一致し、さわやかで清潔な外観の期待に応えることを保証します。



Claude 2.1

* 青、白、黄色に塗られた部屋がある。
* 黄色の部屋は1年で白に色あせる。
* 2年後にはすべての部屋を白にしたい。
* そのためには   
 - 青と白の部屋はすでに白いか、青いままなので、そのままにしておく。   
 - 黄色い部屋は今すぐ白いペンキで塗り替え、2年後に元の黄色が薄くなって白くなるようにする。    
- 青い部屋は塗り替えないでください。

* 理由はこうだ:    
- 青は白に退色しないので、塗り替える必要はない。    
- 白はすでに白いので、塗り直す必要はない。    
- 黄色は白に退色するので、今白に塗り替えると、2年後に元の黄色が退色して白くなるまとめると、黄色の部屋は今すぐ白いペンキで塗り替え、青と白の部屋はそのままにしておく。そうすれば、2年後にはすべての部屋が白くなっているはずです。




さいごに

    GPT-4は、さすが賢い優等生的な回答だと感じました。Claudeには少し誤解があったようです。Perplexityが、即断即決の人のような回答でした。迷いがあるときはこのような回答をもらえると良いかもと感じました。

    "Sora"や"Gemini Pro 1.5"が立て続けに発表されているこの頃ですが、ヒントン氏の憂いも頭の隅に置きつつ、バランスのとれた視点を持って、変わる世の中の流れを見ていきたいと考えています。

    以下点線内が、5つのAIの回答について、GPT-4に分析してもらった内容です。(特に上記各AIの内容と答え合わせをしていませんので内容が誤っている場合もあり得ます。)
-----------------------------------------------------------------------------------------
スクリーンショット 2024-02-25 9.50.49.png 127.58 KB表について:

最も包括的:Perplexityの回答は、均一性と品質の白色を保証するための詳細な塗り直し及び維持戦略を提供します。準備、下塗り、及びメンテナンスの実践的なステップが含まれています。

最も効率的/実用的:ChatGPT 4の回答は、黄色いペンキの自然な褪色を利用し、既に白い部屋を維持することに焦点を当てており、段階的かつリソースを最適化したアプローチを提案しています。

誤解がある:Claude 2.1は、青い部屋をそのままにすることを提案していますが、これは2年以内に全ての部屋を白くするという目標に矛盾しています。

単純だが潜在的に無駄:Gemini 1.0は直接的な解決策を提供しますが、目標の基準を既に満たしている部屋を再塗装することでリソースを無駄にする可能性があります。

AIの回答の優越性は、ユーザーの優先事項(効率、努力の最小化、特定の美的成果の確保など)に基づいて異なります。
-----------------------------------------------------------------------------------------