私たちは借り物の信頼に溺れており、それは代償を払うことになるだろう。
このテキストは、AIの自信に満ちた断言がもたらす危険な影響、特に確立されたブランドの信頼性と組み合わされた場合について探求しています。AI製品のオンボーディングを設計する際、ユーザーを感心させるために偽のローディングアニメーションのような欺瞞的な戦術を用いる誘惑が議論されましたが、ユーザーを誤解させる懸念から最終的に却下されました。これは中心的な問題点を浮き彫りにしています。人間はしばしば正確さよりも自信を信頼する傾向があり、これは正しい答えと同じ確信度で不正確な情報を提供するAIによって悪用されています。人間とは異なり、AIモデルは間違いを犯した後により自信を持つようになり、私たちが頼ることを学んだ自然なためらいの合図を欠いています。購読解除ボタンを隠すような欺瞞的なパターンは行動を操作しますが、AIが信頼を得る前にユーザーにそれを信じ込ませることは、はるかに陰湿な形の欺瞞です。歴史的に、自信を持って間違った個人は結果に直面したため、自信への信頼は合理的な戦略でした。しかし、AIの規模と読みにくさはこのリスクを増幅させます。権威バイアスは、歴史的な実験で示されたように、人々が自身の判断に反しても情報源に基づいて情報源を信頼させる原因となります。人間のためらいを取り除かれた製品化された専門家は、規模で結論を提供しますが、これは信頼性の重要な要素を取り除きます。信頼できる名前を活用する企業は、単一の自信を持って間違った出力で、何十年もかけて獲得した信頼を浪費するリスクを負います。Bardのエラー後のGoogleの株価の大幅な下落と、Air Canadaがチャットボットの偽造されたポリシーに対して法的責任を負ったことは、深刻な財務的および評判上のコストを例示しています。信頼の非対称性は、それがゆっくりと構築されるが急速に崩壊する可能性があることを意味し、AIは信頼できるブランドの旗印の下で前例のない規模でエラーを発生させることでこれを悪化させます。