O perigo de acreditar demais nas respostas da IA ​​| A resposta correta da IA、Razões para tomar decisões erradas

AIの回答を信じすぎる危険性 | 杉山宣嗣

Com IA、Sempre obtenha uma resposta racional e correta。

Alguém que se sente assim、Acho que está aumentando aos poucos.。

real、A IA atual é muito útil。escrever frases、organizar informações、dê ideias、Você pode comparar várias opções。専門的なテーマであっても、ある程度の条件を入力すれば、短時間で筋の通った回答を返してくれる。

私自身もAIを日常的に使っているし、その能力を否定するつもりはない。

しかし最近、あるプロジェクトに関わる中で、AIを意思決定に使う際の、非常に重要な問題を実感した。

isso é、

AIの回答そのものが間違っているわけではないのに、その回答によって、これまで時間をかけて構築してきたものが、簡単に否定されてしまうことがある

ということだ。

これは「AIは信用できない」という話ではない。

em vez de、AIが優秀だからこそ起こる問題だと思っている。

AIは、その人が積み上げてきた時間を知らない

あるプロジェクトを進めるとき、外から見ると一つの作業に見えても、その裏側には多くの判断が積み重なっている。

名称を決める。

WEB上での表記を統一する。

情報を検索しやすい状態にする。

SNSとの導線を考える。

発信する内容を整理する。

Pense em para quem você enviará informações no futuro.。

Crie os materiais necessários。

Em antecipação aos desenvolvimentos futuros、determinar a seleção atual。

Essas coisas、Se você apenas olhar para cada um、Pode não parecer uma tarefa tão difícil。

Mas na realidade、Ao relacioná-los entre si、acumular em uma direção durante um longo período de tempo。

No processo、Há também uma razão pela qual fizemos isso.。

Eu não decidi apenas com base na minha preferência.。

Há também uma razão pela qual abandonei as opções que havia considerado anteriormente.。

Depois de mudar o que você decidiu、Outras áreas também podem ser afetadas。

Em outras palavras、完成しているように見えるものの背後には、見えない判断の積み重ねがある。

contudo、そこにAIが入ってくる。

AIは、そのプロジェクトが始まったときから見ているわけではない。

誰がどんな理由で何を決めたのか。

どんな問題を乗り越えてきたのか。

何を犠牲にして、O que você tem priorizado?。

Que opções você considerou?、Está na sua forma atual?。

Eu não sei a história por trás disso。

O que a IA sabe、fundamentalmenteInformações inseridas pelo consultor no momentoé。

Se você não entende isso、algo muito perigoso acontece。

「本人の希望に寄り添う回答」は、必ずしも目的に合わない

AIは、Responda respeitando os desejos da pessoa que procura aconselhamento.。

isso é natural。

por exemplo、

"Eu não quero fazer isso"

Se você consultar、A IA disse: “Tudo bem.、“O que posso fazer para atingir meu objetivo sem ter que fazer nada?”。

“Acho que este método é adequado para mim.”

Falando nisso、Explicará as vantagens do método e como implementá-lo.。

これは相談者にとって非常に便利だ。

mas、ここに一つの落とし穴がある。

本人の希望と、プロジェクトの目的は、必ずしも一致しない。

Por exemplo,、ある活動の目的が「できるだけ多くの人に知ってもらうこと」だったとする。

por outro lado、A própria pessoa deseja não aparecer em público, se possível.。

Neste caso、

“Como divulgar sem aparecer em público”

Se você consultar a IA、Claro IA、pense em um método nessa direção。

Correto como resposta。

mas、

“O método é、Esta é a melhor maneira de espalhar a consciência?”

Essa questão é diferente.。

aqui está、本人の希望と目的との間にトレードオフが存在する。

AIが相談者の希望に寄り添うことと、プロジェクト全体の目的を最大化することは、同じではない。

AIは「相談者の味方」にはなれても、Não “a pessoa responsável por todo o projeto”

ここは非常に重要だと思う。

AIは相談者の考えを整理することができる。

反対意見を出すこともできる。

リスクを指摘することもできる。

mas、そのAIがプロジェクト全体の責任を負っているわけではない。

É por isso、相談者がある一部分について質問したとき、AIがその部分について合理的な回答を返しても、それがプロジェクト全体にとって正しいとは限らない。

Por exemplo,、Certas mudanças trarão benefícios ao indivíduo.。

mas、Com essa mudança、A consistência com outras peças que já foram construídas pode ser quebrada.。

Se a IA não sabe tanto、seu impacto não pode ser avaliado。

Isso não é falta de habilidade de IA.、与えられている情報の範囲の問題é。

“Isso é o que a IA diz”、Não é uma base para tomada de decisão

recentemente、少し気になる使い方がある。

自分の考えについてAIに相談し、その回答を見て、

「AIもこう言っている」

と考えることだ。

é claro、AIの回答を参考にすること自体は問題ない。

O problema é、それがいつの間にか、

「AIがそう言ったから、自分の考えは正しい」

という認識に変わってしまうことだ。

AIは裁判官ではない。

最終的な正解を判定しているわけでもない。

入力された条件に対して、もっともらしい答えを生成しているだけである。

Além disso,、その条件の中に相談者自身の思い込みや希望が含まれていれば、その前提を踏まえて回答する。

o resultado、自分の考えをAIに確認してもらっただけなのに、「第三者から客観的に認められた」という感覚になってしまう。

これは非常に危険だと思う。

Em vez de “perguntar à IA o que você pensa”、"Use a IA para questionar suas próprias crenças"

AIを有効に使うなら、質問の仕方を変えたほうがいい。

「この考えでいいですか?」

Não só、

「この考えの弱点は何ですか?」

「反対の立場から見るとどうなりますか?」

「この判断が失敗するとしたら、どこが原因になりますか?」

「これまでの方針を維持した場合と変更した場合、それぞれどんなリスクがありますか?」

と聞いてみる。

O que é mais importante é、

「この判断には、私が見落としている前提がありますか?」

と聞くことだ。

そうすれば、AIは自分の考えを肯定してくれる存在ではなく、自分の判断を検証するための道具になる。

EU、その使い方のほうがAIの価値を引き出せると思っている。

Em vez de acumular、é mais fácil quebrar

何かを作るには時間がかかる。

WEBサイトを作る。

情報を整理する。

検索される状態を作る。

SNSを運用する。

発信を続ける。

名称やデザインを統一する。

将来の展開を考えてルールを決める。

Essas coisas、一日で完成するものではない。

mas、それを壊すことは簡単だ。

一つの判断を変える。

それまで統一してきたものを変更する。

mudar de direção em outra direção。

Isso é tudo、A consistência daquilo que você construiu pode se tornar inconsistente.。

Além disso,、Imediatamente após quebrar、Os efeitos são muitas vezes invisíveis。

É por isso que estou com medo。

Apenas uma sensação momentânea de que “as coisas parecem melhores agora”、Alguns meses depois dessa mudança、Não podemos prever o que acontecerá dentro de alguns anos.。

Desconfie de “pequenas experiências de sucesso” causadas pela IA

Mais uma coisa、Há coisas com as quais devemos ter cuidado ao usar IA.。

Perguntando à IA、Você receberá uma resposta imediatamente。

E、Experimentando a resposta、Às vezes as coisas vão bem。

As frases foram escritas claramente。

Eu tive uma boa ideia。

Problema resolvido imediatamente。

これが成功体験になる。

Então、

「AIに聞けば解決できる」

という感覚が強くなる。

これは便利な反面、危険でもある。

porque、AIが得意なのは、与えられた問題を整理し、候補を出すことだからだ。

何を問題として設定するのか。

どこまでを前提条件にするのか。

そもそも、その問題を今解決する必要があるのか。

それによって既存の計画にどんな影響が出るのか。

estes são、人間側が判断しなければならない。

AIが正しい答えを出していても、そもそも質問するべき問題が違っていたら、結果として間違った方向へ進むことがある。

「正しい回答」と「正しい意思決定」は違う

Desta vez、Foi essa diferença que senti com mais força.。

A resposta da IA ​​está correta。

pelo menos、Foi razoável dentro das condições dadas.。

mas、Você pode aceitar essa resposta como ela é.、pode não ser adequado para todo o projeto。

isto é、

Em vez de “a IA cometeu um erro”、“Cometi um erro no escopo ao qual a resposta da IA ​​foi aplicada.”

という問題なのだと思う。

AIは非常に優秀な道具だ。

mas、道具には使用目的がある。

カメラは素晴らしい写真を撮ることができる。

mas、カメラに何を撮るべきかを決めてもらうことはできない。

Da mesma maneira、AIは膨大な情報を整理し、考えるための材料を提供してくれる。

mas、

“Qual é o seu propósito?”

“O que estamos protegendo?”

“O que devo jogar fora?”

“Até que ponto manteremos os ganhos que obtivemos até agora?”

Se deixarmos a decisão final para a IA,、A história vai mudar。

AIを使うほど、人間の判断が重要になる

Quanto mais a IA evolui, mais、as pessoas não precisam julgar。

Algumas pessoas podem pensar assim。

Eu acho que é bem o contrário。

À medida que a IA se torna melhor、

“Qual resposta devo adotar?”

O julgamento humano torna-se importante.。

AIは、pode dar múltiplas respostas。

Cabe aos humanos escolher um entre eles.。

E、Essa escolha vem com responsabilidade.。

especialmente、すでに時間をかけて構築されているものについては、新しい回答が出てきたからといって、すぐに以前の方針を否定する必要はない。

primeiro、

「この新しい提案は、これまでの方針と矛盾しないか」

「変更すると何を失うのか」

「変更することで本当に得たいものが得られるのか」

を考える必要がある。

AIは「答え」をくれる。しかし「文脈」は自分で与えなければならない

no fim、AIの最大の強みと弱みは同じところにある。

AIは非常に多くの情報を扱える。

mas、その情報を与えなければ、知らない。

長期間にわたって人間が積み上げてきた判断。

そこに込められた意図。

過去に失敗した経験。

以前検討した選択肢。

relacionamentos。

将来の目標。

そうしたものは、質問の中に入っていなければAIには存在しない。

だからAIに相談するときには、

「このAIは、この問題についてどこまで知っているのか」

を考える必要がある。

E、知らない部分が大きいなら、A resposta não deve ser usada como uma decisão final.。

AI時代に必要なのは「AIを信じる力」ではない

Não é que eu não confie na IA。

em vez de、Eu confio muito nisso。

É por isso、Não acho que devamos deixar tudo para a IA.。

AIは、É uma ótima ferramenta para pensar。

mas、Se deve adotar a resposta dada pela IA、os humanos têm que decidir。

especialmente、長い時間をかけて誰かが構築してきたものを変更するのであれば、

「AIがそう言ったから」

não、

「なぜ変更するのか」

「何を失うのか」

「その変更によって目的達成の可能性は本当に高くなるのか」

まで考える必要がある。

Não basta saber se a resposta da IA ​​está correta ou não.。

a resposta、agora、É correto usá-lo nesta situação?。

É a primeira vez que pensei tão longe、Acho que a IA será usada para tomar decisões.。

Através desta experiência、Eu me senti assim novamente。

IA está certa。

no entanto、Se você usá-lo incorretamente、os resultados vão na direção errada。

E、その責任を負うのはAIではない。

最後に判断するのは、あくまで人間なのだから。

AIが参照する情報は、必ずしも正しいとは限らない

Mais uma coisa、AIを使う上で忘れてはいけないことがある。

AIが扱う情報量の多さと、その情報が正しいかどうかは別の問題だ。

私は写真を50年続けてきた。

長く写真をやっていると、撮影技術や機材について、Existem coisas que você só pode saber se realmente tiver tentado.。Mesmo que seja verdade em teoria、Às vezes as coisas não acontecem exatamente assim no local de filmagem.、vice-versa、Com base em muitos anos de experiência prática, posso por vezes julgar que “isto não pode ser usado nestas condições”.。

contudo、na internet、写真を始めてまだそれほど長くない人が、まるで長年の経験があるかのように断定的な情報を発信しているケースもある。

é claro、経験年数が短いから、その人の情報が必ず間違っているということではない。

O problema é、実際には十分な検証がされていない情報であっても、Se se espalhar amplamente no SNS etc.、Tornando-se uma informação referenciada por muitas pessoasé。

E、Quando a IA aprende e faz referência a essas informações、Mesmo que não seja simplesmente um julgamento de que “está correto porque há muita informação”,、Informações amplamente distribuídas na Internet、回答の材料として現れることはある。

ここにも注意が必要だ。

Por exemplo,、ある写真技術について、経験の浅い人が発信した情報がSNSで大きく拡散されたとする。

その情報が実際には一部の条件でしか成立しないものだったとしても、ネット上では「正しい情報」として広まってしまう。

em seguida、AIに同じテーマについて質問すると、そのネット上で流通している情報と整合する回答が生成される可能性がある。

すると利用者は、

「AIも同じことを言っている。やはり正しいのだろう」

と思ってしまう。

mas、これは非常に危険な循環である。

人間が発信した情報が広まる。
広まった情報をAIが参照する。
AIがそれを含んだ回答をする。
その回答を見た人が「AIもそう言っている」と考える。
E、その回答がさらに人間の情報発信を補強する。

この循環が起きれば、Independentemente de as informações iniciais estarem corretas ou não、“Informações que parecem corretas” podem ser reforçadas.。

É por isso、Quando você vê a resposta da IA、

“É verdade porque a IA diz isso.”

não、

“Essa informação、Que tipo de evidência existe?

é preciso pensar。

gostei especialmente da foto、実際の経験や撮影条件によって結果が大きく変わる分野では、ネット上で広く語られていることと、現場で実際に成立することが一致するとは限らない。

50年写真を続けてきた私が感じるのは、まさにこの部分である。

AIは非常に便利だ。

mas、AIが出した答えと、自分自身が長年の経験から知っていることが食い違ったときには、少なくとも一度立ち止まる必要がある。

情報が多いことと、情報が正しいことは同じではない。

E、AIが答えてくれたことと、現実の現場で正しいことも、必ずしも同じではない。

AIを使う時代だからこそ、情報の「量」ではなく、「根拠」と「文脈」を見る目が、これまで以上に重要になっている。