
[Podcast] Claude Fable 5について話しました
Claude Fable 5のリリースをきっかけに、最新モデルの性能、安全装置、使いどころについてメンバーと話しました。
ベンチマークでは世界最高水準の結果が出ている一方で、価格やガードレール、エフォート設定など、実際にどう使いこなすべきかはまだ探りながら考える必要がありそうです。
特に話題に上がったのは以下のポイントです。
Claude Fable 5の性能と価格:主要ベンチマークでは非常に高い結果が出ており、脆弱性検出などでも従来モデルとの差が大きいという話に。一方で、価格はOpusよりさらに高く、どの作業に使うべきかの見極めが重要になりそうです
安全装置とガードレール:危険な作業に入るとモデルが切り替わる、あるいは拒否するような挙動があるらしく、生物学リスクやサイバー攻撃につながる領域ではかなり強い制御が入っているのでは、という話になりました
エフォート設定の使い分け:Lowでも十分に速く賢いという声がある一方で、Ultraのような高いエフォートでは使える回数やコストの制約も大きい。まずはHighで試しつつ、どの問題にどの強度で投げるべきかを探るのが現実的ではないかという話に
「難しい未解決問題」を出せるか:公式の使い方として、最も難しい未解決問題をぶつける、という方向性が示されている一方で、そもそも自分たちがそのレベルの問題を定義できるのかが課題になりそうです
AIの答えを判断する力:モデルが賢くなるほど、何を任せるかだけでなく、出てきた答えが正しいかを見極める力がより重要になる。原因不明のまま対処しているIssueや、長く残っている課題を洗い出す使い方も面白そう、という話になりました
議論の終盤では、AIが解ける問題そのものよりも、「AIに解かせるべき問題を見つけること」がこれからさらに難しくなるのでは、という話にもなりました。
Jicooのメンバーの雰囲気も合わせて、ぜひ聴いてみてください!
今、Jicooでは一緒に働く仲間を募集しています
https://youtrust.jp/companies/jicoo
Jicooでは、これからの開発組織を創り上げ、AI時代の新しい働き方・プロダクト開発をリードしていく仲間を積極的に募集しています。
技術でプロダクトをドライブしたい方
変化の速い環境で、AIなどの新しい技術を積極的に学び、活用したい方
チームで協力し、大きな目標を達成することに喜びを感じる方
ぜひ一度、カジュアルにお話ししてみませんか?