もうSonnet5.5で十分？
Sonnet5.5が出た
今朝、Sonnet 5.5 が発表されました。
Opus 5.5 が出たのが先週の火曜日。1週間も経ってない。
数回前の投稿で「Sonnet5.5やHaiku5.5も近々リリースされるだろう」と書きましたが、こんなに早いとは思っていませんでした。
何が変わったのか
値段は Sonnet 5 と同じ。Opus 5.5 の半分
出力が3割以上速く、1回の作業あたりのコストは最大3割安くなる
前の Sonnet 5、先週まで実装Agentで使っていた Opus 5、今のチーフの Opus 5.5 と比べるとこうなります。
Sonnet5からのコーディング性能の向上がおかしいレベル。
Sonnet なのにどれも Opus 5 を上回っています。
Opus 5.5 ともほぼ互角。
Anthropic公式の発表だということを差し引いても、性能は大幅に上がっているのでしょう。
ただし Anthropic 自身も「複雑でじっくり判断が要る仕事は Opus が上」と言っています。
範囲の決まった日常の作業、バグ修正、資料の仕上げが得意という位置づけのようです。
ハーネス見直し中なのに・・・
先週ハーネスを見直した話を書きました。
チーフを Fable 5.1 から Opus 5.5 に替えて、
トークン消費がどれだけ減るのかを試している最中です。
来週までの消費量で比べる予定にしているのに、もう次が出てくるなんて。
Opus 5 を1として値段を比較するとこうなります。
「本当に Fable が要るのか」を確かめている途中で、
「Opus もいらないのでは」という話が出てきました。悩ましい。
今週は我慢しよう
せっかくOpus5.5のトークン消費量を比較している最中なので、
今週ハーネスをSonnet5.5に落とすのは我慢します。
おそらくトークンはぐっと減るのは確実だけど、使用感がどうなのかをちゃんと確認しておきたいので。
来週から実装Agentを変えてみよう
来週の集計が終わったら、Sonnet 5.5 をハーネスに組み込んでみます。
コーディング性能がOpus5.5と互角のようなので、実装の部分を変えてみようと思っています。
Sonnet 5.5 が得意とする「範囲の決まった作業」にちょうど当てはまっているはずなので。
気になる点が
そういえば、今日お客さんのところでCoworkを使ってスキルを作るのにOpus5.5を使ってみたのですが、スキル作成にやたらと時間がかかる印象。
帳票の中の敬称を「様」から「御中」に変えてほしいと依頼しただけです。
なのに15分もかかった・・・
エフォートは中で、そんなに高くないのに。
頭がよくなった分余計なことを考えているのか。
それともしっかり動作検証をしているからなのか。
文言変えるだけの指示だったんですが。
もしかすると、指示の仕方も若干変える必要があるのかもしれません。
おわりに
Sonnet5.5の性能を額面通りに受け取れば、半年前くらいにメインで使っていたOpus4.xの性能はぶち抜いていることになります。
いくつか納めたWebプログラムはOpus4.xで作ったものがほとんどです。
どうしても並行でプログラムを作る必要が出てきて、プランがMax5xだとすぐ上限に当たって作業に支障が出てしまったので、現在のMax20xに上げました。
しかし、Sonnet5.5の性能がコーディングで過不足ない状況にきたのであれば、いよいよMax5xに落とせる日が現実になりそうです。
今日はここまで。
