地味地味フォリオ

Claude SonnetのレポートをChatGPTに採点させたら辛口だった

9分で読めます

はじめに

毎週金曜にClaude Sonnetが自動生成しているポートフォリオ考察レポート。経済指標、コモディティ、最新ニュースを踏まえた分析が届く仕組みを作ったのですが、ふと気になりました。

「このレポート、投資判断に使えるレベルなのか?」

そこで、Sonnetが生成したレポートをそのままChatGPTに渡して、「不足している視点はありますか?」と聞いてみました。

結果は、かなり辛口でした。


以下はChatGPTによる論評です。個別銘柄名はマスクしています。


ChatGPTによる論評

全体として、このレポートは**「直近のマクロ・セクター・騰落率から見た週次コメント」**としてはよくまとまっています。一方で、投資判断に使うには、バリュエーション・投資仮説・売買ルール・リスク量の定量化が不足しています。

レポート自体も「指数は上昇したが、ポートフォリオは置いていかれた週」と整理し、セクター強弱や個別の含み益・含み損にかなり比重を置いています。

1.「上がった/下がった」ではなく、投資仮説が崩れたかの判定

銘柄Cは+225%超なので一部利確、銘柄G・Hは二桁マイナスなので保有根拠を再確認、という整理になっています。

ただし、本来見るべきは含み益・含み損そのものではなく、

  • 「買った理由がまだ残っているか」
  • 「業績・配当・優待・成長性・還元方針に変化があったか」
  • 「現在株価は期待を織り込みすぎているか」

です。

例えば、銘柄Cが大幅上昇していても、利益成長がそれ以上に進んでいれば必ずしも利確対象とは限りません。逆に、銘柄G・Hが下落していても、業績悪化ではなく一時的な需給要因なら保有継続や買い増し候補になり得ます。

2. バリュエーション分析がほぼない

このレポートで一番不足しているのはここです。

最低限、各銘柄について以下が欲しいです。

  • 割安性: PER、PBR、EV/EBITDA、配当利回り
  • 収益性: ROE、ROIC、営業利益率
  • 安全性: 自己資本比率、ネットキャッシュ、D/Eレシオ
  • 還元余力: 配当性向、DOE、FCF、累進配当方針
  • 成長性: 売上成長率、営業利益成長率、EPS成長率

レポートでは配当利回りには触れていますが、その配当が維持可能か、利益に対して株価が高いのか安いのか、還元余力があるのかまでは踏み込めていません。

特にあなたの投資方針は「ディフェンシブ高配当をコアにしたバリュー投資」なので、単なるセクター強弱よりも、配当の持続性と割安性をもっと重視した方がよいです。

3. ベンチマーク比較の深掘りが不足

レポートでは、取得来で日経・TOPIX・オルカンをアウトパフォームしている一方、今週は日経急騰に対してポートフォリオが+0.58%にとどまったと書かれています。

ただ、これだけでは不十分です。本来は、

  • TOPIXに対して負けたのか
  • 日経平均だけに負けたのか
  • 大型株優位の相場だったから負けたのか
  • グロース・銀行・半導体など特定テーマを持っていなかったから負けたのか
  • ポートフォリオのβが低いだけなのか

を分解すべきです。

日経平均に負けたからといって、必ずしも問題ではありません。あなたのPFは高配当・内需・優待・ディフェンシブ寄りなので、急騰相場で日経に劣後するのは自然です。むしろ、下落局面でどれだけ耐えられるかを含めて評価すべきです。

4. A/B/C枠ごとの評価がない

このレポートではセクター別・銘柄別には見ていますが、その銘柄がA枠なのか、B枠なのか、C枠なのかという視点がありません。

これはかなり大きな欠落です。

  • A枠: 配当持続性、財務安定性、景気耐性、長期保有妥当性
  • B枠: 中期成長余地、A枠昇格可能性、下落時の買い増し可否
  • C枠: 検証目的、撤退ライン、短期材料、最大損失許容額

同じ含み損でも、A枠なら「業績と配当が崩れていないなら保有継続」、C枠なら「短期仮説が外れたなら撤退」と判断が変わります。

5.「買い増し候補」と「売却候補」の優先順位が弱い

レポートでは、銀行・情報通信を増やす、陸運・鉱業を減らす、という提案があります。ただし、これはややセクターモメンタム寄りです。

本来は、

  • 今ある現金で買うならどれか
  • 売って資金を作るならどれを先に売るか
  • 含み益銘柄を利確するなら、代替投資先はあるか
  • 売却しても配当利回り・優待・分散が悪化しないか

まで必要です。

6. 配当・優待込みのリターン視点が薄い

レポートでは配当利回りに触れていますが、配当込みリターンとしての評価が弱いです。

あなたのPFは高配当・優待銘柄も多いため、株価だけで「出遅れ」と判断すると過小評価になります。見るべきなのは、株価騰落率 + 受取配当 + 優待価値 です。

特に、配当・優待重視の複数銘柄は、単純な株価だけでなく、配当・優待・ディフェンシブ性も含めて評価した方がよいです。

7. 相関・β・下落耐性の分析がない

「分散が効いている」と書かれていますが、17銘柄あること自体は分散の十分条件ではありません。

本来は、TOPIXに対するβ、金ETF・オルカンを含めた資産全体の相関、最大ドローダウンを見たいです。

17銘柄あっても、内需・サービス・小売に寄っていれば、消費悪化や人件費上昇局面では同時に弱くなる可能性があります。

8. 銘柄ごとの「次の確認イベント」が不足

レポートには今後1週間のマクロイベントはありますが、個別銘柄ごとの確認イベントが弱いです。

「何を見たら保有継続/売却判断が変わるか」が欲しいです。

9. 税金・利確コストの視点がない

銘柄Cのように大きな含み益がある銘柄を利確する場合、税金の影響が大きいです。

単純に「+225%だから利確」ではなく、特定口座で約20.315%の税負担が発生すること、損失銘柄との損益通算の可否、NISA口座か特定口座かを考慮すべきです。

10. レポート内の整合性チェックが必要

小さな点ですが、レポートでは「マイナス銘柄が5銘柄」としながら、実際には6銘柄が列挙されています。

AI生成レポートでは、数値の取り違え・古いデータ・指数名の混同が起きやすいので、ここは要確認です。

ChatGPTが推奨する追加項目

次回レポートに足すなら、以下の5項目が特に有効とのことです。

  • 銘柄別バリュエーション表: 割安・割高を判断する
  • A/B/C枠別の保有比率: 投資方針とのズレを確認する
  • 配当込みリターン: 高配当PFを正しく評価する
  • 売買候補ランキング: 実際の行動に落とし込む
  • 投資仮説・撤退条件: 感情的な売買を防ぐ

この論評に対する見解

ChatGPTの指摘は、率直に言って的を射ている部分が多いです。

特に刺さったのは以下の3点です。

「投資仮説が崩れたかの判定」が本質

現在のSonnetのレポートは「上がった・下がった」の事実整理が中心で、「買った理由がまだ有効か」という判定ができていません。これは最も重要な改善点だと感じました。

含み損があっても、配当が維持されていて業績に問題がなければ保有継続。含み益があっても、成長が鈍化していれば利確検討。判断の軸は騰落率ではなく、投資仮説の生死です。

A/B/C枠の視点は確かに欠けていた

自分ではA/B/C枠の考え方を使って銘柄を管理していますが、AIのレポートにはこの情報を渡していませんでした。

同じ銘柄でも枠によって評価基準が変わるのは当然のことで、これをレポートに反映させれば考察の質は大きく変わるはずです。今後、stocks.yamlにA/B/C枠の情報を追加し、Sonnetのプロンプトに含める改善を検討したいと思います。

バリュエーション分析は実装可能

PER・PBR・ROE・配当性向などの財務指標は、yfinanceでも取得できるものが多いです。現在のレポートに追加することは技術的に可能で、これは近い将来の開発課題として優先度が高いと感じました。

一方で、現実的な制約もある

ChatGPTの指摘はいずれも正論ですが、すべてを週次の自動レポートに盛り込むのは現実的ではありません。

現在のレポートは月額約340円で完全自動生成されているものです。ここに盛り込むのは「考えるきっかけ」であって、最終的な投資判断は自分自身で行います。

また、β分析やドローダウン計算は、数ヶ月分のデータが蓄積されてから意味を持つ分析です。運用開始から1週間程度の現時点では、まだ実施できる段階にありません。

整合性チェックの指摘は重要

「マイナス5銘柄」と書きながら6銘柄列挙しているという指摘は、AI生成コンテンツの信頼性に関わる重要な問題です。

AIのレポートを鵜呑みにせず、数値の整合性は自分で確認する習慣が必要です。これはChatGPTでもSonnetでも同じことで、AIを使う上での基本姿勢だと改めて感じました。

まとめ

ChatGPTに辛口の採点をしてもらったことで、自分のレポートに何が足りないかが明確になりました

特に「バリュエーション」「A/B/C枠」「投資仮説」の3つは、レポートの実用性を大きく左右する要素です。これらを段階的に追加していくことで、「市況コメント」から「意思決定支援ツール」へとレポートを進化させていきたいと思います。

面白いのは、AIの成果物をAIに評価させるというプロセス自体が、改善のサイクルを回す有効な手段だということです。Claude Sonnetが生成し、ChatGPTが評価し、その結果を踏まえて次のプロンプトを改善する。AIを「使う」だけでなく「育てる」という感覚が、少しずつ掴めてきました。

シェア: X Bluesky はてブ

関連記事