メインコンテンツへスキップ

同じ生成パイプラインの記事、7月だけ効き目が90%落ちていた

AIコンパスで、同じ形式の生成記事の効き目が7月だけ90%落ちていた。パイプラインは正常に動いていたのに気づけなかった理由と、方針転換の中身をまとめる。

この記事は、自社サイトのSEO運用を実測した記録シリーズの1本である。AIコンパスで、同じ生成パイプラインで作った記事の効き目を月別に実測したところ、7月・8月だけ大きく落ち込んでいることが分かった。パイプライン自体は正常に動き続けていたため、この劣化は表示数を実測するまで見えていなかった。

この記事で分かること

  • 公開後60日の1本あたり表示数が、月別にどう推移していたか
  • なぜパイプラインが正常なのに効き目の劣化に気づけなかったか
  • 量産方針をどう切り替えたか、次にまた効かなくなったらどう判断するか

この記事で分からないこと(正直に書く)

  • 7月・8月に落ち込んだ直接の原因(検索エンジン側のどの変化と対応しているか)は特定できていない

公開後60日の表示数が、7月だけ落ち込んでいた

同じ生成パイプラインで作った記事について、公開後60日時点の1本あたり表示数を月別に集計したところ、3月58・4月86・5月113・6月46という水準から、7月7・8月9まで落ち込んでいた。6月から7月にかけての落差が最も大きく、90%落ちている計算になる(出所: 自社の運用記録、確認日2026-09-06)。この施策が狙っていたRAG関連のクラスタ自体、当時は1,459表示・クリック1・加重順位27.8という、サイト内で最大の未回収面だった(出所: 自社の運用記録、確認日2026-09-06)。

パイプラインが正常なだけに、劣化は見えていなかった

記事の生成・公開自体は止まらずに続いており、見出しの数や文字数といった体裁のチェックも通り続けていた。パイプラインが「動いている」ことと、記事が「効いている」ことは別の指標であり、月別の表示数を実測して初めて、90%という落ち込みが可視化された(出所: 自社の運用記録、確認日2026-09-06)。さらに調べると、この施策の親にあたるハブ記事自体にも、13の節で出典のない数値(市場規模や削減率など)が使われていたことが分かった。同じ作り方を続ければ、その後に量産する記事にも同じ欠陥が複製される状態だった(出所: 自社の運用記録、確認日2026-09-06)。

「体裁の整った解説記事」を量産しても数字は動かない

この実測を踏まえ、体裁が整っているだけの解説記事を増やしても表示数は動かない、という前提に切り替えた。差になるのは一次資料と自社の実測だけだという考えのもとで、次の記事群では自社で構築した検証の仕組みそのものを一次データとして使い、数値には出所と確認日を必須にする検査を導入した(出所: 自社の運用記録、確認日2026-09-06)。Googleのスパムポリシーでも、検索順位の操作を主目的として大量に生成され、利用者にとっての価値をほとんど持たないページ群を「Scaled content abuse」として明示しており、生成AIツールを使って価値を伴わないページを量産する行為を例として挙げている(出所: Google Search Central「Spam policies for Google Search」https://developers.google.com/search/docs/essentials/spam-policies、確認日2026-09-06)。自社の実測でパイプラインの効き目が落ちていた事実は、このポリシーの方向性と矛盾しない。

再発防止:効果を測る期限と基準を先に決める

新しい記事群については、公開から4週間後の時点で1本あたり表示数が40を超えたかどうかを判定基準とした。これは直近の落ち込み後のベースライン(7〜9表示)の4倍にあたる水準である。この基準を超えなければ量産を止め、本数を増やす方向ではなく既存記事を厚くする方向に振り替える、という撤退条件をあらかじめ決めている(出所: 自社の運用記録、確認日2026-09-06)。

小さな月別の数字だけで良し悪しを判断する危うさは、姉妹記事「RAGの幻覚率0%は何件で言えるか」で扱った標本数の考え方とも通じる。JS非実行のクローラーに13字しか見えていなかった事故はこの記事、noindexを外し忘れていた事故はこの記事にまとめている。コンテンツ運用の方針や検証の設計について相談したい場合は、お問い合わせから編集部まで連絡してほしい。

よくある質問

Q1. 7月に何が起きたのか

同じ生成パイプラインで作った記事の、公開後60日時点の1本あたり表示数が、6月の46から7月の7まで落ち込んだ。8月も9にとどまっており、3〜6月の水準(58〜113)には戻っていない。

Q2. なぜこの劣化にすぐ気づけなかったのか

記事の生成・公開自体は止まらずに続いており、見出し数や文字数といった体裁のチェックも通り続けていたため。パイプラインが動いていることと記事が効いていることは別の指標であり、月別の表示数を実測して初めて分かった。

Q3. どう方針を変えたのか

体裁の整った解説記事を量産する方針をやめ、一次資料と自社の実測を核にした記事へ切り替えた。数値には出所と確認日を必須にする検査も導入した。

Q4. 次にまた効かなくなったら、どう判断するのか

公開から4週間後の時点で1本あたり表示数が40(直近ベースラインの4倍)を超えたかどうかを判定基準とし、超えなければ量産を止めて既存記事を厚くする方向に振り替える。

関連する取り組み

CONNECTED SERIES
AIで投資の壁を越える
18 本の実装記録。AI 投資の「予測不能」と言われる 9 つの壁を、コードと実データで検証した連載。
note で読む →
B2B API
Persona API
行動データから再構成した 2,245 体のペルソナを LLM 推論に注入。AI 出力の文脈リッチ化、顧客 segmentation に。
詳細を見る →

AI導入のご相談を承っています

AI導入支援の実務経験を活かし、お手伝いしています。お気軽にご相談ください。

他のカテゴリも読む

AI最新ニュース AI業界の最新ニュースと企業動向 AI導入戦略 AI投資判断・ROI分析・導入ロードマップ 業界別AI活用 製造・金融・小売など業界別のAI活用動向 導入事例 企業のAI実装プロジェクト事例とコンサルティング知見 研究論文 NeurIPS、ICMLなどの注目論文レビュー