自社AIメディア509本を全数監査した — 重複168万字、AIの作業報告63本、死にリンク753件
自社が運営するAIメディア「AIコンパス」の公開記事509本を全数監査した。段落まるごとの重複が348本・7,122箇所・1,686,574字、AIアシスタントの作業報告がそのまま本文として公開されていた記事が63本、内部リンクは異な...
AIを実装して運用すると何が壊れるかを、自社で起きた一次記録として公開する連載です。世の中にはAI導入の成功事例が溢れていますが、実際に何が壊れ、どう気づき、どう直したかという一次記録はほとんど公開されていません。私たちは自社のプロダクト・インフラ・運用で実際に起きた失敗だけを、実数つきでここに記録します。
自社が運営するAIメディア「AIコンパス」の公開記事509本を全数監査した。段落まるごとの重複が348本・7,122箇所・1,686,574字、AIアシスタントの作業報告がそのまま本文として公開されていた記事が63本、内部リンクは異な...
自社の補助金検索サービスで、複数ソースを合成したIDに含まれるコロン1文字を、nginxとサイトマップ生成の正規表現が拒否していた。人間のブラウザでは何の問題もなく表示されるため誰も気づかず、bot向けに中身のあるページとして配信でき...
Web検索を無効化した状態のLLMに『導入事例』というジャンルの記事を書かせた結果、実在しそうな店名・人物名・導入日付を伴う完全な創作が30本、自社のnoteアカウントから公開されていた。調査が物理的に不可能な設定のまま『実例』を要求...