社内文書RAGの権限設計|退職者・異動者と索引に残り続ける問題
権限を止めても、索引の更新にはラグがある。退職者・異動者の扱いで見落とされやすい点を整理する。
19 / 75 ページ
再構築は全件やり直すか、変わった分だけにするかで費用の性質が変わる。差分で済ませられる条件を自社の設計から整理する。
監視を細かくすれば安心が増えるが、その分だけ書き込みと確認の対象も増える。監視自体が費用になるという視点から粒度を考える。
実行時0LLMは万能の手法ではない。答えの集合が閉じている有界ドメインでのみ成立する設計であり、境界の外側では別の設計が要る。
索引と原本を同じ場所に置くか分けるかは、実行時コストの構造そのものに関わる判断になる。自社の分け方をもとに整理する。
引かれない文書は無料で置いてあるわけではない。ビルド・保管・索引という3つの場面でどう費用に関わるかを、自社の単位経済をもとに整理する。
利用者を待たせない作業はまとめて処理できるが、応答そのものはまとめられない。バッチにできる仕事とできない仕事の境界を整理する。