社内文書RAGの権限設計|役職・職責で分ける場合の難しさ
役職は動く。職責は役職名だけでは決まらない。役職ベースの権限設計が壊れやすい理由を整理する。
17 / 72 ページ
再構築は全件やり直すか、変わった分だけにするかで費用の性質が変わる。差分で済ませられる条件を自社の設計から整理する。
監視を細かくすれば安心が増えるが、その分だけ書き込みと確認の対象も増える。監視自体が費用になるという視点から粒度を考える。
実行時0LLMは万能の手法ではない。答えの集合が閉じている有界ドメインでのみ成立する設計であり、境界の外側では別の設計が要る。
索引と原本を同じ場所に置くか分けるかは、実行時コストの構造そのものに関わる判断になる。自社の分け方をもとに整理する。
引かれない文書は無料で置いてあるわけではない。ビルド・保管・索引という3つの場面でどう費用に関わるかを、自社の単位経済をもとに整理する。
利用者を待たせない作業はまとめて処理できるが、応答そのものはまとめられない。バッチにできる仕事とできない仕事の境界を整理する。
モデルの切り替えは料金表の比較だけでは決まらない。何をLLMに任せ、何をLLM抜きで済ませるかという切り分けの判断軸を整理する。
変わっていない文書の埋め込みまで毎回作り直せば費用がかさむ。差分判定で何を省けるか、どこでは省けないかを整理する。実測値は無い。