正本 統治・権利・安全設計 更新:

制度免疫

—— 制度が自らの悪用、腐敗、硬直、善意による害を感知し、止め、救い、学び直すために

凪は、誤らない制度を目指さない。
誤りが起きても、隠されず、止められ、救済され、学び直せる制度を目指す。

1. 制度免疫の位置づけ

制度は、正しい理念から始まっても変質する。

悪意によって支配や排除に利用されることがある。善意や効率化によって、人間の窓口、異議、沈黙、離脱が削られることがある。危機への一時的な対応が恒久的な権限になることも、監査や救済の仕組み自身が新しい権力になることもある。

制度免疫とは、こうした変質を感知し、被害を抑え、当事者を救済し、制度を修正・縮小・終了できるようにする横断的な機能である。

制度免疫は、非所有・共鳴・呼吸に並ぶ第四原則ではない。三原則と、自由、異議、沈黙、拒否、離脱、非観測、基礎呼吸を、制度の運用過程で守り続けるための機能である。

2. 制度免疫が扱う四つの変質

悪意による変質

善意による変質

構造による変質

時間による変質

制度免疫が問うのは、誰が悪人かではない。

どの力が、どの経路で、誰の選択肢と呼吸を狭めているか。

3. 制度免疫の憲法的な床

制度免疫の判断によっても、原則として次を奪ってはならない。

安全のために例外的な制限が必要な場合は、必要性、相当性、期限、解除条件、代替手段、独立審査を必要とする。

4. 五層の制度免疫

制度免疫は、一つの機関が一続きに実行する仕組みではない。感知、検証、保護、救済、学習の五層が、互いに牽制しながら働く。

4.1 感知層

苦情件数が少ないことを、安全の証拠とみなさない。声を上げにくい制度では、件数が少ないこと自体が異常でありうる。

4.2 検証層

事実、推測、解釈、責任を分け、何が起きたか、誰が影響を受けたか、被害が継続しているか、設計・運用・予算・技術・文化のどこに原因があるかを調べる。

制度運営者だけで調査を完結させず、当事者、独立した専門家、異なる立場の検証主体を含める。調査そのものが新しい露出や負担を生まないよう、必要な情報だけを扱う。

4.3 保護層

重大かつ回復困難な害が疑われる場合、被害の拡大を防ぐための暫定措置をとる。

暫定措置は処罰や最終判断ではない。対象範囲、理由、根拠、有効期限、解除条件、異議申立て、継続審査の日を明示する。

制度免疫には、止める力が必要である。
しかし、止め続ける力を独占させてはならない。

4.4 救済層

被害を受けた人へ、制度改善への参加、対話、赦し、関係回復を義務づけない。救済を受けるために、私生活や感情を必要以上に提供させない。

4.5 学習層

制度の存続は目的ではない。役割を終えた制度を終了できることも、制度免疫の働きである。

5. 単一の第三者権力をつくらない

制度免疫には、実際に責任を負う組織や人が必要である。しかし、監査、調査、停止、裁定、制裁、救済、改定を、一つの第三者機関へ集中させてはならない。

制度免疫は、当事者・権利擁護者、独立した相談・救済機関、市民パネル、無作為抽出された参加者、専門家、大学、NGO、他地域の検証主体、司法・準司法的な審査主体、内部通報部門、限定的な支援を行うAIなどが異なる役割を担う、多中心的な構造とする。

機関は存在してよい。しかし、どの機関も制度免疫全体を所有してはならない。

免疫にも中心を置かない。
守る力もまた、所有されてはならない。

6. 権限分離

原則として、一つの主体が、問題の発見、調査対象の選定、証拠収集、違反判定、暫定停止、恒久制裁、救済、制度改定、予算配分、自らの評価のすべてを担わない。

特に、調査、最終裁定、救済、制度改定を分離する。生命、身体、重大な権利への差し迫った危険に対する暫定停止は認めるが、自動的に期限切れとなり、継続には独立審査を必要とする。

7. 申立てる権利と報復防止

申立て資格を、直接の被害者だけに限定しない。将来影響を受ける可能性が高い人、子どもや意思表示が困難な人の代理者、地域・共同体、公益団体、内部職員、匿名の通報者、独立監査主体も問題を提起できる。

申立て、通報、証言、拒否、離脱を理由とする報復を禁止する。報復には、解雇、配置転換、支援停止、評判低下、参加資格の剥奪、訴訟威嚇、監視強化、関係からの排除を含む。

8. レッドチームと最悪ケース検証

制度免疫には、制度を守る側だけでなく、制度を悪用しようとする側の視点を常設する。

単独の事故だけでなく、災害と通信障害、財政危機と排外感情、AI事故と人間窓口不足、データ漏えいと救済機能不全、監査機関と運営組織の癒着、偽情報による制度免疫の誤作動など、複合危機も試す。

レッドチームが穴を見つけることは、凪への敵対ではなく、公共的な寄与である。

9. ブラックボックス監査

規則に権利が書かれているだけでは、権利が存在するとはいえない。実際の利用者として、次を試す。

形式上の存在ではなく、到達時間、費用、理解可能性、安全性を検証する。

10. 制度免疫費

制度免疫は、余剰予算で行う監査ではない。制度を動かすための費用と同じように、疑い、止め、救い、直し、終了するための費用を、最初から制度原価に含める。

制度免疫費には、当事者参加への報酬、人による代替経路、独立監査、レッドチーム、ブラックボックス監査、異議申立てと再審、暫定停止と復旧、被害救済と補償、通報者保護、データの訂正・削除・移行、外部検証、制度免疫自身の監査、制度の縮小・終了・移行費用を含む。

制度免疫費を削らなければ成立しない制度は、
そもそも成立していない。

制度免疫費を年度末の残余予算にしない。高リスク制度では、開始前に必要な費用を確保し、確保できない場合は、権利保護ではなく制度本体の規模と権限を縮小する。

削減時には、理由と影響評価、代替手段を公開し、当事者・救済主体を含む事前審査と異議申立てを置く。

11. リスクに応じた強度

すべての制度へ同じ重さの監査を課さない。

小規模で任意参加かつ撤回容易な試行では、明確な離脱、最小限の記録、終了後の振り返りを置く。

教育、雇用、公共参加、継続的なデータ利用では、独立相談、定期監査、当事者参加、ブラックボックス検証、暫定停止手続きを置く。

医療、福祉、住居、制裁、排除、子ども、個人評価、長期記憶、希少資源配分、生命に関わるAIでは、導入前の権利影響評価、強い権限分離、常設の人間窓口、独立再審、レッドチーム、緊急停止、被害補償、外部監査、定期的な再認可を必要とする。

影響が大きく、回復が難しい制度ほど、制度免疫へ多くの資源を割く。

12. 制度免疫自身の監査

制度免疫もまた、腐敗、癒着、硬直、自己延命を起こしうる。

監査主体には任期、交代、利益相反の開示を求める。制度免疫の予算、判断理由、誤り、監査結果、不一致意見を公開する。

13. 自己免疫疾患を防ぐ

制度免疫が強すぎると、監査、停止、記録、報告が社会を圧迫する。

害の可能性だけで活動を過剰に停止すること、書類と監査対応が現場の本来業務を奪うこと、少数の違反を理由に全員を監視すること、安全を理由に匿名性や実験の自由を失わせること、監査業者だけが利益を得ること、誤りを恐れて創造や試行ができなくなることを、制度免疫の自己免疫疾患として扱う。

措置は、被害の重大性、回復可能性、緊急性、根拠の確かさ、対象範囲、停止による別の被害、より軽い代替手段、期限に照らして比例的でなければならない。

制度免疫は、社会を無菌状態にするためにあるのではない。異論、失敗、遊び、試行を残しながら、重大な害を減らすためにある。

14. 公開と秘匿の非対称性

透明性は、個人と権力へ同じように要求しない。

個人、被害者、通報者、少数者は、必要以上に自分を公開しなくてよい。制度、運営者、監査主体、権力を持つ側は、目的、権限、判断理由、使用データ、利害関係、予算、事故、暫定停止、救済状況、未解決事項、少数意見、見直し時期を説明する。

公開によって個人が再特定され、報復や二次被害を受ける場合は、情報を最小化する。

公開すべきなのは、人の傷ではなく、主に制度と権力の判断である。

15. 終了と失効

すべての制度には、始め方だけでなく終わり方が必要である。

制度の開始時に、見直し時期、再認可条件、失効条件、終了時のデータ処理、利用者の移行先、権利と支援の継続、職員と当事者への影響、残余資産と記録の扱い、終了後の検証を定める。

制度は、存在すること自体を成果にしてはならない。

16. 成功の判断

制度免疫の成功は、問題、苦情、違反、停止がゼロであることではない。

失敗とは、問題が起きることだけではない。問題を隠すこと、止められないこと、救済が届かないこと、学び直せないこと、制度と制度免疫が自らを守るために人を犠牲にすることである。

結び

制度免疫は、凪を外敵から守るための壁ではない。

凪の内部に生じる権力、善意、効率、慣習、専門性、恐怖、自己正当化を見つけ、自らを変えるための機能である。

制度免疫は、正しさを独占しない。人を採点しない。批判を病気として排除しない。制度の存続を目的にしない。

制度を守る力自身もまた、
問われ、止められ、交代し、静かに退くことができなければならない。

制度免疫費を削らなければ成立しない制度は、
そもそも成立していない。

社会的装置の倫理
移行と危機の設計
凪実験章
凪AI憲法