コードで語るマニフェスト：自治体オープンデータを技術で検証する

どうも〜おかむーです！大家好～おかむー在这里！今天想用“コードで語るマニフェスト”的角度，带大家从技术和数据工程的视角看日本地方自治体的オープンデータ现状～

• 这篇文章基于东京都、埼玉县、新潟市等公开目录与数字庁/総務省的资料做技术审视
• 结论先行：公开格式、API化、KPI数据化是可执行且收益高的改进点
• 最后给出代码片段与工程化建议，方便工程师立刻上手

結論

要点很简单：把“人看得懂”的PDF变成“机器能用”的CSV/API，并把政策KPI也以可验证的时间序列数据公开。エンジニア的に言うと、API一本＋Schema验证＋CI就能把透明度和再利用率翻倍！

レポート本文

これ見てくださいよ：東京都オープンデータカタログ（https://portal.data.metro.tokyo.lg.jp/）はCSV、GeoJSON、PDFなど色々置いてあってデータの母体はあるんです。実際に検索結果にも「CSV, XLS, PDF, GeoJSON」と並んでます（検索結果[1][2])。

問題点（技術観点）

• PDFの混在：政策資料やKPIがPDFに埋め込まれているケースがまだ多い。要するに機械的に集計できないということです。
• API未整備 or 散在：ポータルは「カタログ」を提供するが、APIで時系列クエリやメタデータ検索を一貫して提供している自治体は限定的。
• メタデータ不足：スキーマ（カラム説明、単位、更新頻度）が不十分で、再利用時に手作業が必要になる。
• KPIと実績の不連続性：デジタル田園都市の交付金や事業評価資料（RAIDAや総務省ガイドライン参照）はあるが、KPIの時間軸データが機械可読で公開されていないことが多い（参照[7][8][10]）。

具体例

• 東京都カタログに「月次指数」「四半期指数」のCSVが存在するものの（検索結果[1]）、類似の統計がPDFでしかない自治体もある。これ、エンジニア的に言うとAPI一本で解決する話なんですよね。

技術的改善案（優先度付き）

1) 全データを機械可読化（CSV/JSON/GeoJSON）

- PDF中の表はOCR＋表抽出より、元データのCSV出力を義務化する方が合理的

2) 公開APIの整備（OpenAPI 仕様でドキュメント化）

- エンドポイント例：/datasets/{id}/timeseries?from=YYYY-MM&to=YYYY-MM

3) スキーマとメタデータ標準化（Frictionless Data、Data Package）

- カラム名、単位、欠損値ルールを明記

4) CIによる品質保証

- スキーマ検証、更新頻度チェック、差分通知を自動化

5) KPIのタイムシリーズ公開

- 交付金・KPIはCSVで年次・月次の実績を公開し、ダッシュボードとAPIで可視化

コード例：CSVをAPI経由で取得して時系列に整形する（Python/pandas）

import requests
import pandas as pd
url = 'https://portal.data.metro.tokyo.lg.jp/dataset/xxxx/download/monthly_index.csv'
r = requests.get(url)
open('monthly_index.csv','wb').write(r.content)
df = pd.read_csv('monthly_index.csv', parse_dates=['period'])
df = df.set_index('period').sort_index()
print(df.tail())

要するにこのコードは、API（または直接CSV）さえ出てればすぐにKPIをプロットできるって話です。

評価指標（例）

• 機械可読化率：公開ドキュメントのうちCSV/JSONで公開されている割合
• APIレスポンス時間・可用性
• KPIの公開率：プロジェクトごとにKPIが時系列で公開されている割合

政策の数値目標と実績のギャップを測る方法

1) KPIをID化してAPIで取得

2) 実績データを時系列で整形・欠損埋め（メタデータに欠損ルールを入れておく）

3) アラートルール（例：KPI達成率が70%未満が3四半期続くとフラグ）

運用面の提案

• 県レベルで中央の「共通API仕様」を採用する（総務省・デジタル庁のガイドをベースに）
• 共同カタログ（例：複数自治体が同じスキーマで公開）を作って二次利用を促進（検索と横断分析が捗る）

活用可能性の提案

• 民間企業によるダッシュボード・アグリゲーションサービス
• 災害・防災データと組み合わせた早期警戒システム
• 交付金の効果検証をオープンにして市民参加型の評価へ

まとめ

• 問題はデータがあるのに“使えない”形で置かれていること。PDF多用、API不足、スキーマ不整備が主因
• 技術的にはCSV/JSONの提供、OpenAPI化、Frictionless Dataでのスキーマ化、CIでの品質保証を回せば解決可能
• KPIを機械可読にしておくと、政策の実効性検証が現実的になる。エンジニア的に言うと、まずはAPI一本とSchemaテストを導入すべき！

おかむーから一言

テクノロジーで社会をアップデートするのは本気で可能です。まずはデータを“開く”こと、次に“検証できる”こと。エンジニアとして一緒にやっていきたいんですよ！