MAPRISEは九州7県からスタートしたサービスです。本日、介護・障害福祉サービス事業所、国勢調査小地域統計、経済センサスメッシュ、外国人人口、犯罪発生情報、都道府県地価調査などのレイヤーが次々と全国47都道府県へ拡張されました。確認作業の中で見つかった発見と、8月内の全国対応を目指す現在地を、正直に書き残します。
こんにちは、MAPRISE開発チームです。いつもと少し違って、今日は特定の新機能の紹介ではなく、1日の作業の記録をそのまま書きます。
九州7県から、全国へ
MAPRISEは、九州7県(福岡・佐賀・長崎・熊本・大分・宮崎・鹿児島)を対象に始まったサービスです。地域を絞ることで、データの精度や使い勝手を確かめながら育ててきました。とはいえ、不動産・金融・住宅メーカーなど、九州以外のエリアを見ている方々からのご要望もいただくようになり、扱えるデータの種類を広げるのと同じくらいの熱量で、対応地域そのものを全国へ広げる作業を進めています。本日は、そのなかでも特に多くのレイヤーが動いた1日でした。
本日、1つ1つ確かめながら広げたこと
今日1日で、以下のデータレイヤーが九州7県から全国47都道府県へ拡張、または新規に追加されました。
- 介護サービス事業所(厚生労働省、新規・223,107件)
- 障害福祉サービス事業所(WAM NET、新規・209,452件)
- 国勢調査小地域統計(総務省統計局、231,931件)
- 経済センサスメッシュ(総務省統計局・経済産業省、325,522件)
- 外国人住民数・国籍別人口・比率ヒートマップ(総務省・総務省統計局、計718,457件)
- 犯罪発生情報(都道府県警察、292,391件。データ形式の違いで保留していた3県も本日解消)
- 都道府県地価調査 L02(国土交通省、2023〜2025年の3年分・98,684件)
- 福祉施設(国土交通省、42都道府県・93,232件。岩手・山形・岐阜・和歌山・愛媛の5県は、まだ収録できていません)
あわせて、地図上に表示していても質問できなかった介護・障害福祉サービス事業所を、AIチャットでも答えられるようにしました。「近くの訪問介護事業所は」といった質問に、地図と同じデータをもとに答えられるようになっています。
どれも派手な新機能ではありませんが、1つのレイヤーを全国化するたびに、出典元の統計表を読み直し、都道府県ごとの収録件数を突き合わせ、既存の九州分と矛盾がないかを確かめる、という地道な作業の積み重ねです。
確認して初めて見えてきたこと
こうした確認作業を丁寧にやっていると、良くも悪くも、いろいろなものが見えてきます。今日見つかったもののうち、2つを紹介します。
1つ目は、経済に関するある統計データです。全国分を投入する準備として既存の九州分データを見直したところ、表示上は最新年のデータのはずが、実際には10年近く前の値のまま更新されていなかったことが分かりました。件数そのものは変わっていないので、パッと見ただけでは絶対に気づけないタイプのズレです。投入件数の細かい端数を追いかけていたおかげで発覚し、正しい年の値へ差し替えました。
2つ目は、外国人の人口を地図上で色分け表示する機能です。ある県で、実際の人口より約3割近く少ない数字が表示され続けていたことが分かりました。原因は、元の統計に含まれる「市区町村全体の人口」と「そのうち都市部だけを集計した人口」という2種類の数字を取り違え、狭い方の数字で上書きしてしまっていたことでした。全国分を投入する検証の過程で発覚し、是正しました。
正直に言うと、こうした不具合が見つかること自体は、あまり気持ちの良いものではありません。ただ、今回のように「気づけて、直せた」ことは、素直に良かったと思っています。見つけられないまま公開し続けるほうが、ずっと厄介です。
都度の回帰確認
新しいレイヤーを1つ追加するたびに、既存の九州分のデータの件数や内容が変わっていないかを確認する作業を挟んでいます。地味で、正直やや退屈な作業でもあるのですが、この確認を省いてしまうと、今回のような古い値の混入や集計の取り違えに気づけないまま公開してしまう可能性が高くなります。地道ではありますが、今のところこれが一番信頼できるやり方だと思って続けています。
現在地
というわけで、本日時点でMAPRISEが全国47都道府県で扱えるようになったデータは、地価公示、介護・障害福祉サービス事業所、国勢調査小地域統計、小地域境界、経済センサスメッシュ、外国人人口関連の3データ、犯罪発生情報、都道府県地価調査などに広がりました。福祉施設のように、まだ一部の県が収録できていないものや、九州先行のまま残っているデータも、まだいくつもあります。
これから ― 8月内の全国対応を目指しつつ、道半ばであることも正直に
8月内に、主要なデータレイヤーの全国対応を一通り終えることを目標にしています。ただし、すべての機能を全国で同じように使えるようにする、という意味ではありません。地震被害シミュレーションや、PLATEAU建物3Dモデルのように自治体ごとのデータ整備状況に依存する機能は、対象外とする予定です。これらは元データの整備状況そのものが自治体ごとにばらつきがあり、九州で培ってきた検証プロセスをそのまま全国に広げられる性質のものではないためです。
正直なところ、今日ご紹介した内容も含めて、まだ道半ばです。イレギュラーも都度発生しますし、確認すればするほど、直したいところが見つかります。それでも、1シート1シート、1つ1つのデータを地道に確認しながら進める姿勢は、これからも変えるつもりはありません。
おわりに
今日は珍しく、機能紹介ではなく作業の記録をそのまま書きました。派手さはありませんが、こうした積み重ねの先に、より正確で、より広い範囲をカバーするMAPRISEがあると考えています。引き続き、地道な確認を続けていきます。
本記事で紹介したデータは、それぞれ厚生労働省・独立行政法人福祉医療機構(WAM NET)・総務省統計局・経済産業省・国土交通省・都道府県警察のオープンデータ等を出典としています。件数・対応都道府県数は本記事公開時点のものであり、今後の確認作業により変動する可能性があります。
タグ: #全国展開 #データ品質 #オープンデータ #回帰テスト #九州
他言語のシェアテキスト (例外運用向け)
通常は上の Quick share をご利用ください (X 系は日本語、LinkedIn は英語に固定)。下の 4 ペインは「英語記事を X で日本語紹介したい」「日本語記事の LinkedIn 投稿を日本語で出したい」等の例外運用に使えます。各テキストはコピー編集してから投稿することも、そのまま投稿画面を開くこともできます。
📝 九州7県から全国へ ― データを1枚1枚確かめながら広げた1日の記録 MAPRISEは九州7県からスタートしたサービスです。本日、介護・障害福祉サービス事業所、国勢調査小地域統計、経済センサスメッシュ、外国人人口、犯罪発生情報、都道府県地価調査などのレイヤーが次々と全国47都道府県へ拡張されました。確認作業の中で見つかった発見と、8月内の全国対応を目指す現在地を、正直に書き残します。 https://maprise.jp/ja/blog/nationwide-expansion-one-day/ #全国展開 #データ品質
🆕 新しいブログ記事を公開しました。 《九州7県から全国へ ― データを1枚1枚確かめながら広げた1日の記録》 MAPRISEは九州7県からスタートしたサービスです。本日、介護・障害福祉サービス事業所、国勢調査小地域統計、経済センサスメッシュ、外国人人口、犯罪発生情報、都道府県地価調査などのレイヤーが次々と全国47都道府県へ拡張されました。確認作業の中で見つかった発見と、8月内の全国対応を目指す現在地を、正直に書き残します。 👉 詳しくはこちら: https://maprise.jp/ja/blog/nationwide-expansion-one-day/
📝 From 7 prefectures in Kyushu to nationwide - a day spent checking data one sheet at a time MAPRISE started out covering Kyushu's 7 prefectures. Today, layer after layer - elderly care and disability welfare service … https://maprise.jp/en/blog/nationwide-expansion-one-day/ #Nationwideexpansion #Dataquality
🆕 New on the MAPRISE blog. 《From 7 prefectures in Kyushu to nationwide - a day spent checking data one sheet at a time》 MAPRISE started out covering Kyushu's 7 prefectures. Today, layer after layer - elderly care and disability welfare service providers, census small-area statistics, economic census mesh, foreign population data, crime occurrence records, and the prefectural land price survey - expanded to all 47 prefectures. Here's an honest account of what we found along the way, and where things stand as we aim for nationwide coverage by the end of August. 👉 Read the full post: https://maprise.jp/en/blog/nationwide-expansion-one-day/ #Nationwideexpansion #Dataquality #Opendata #Regressiontesting #Kyushu