全国には避難施設が約 12 万箇所ある．それらの位置データを SQL Server にアップロードしたい．何度か試行錯誤の結果アップロードに成功したので備忘録として公開する．
国土数値情報の避難施設のポイントデータをSQL Serverにアップロードする
国土数値情報の河川データを水域系別にQGISで色分けする
河川データの水域系別の色分けは以前からの課題であった．今回ヒントが得られたのでQGISの操作をあわせて紹介する．
階乗の自然対数を求めるユーザー定義のスカラー値関数をSQL Serverで定義する
Fisherの直接確率を求める際，階乗の計算が必要になる．しかし，引数が最大でも170までと使い勝手が良くない．これはプログラム言語の種類にかかわらず，データ長の制約が原因である．今回は対数を用いて階乗計算の引数の限界を超えるアイデアを共有したい．
QGIS から SQL Server へデータをアップロードする際の勘所
QGIS から SQL Server 2008 R2 に空間データをアップロードする際には Shape2SQL というツールを使った．便利なツールではあるが，国土数値情報の河川データの属性テーブルの日本語が文字化けするという問題を抱えており，何とかならないかと試行錯誤した結果を備忘録として投稿する．
QGISのフィールド計算機で国土数値情報の河川データの属性を修正する
国土交通省の国土数値情報の河川データには不備がある．テーブル構造の不一致についてはテーブル構造の修正には「属性のリファクタリング」で修正方法を述べた．今回は属性テーブルの値を修正する．
値を修正するだけのつもりでいたが，結局「属性のリファクタリング」まで手を出してしまった．おかでげ国土数値情報の河川データはほぼ修正できたと思う．
都道府県ごとの河川データを1つのcsvファイルに変換する
河川データを都道府県別ではなく，水域別に抽出したい．そんな動機から QGIS と EXCEL の間を行ったり来たりしている．QGISで都道府県ごとの河川データをマージするではかなり無謀なことをやった．今回はもう少し丁寧にデータを扱ってみたい．
国土数値情報の河川データの属性テーブルを編集してみたが…
QGIS で国土数値情報の河川データの属性テーブルを覗いてみて，少し気になる点が見つかった．
PowerPivotで100万件超えのデータを取り出す
EXCEL のワークシートの仕様上，100 万件を超えるデータは扱えない．これは大規模なデータを扱う際の制約である．180万件のデータをPower Queryで処理してEXCELがオーバーフローした話 でも述べたが，この制約を乗り越えてデータをインポートするにはデータモデルに読み込むほかはない．
SQL Server で PowerQuery が使えればこういった制約を回避できるのだが，ないものは仕方がない．今回は PowerPivot を用いてデータモデルに蓄積したデータを取り出す方法を見つけたので備忘録として記す．
全国の市区町村の財政
総務省の e-Stat から全国の市区町村の財政状況を垣間見る．衰退する都市には財政破綻の徴候が見られるはずである．今回は財政力指数，経常収支比率，実質公債費比率，地方債現在高に注目する．
PowerBIで郵便番号からヒートマップを作成する
とある件で発表の機会があり，その準備に追われている．弊社の顧客マスターから抽出した郵便番号をジオコーディングし，地図上にヒートマップを作成するという作業を行ったので，備忘録として残しておく．