列のピボット解除

Power Query でフォルダから複数ファイルを一括インポートする

　Power Query で，あるフォルダ内の同一構造のファイルを一括してインポートする機会は多い．M 言語は未開拓であるが，その一端に触れてみた．

　EXCEL ブックであれ csv ファイルであれ，構造化されたデータという観点から見れば，ファイル形式などどうでも良い話である．この抽象化が理解できれば，Power Query への理解が一定程度進むのではないかと思う．

　また面倒な統計を見つけてしまった．Power Query に食わせれば早いのかも知れないが，どうにも埒が明かないので手動でデータを整形することになった．頼むから第一正規形で公開してくれ…

　EXCEL のワークシートの仕様上，100 万件を超えるデータは扱えない．これは大規模なデータを扱う際の制約である．180万件のデータをPower Queryで処理してEXCELがオーバーフローした話でも述べたが，この制約を乗り越えてデータをインポートするにはデータモデルに読み込むほかはない．

　SQL Server で PowerQuery が使えればこういった制約を回避できるのだが，ないものは仕方がない．今回は PowerPivot を用いてデータモデルに蓄積したデータを取り出す方法を見つけたので備忘録として記す．