Power QueryのM言語活用術:GUI操作の限界を超えてデータ処理を自動化・高速化する実践ガイド

GUIの限界とコードによる突破口

Power BIやExcelでのデータ処理において、マウスのクリック操作だけで作業を完結させている場合、業務の複雑化に伴って深刻な効率のボトルネックに直面する。例えば、複数地域の売上ログを毎週統合するタスクでは、GUI操作だと数時間の作業が発生するが、M言語によるスクリプト化によって数分に短縮可能である。

グラフィカルなインターフェースには、主に以下の3つの制約が存在する:

  1. 反復作業の非効率性:複数テーブルへの同一変換処理を個別に適用する必要がある
  2. 複雑なロジックの表現困難:ネストされた条件分岐や高度な計算処理の実装が困難
  3. 保守コストの増大:ステップ数が肥大化し、変更時の影響範囲の特定や修正が困難

具体的なタスクにおける処理速度の比較:

処理内容GUI操作M言語効率化倍率
複数ファイルの統合40分3分約13倍
条件付き列の生成12分1分12倍
動的ピボット解除実装不可5分-

ヒント:同じクエリの複製を頻繁に行っている、適用ステップが20を超えている、定期的な手動更新作業が発生している場合、M言語への移行タイミングである。

M言語の基本構造と概念

M言語は、データ変換に特化して設計されたドメイン固有言語であり、不要な構文を排除することで非開発者でも直感的に扱えるようになっている。

データ構造の階層

M言語では、データを3つの抽象化された構造として捉える:

let
    Source = Table.FromRecords({
        [Employee="Sato", Salary=5000],
        [Employee="Suzuki", Salary=6500]
    })
in
    Source
  • Table:行と列からなる2次元のデータセット(クエリの出力結果)
  • Record:単一行のデータ(波括弧 {} でアクセス)
  • List:単一列のデータ(角括弧 [] でアクセス)

データへのアクセス方法:

// テーブル全体の取得
EmployeeTable

// 先頭行のレコードを取得
EmployeeTable{0}

// "Employee"列の全値をリストとして取得
EmployeeTable[Employee]

// 先頭行のEmployee値を取得
EmployeeTable{0}[Employee]

主要な関数カテゴリ

数百の組み込み関数は、大きく以下の分類に整理される:

  1. テーブル操作:Table.AddColumn, Table.SelectRows, Table.Join
  2. テキスト処理:Text.Trim, Text.Contains, Text.Combine
  3. 数値計算:Number.Round, List.Sum, Number.Power

関数のリファレンスを素早く検索する方法:

// 空のクエリで全関数レコードを参照
= #shared

// 特定の関数のシグネチャと説明を取得
= #shared[Table.SelectRows]

GUI操作からM言語コードへの変換

UIでの操作手順を対応するコードに置き換えることで、M言語の理解が迅速に進む。

条件列の生成

GUIでの手順:「列の追加」タブから「条件列」を選択し、UI上で条件と出力値を設定する。

M言語での実装:

Table.AddColumn(
    BaseTable, 
    "PerformanceRating", 
    each if [Score] >= 90 then "S" 
         else if [Score] >= 70 then "A" 
         else "B"
)

コード化の利点は、複雑なネストされた条件を視覚的に把握しやすく、他のクエリへの再利用が容易な点である。

複数ファイル統合の自動化

月次で各拠点から送られてくるCSVファイルを統合する際、GUIではファイルごとのインポートとクエリの結合を手動で行う必要がある。M言語ではディレクトリを監視し、動的に統合する仕組みを構築できる。

let
    // 対象フォルダのファイル一覧を取得
    DirectoryContents = Folder.Files("C:\MonthlyLogs"),
    
    // CSVファイルのみに絞り込み
    CsvFilter = Table.SelectRows(DirectoryContents, each [Extension] = ".csv"),
    
    // 単一ファイルをパースする関数を定義
    ParseCsv = (fileInfo) => 
        let
            ParsedData = Csv.Document(fileInfo[Content], [Delimiter=",", Columns=5]),
            EnrichedData = Table.AddColumn(ParsedData, "SourceBranch", each fileInfo[Name])
        in
            EnrichedData,
    
    // 全ファイルに処理を適用し統合
    AggregatedData = Table.Combine(List.Transform(CsvFilter[Content], ParseCsv))
in
    AggregatedData

このアプローチにより、フォルダに新しいファイルが追加されてもスクリプトの変更なしに自動取り込みが可能となり、データソースの追跡も「SourceBranch」列で自動化される。

GUIでは不可能な高度なパターン

基礎的な変換を超え、M言語特有の機能を活用することで、より高度なデータ処理パイプラインを構築できる。

動的パラメータによるクエリ制御

外部パラメータを参照することで、クエリの実行条件を動的に変更可能である:

let
    // 設定用シートからパラメータを取得
    ConfigTable = Excel.CurrentWorkbook(){[Name="ConfigRange"]}[Content],
    TargetYear = ConfigTable{0}[FiscalYear],
    
    // パラメータを利用してデータをフィルタリング
    FilteredOutput = Table.SelectRows(RevenueData, each [Year] = TargetYear)
in
    FilteredOutput

Power BIのパラメータ機能と連携させることで、エンドユーザーがコードを触ることなく分析条件を変更できるダッシュボードが実現する。

階層データの再帰的処理

組織図や部品表などのツリー構造データを処理するには、再帰呼び出しが不可欠である:

(parentCategory as text) as table =>
let
    Children = Table.SelectRows(CategoryTree, each [ParentID] = parentCategory),
    AllDescendants = Table.Combine({
        Children,
        Table.Combine(List.Transform(Children[CategoryID], each GetDescendants(_)))
    })
in
    AllDescendants

カスタム関数によるロジックのカプセル化

頻繁に利用する変換ロジックは関数化することで、プロジェクト全体の保守性と一貫性が向上する:

// 従業員IDの正規化関数
(rawId as text) as text =>
let
    RemoveHyphens = Text.Replace(rawId, "-", ""),
    ExtractDigits = Text.Select(RemoveHyphens, {"0".."9"}),
    PadLength = Text.PadStart(ExtractDigits, 6, "0"),
    FinalFormat = Text.Combine({Text.Start(PadLength, 2), "-", Text.End(PadLength, 4)})
in
    FinalFormat

スクリプトの保守性と最適化

クエリの規模が大きくなるにつれ、構造の整理とパフォーマンスへの配慮が必須となる。

クエリの構造化

可読性の高いM言語クエリは、明確な責務に分割して記述する:

let
    // 1. データソースの取得
    Source = ...,
    
    // 2. 基礎的なクレンジング
    RemovedColumns = Table.RemoveColumns(...),
    FilteredRows = Table.SelectRows(...),
    
    // 3. ビジネスロジックの適用
    AddedColumns = Table.AddColumn(...),
    
    // 4. 出力形式の整形
    ReorderedColumns = Table.ReorderColumns(...)
in
    ReorderedColumns

パフォーマンス最適化のポイント

大規模データセットを扱う際の基本原則:

  • 早期フィルタリング:Table.SelectRows を最初のステップに近い位置で適用し、メモリ上のデータ量を減らす
  • 中間結果のキャッシュ:let 式内で変数に格納し、同じ計算の重複を防ぐ
  • 列単位の操作を優先:行単位の反復処理よりも、列全体に対する一括操作の方が実行効率が高い

エラーハンドリングとデバッグ

予期せぬデータ不備に対応するための防御的プログラミング:

// トランザクションとエラー内容のログ出力
ValidatedData = Table.AddColumn(IntermediateStep, "Validation", each 
    try [TargetField] 
    otherwise "Error: " & Error.Record([Reason])
)

// ゼロ除算を防ぐ安全な計算関数
SafeDivide = (numerator, denominator) => 
    if denominator = 0 then null else numerator / denominator

タグ: PowerQuery M言語 PowerBI データクレンジング ETL

10月20日 11:33 投稿