Power QueryのM言語活用術:GUI操作の限界を超えてデータ処理を自動化・高速化する実践ガイド
GUIの限界とコードによる突破口Power BIやExcelでのデータ処理において、マウスのクリック操作だけで作業を完結させている場合、業務の複雑化に伴って深刻な効率のボトルネックに直面する。例えば、複数地域の売上ログを毎週統合するタスクでは、GUI操作だと数時間の作業が発生するが、M言語によるスクリプト化によって数分に短縮可能である。グラフィカルなインターフェー ...
10月20日 11:33 投稿
Microsoft SQL Server ManagedDTS.dllの詳細解析と.NET統合実践
Microsoft SQL Server ManagedDTS.dllの詳細解析と.NET統合実践
Microsoft SQL Server ManagedDTS.dllは、SQL Server Integration Services(SSIS)のコア管理されたDLLです。このDLLは、.NET開発者にSSISパッケージの作成、実行、および管理のためのプログラミングインターフェースを提供します。本記事では、SSISプラットフォームの機能とManagedDTS.dllがETL開発で果 ...
7月6日 16:50 投稿
Kettleを使用した大規模データ移行のパフォーマンス最適化手法
MySQLの最適化設定
データ移行先としてMySQLを使用する場合、以下の設定により大幅なパフォーマンス向上が見込めます。ここでは一時的なデータ移行用途としてMySQLを設定します。
MySQLのインストールと設定
Oracle公式サイトから64bit版MySQLをダウンロード
任意のディレクトリに解凍(例:D:\mysql-5.7.26-winx64)
my.iniファイルを作成し以下の設定を記述
[mysqld ...
6月29日 23:11 投稿
OracleからMySQLへの移行:大量データロードとETLによる差分更新の実践
OracleからMySQLへのデータベース移行では、ストアドプロシージャやSQL構文の違いに加え、データ型の変換や文字コードの互換性が重要な課題となります。本記事では、大容量データの効率的な移行手法として、高速エクスポートツールとMySQLのロード機能を組み合わせた一括移行と、ETLツール「Kettle」を活用した差分更新の実装方法について解説します。
データ型のマッピン ...
5月20日 11:36 投稿