マルチノードGPU環境のConda環境・重み同期ガイド

分散学習を行う際、複数の計算ノードで同一のPython環境と重みファイルを素早く揃える方法をまとめる。 Conda環境を丸ごとレプリケートする 環境ディレクトリを丸コピーするとパス依存で失敗するため、conda env exportでYAML定義を生成し、対象マシンで再構築するのが最も確実。 # 1. 環境をYAMLに書き出す mamba activate qwen2-57b conda env export --no-builds | gr ...

7月22日 20:38 投稿

Linux 基盤運用で必須となるコマンド操作と自動化設定

ファイル検索と管理コマンド find コマンドによる検索 Linux 環境において、特定のファイルやディレクトリを検索する際に find コマンドが広く利用されます。基本構文は検索開始パスと条件オプションで構成されます。 find [検索開始パス] [検索条件] 主な検索オプションには以下のようなものがあります。 -name: ファイル名による検索(ワイルドカード * 使用可能) ...

7月1日 00:40 投稿

ソフトウェア開発ライフサイクルとコードデプロイ手法

開発プロジェクトのフェーズ プロジェクトは以下の主要フェーズを経て進行する: 要件定義:開発マネージャーがタスクを分割し、チームメンバーのスキルと人数を考慮してアサインする。 開発:各メンバーが担当モジュールを開発。統合前に全開発メンバーが協力して結合テスト(インタグレーションテスト)を実施。 テスト:品質保証チームが機能検証を実施。 デ ...

5月14日 10:08 投稿