マルチノードGPU環境のConda環境・重み同期ガイド
分散学習を行う際、複数の計算ノードで同一のPython環境と重みファイルを素早く揃える方法をまとめる。
Conda環境を丸ごとレプリケートする
環境ディレクトリを丸コピーするとパス依存で失敗するため、conda env exportでYAML定義を生成し、対象マシンで再構築するのが最も確実。
# 1. 環境をYAMLに書き出す
mamba activate qwen2-57b
conda env export --no-builds | gr ...
7月22日 20:38 投稿
Linux 基盤運用で必須となるコマンド操作と自動化設定
ファイル検索と管理コマンド
find コマンドによる検索
Linux 環境において、特定のファイルやディレクトリを検索する際に find コマンドが広く利用されます。基本構文は検索開始パスと条件オプションで構成されます。
find [検索開始パス] [検索条件]
主な検索オプションには以下のようなものがあります。
-name: ファイル名による検索(ワイルドカード * 使用可能)
...
7月1日 00:40 投稿
ソフトウェア開発ライフサイクルとコードデプロイ手法
開発プロジェクトのフェーズ
プロジェクトは以下の主要フェーズを経て進行する:
要件定義:開発マネージャーがタスクを分割し、チームメンバーのスキルと人数を考慮してアサインする。
開発:各メンバーが担当モジュールを開発。統合前に全開発メンバーが協力して結合テスト(インタグレーションテスト)を実施。
テスト:品質保証チームが機能検証を実施。
デ ...
5月14日 10:08 投稿