MongoDBでのMapReduceによるデータ処理

MongoDBでのMapReduceによるデータ処理 目次- MongoDBでのMapReduceによるデータ処理 - MapReduceコマンド - パラメータの説明: - MapReduceの使用方法 - 一時コレクションのパラメータ MapReduceは、大量のデータを分割して処理(マッピング)し、その結果を統合(リダクション)して最終結果を生成する計算モデルです。MongoDBが提供するMapReduceは非常に柔軟性が高く、 ...

6月11日 20:02 投稿

MongoDB 概要: 主な特徴と歴史

MongoDB 概要 MongoDBはC++で書かれたドキュメント指向のNoSQLデータベースです。分散ファイルストレージをベースにしており、Webアプリケーション向けに拡張性の高い高性能なデータストレージソリューションを提供します。データはJSONに似たBSON形式のドキュメントとして保存され、キーと値のペアで構成されます。フィールドの値には他のドキュメントや配列を含めること ...

5月23日 03:40 投稿

Hadoop Archive(HAR)による小ファイルのアーカイブ管理

アーカイブコマンドの概要 Hadoop Archive(HAR)は、HDFS上での多数の小規模ファイルによって引き起こされるNameNodeのメタデータ負荷を軽減するための仕組みです。複数の小ファイルを1つの.harファイルにパッケージ化することで、名前空間のエントリ数を削減しつつ、実際のデータアクセスには影響を与えません。クライアント側からは通常のHDFSパスと同様に扱うことがで ...

5月23日 01:43 投稿