MongoDBでのMapReduceによるデータ処理
MongoDBでのMapReduceによるデータ処理
目次- MongoDBでのMapReduceによるデータ処理
- MapReduceコマンド
- パラメータの説明:
- MapReduceの使用方法
- 一時コレクションのパラメータ
MapReduceは、大量のデータを分割して処理(マッピング)し、その結果を統合(リダクション)して最終結果を生成する計算モデルです。MongoDBが提供するMapReduceは非常に柔軟性が高く、 ...
6月11日 20:02 投稿
MongoDB 概要: 主な特徴と歴史
MongoDB 概要
MongoDBはC++で書かれたドキュメント指向のNoSQLデータベースです。分散ファイルストレージをベースにしており、Webアプリケーション向けに拡張性の高い高性能なデータストレージソリューションを提供します。データはJSONに似たBSON形式のドキュメントとして保存され、キーと値のペアで構成されます。フィールドの値には他のドキュメントや配列を含めること ...
5月23日 03:40 投稿
Hadoop Archive(HAR)による小ファイルのアーカイブ管理
アーカイブコマンドの概要
Hadoop Archive(HAR)は、HDFS上での多数の小規模ファイルによって引き起こされるNameNodeのメタデータ負荷を軽減するための仕組みです。複数の小ファイルを1つの.harファイルにパッケージ化することで、名前空間のエントリ数を削減しつつ、実際のデータアクセスには影響を与えません。クライアント側からは通常のHDFSパスと同様に扱うことがで ...
5月23日 01:43 投稿