Apache Zeppelin 0.11.1 インストール手順
Apache Zeppelin インストールガイド
Apache Zeppelinは、Webベースのノートブック형 데이터分析ツールです。本稿では、Zeppelin 0.11.1のインストールから初期設定までを手順を追って解説します。
1. アーカイブの展開
tar -zxvf zeppelin-0.11.1-bin-all.tgz
cd zeppelin-0.11.1-bin-all
2. サーバーアドレスとポート設定
confディレクトリ内の設定ファイルを作成し ...
5月12日 19:57 投稿
Sparkにおけるバイナリファイルの読み込みと処理
Sparkでバイナリデータを扱う方法
Apache Sparkでは、大量のファイルデータを効率的に処理するための機能が提供されています。binaryFilesメソッドは、バイナリ形式のファイルをRDDとして読み込むためのインターフェースです。この機能を利用することで、画像や実行ファイルなど、テキスト以外のデータもSpark上で直接操作することが可能になります。
基本的な利用手順
以 ...
5月11日 13:24 投稿