■
digdag/embulk を ubuntu 14 にインストールする
まずjavaをインストールせよと。
sudo apt-add-repository ppa:webupd8team/java sudo apt-get update sudo apt-get install oracle-java8-installer java -version
How to Install Oracle Java 8 on Ubuntu 14.04 LTS | Liquid Web Knowledge Base
digdagのインストール。
curl -o ~/bin/digdag --create-dirs -L "https://dl.digdag.io/digdag-latest" chmod +x ~/bin/digdag echo 'export PATH="$HOME/bin:$PATH"' >> ~/.bashrc
Getting started — Digdag 0.9.5 documentation
embulkのインストール
curl --create-dirs -o ~/.embulk/bin/embulk -L "https://dl.embulk.org/embulk-latest.jar" chmod +x ~/.embulk/bin/embulk echo 'export PATH="$HOME/.embulk/bin:$PATH"' >> ~/.bashrc source ~/.bashrc
https://github.com/embulk/embulk#linux--mac--bsd
利用するin/outプラグインのインストール。
embulk gem install embulk-input-mysql embulk gem install embulk-output-mysql embulk gem install embulk-input-bigquery embulk gem install embulk-output-bigquery
embulk-input-mysqlを使ってみた - Qiita EmbulkでMySQLに大量データを投入してみる - その1 - Qiita