Embulk初接触
本文系Embulk英文網(wǎng)站翻譯,僅供個(gè)人學(xué)習(xí)使用,本人英語(yǔ)渣渣,使用翻譯軟件協(xié)助翻譯,見諒。
英文網(wǎng)站地址:http://www.embulk.org/docs/
一、什么是Embulk?
??????? Embulk是一個(gè)開源的批量數(shù)據(jù)加載器,用來(lái)在不同數(shù)據(jù)庫(kù)、存儲(chǔ)設(shè)備、文件格式以及云服務(wù)間轉(zhuǎn)移數(shù)據(jù)
二、Embulk支持:
1、自動(dòng)識(shí)別輸入的文件格式
2、并行和分布式執(zhí)行處理大數(shù)據(jù)集
3、保證事物控制單純性
4、數(shù)據(jù)恢復(fù)
5、在RubyGems.org上發(fā)布插件
你可以使用輸入和輸出插件組合來(lái)定義一個(gè)批量數(shù)據(jù)加載器
(網(wǎng)站這里有一個(gè)插件的關(guān)系圖)
例如,本教程描述如何使用csv文件輸入插件解析器插件和gzip解碼器插件讀csv文件,和elasticsearch elasticsearch插件加載記錄輸出。
(以下是文檔例程)
- 快速啟動(dòng)
- Linux
- Mac OS X
- 窗戶
- 方法
- 安排批量數(shù)據(jù)加載Elasticsearch + Kibana 4從CSV文件
- 插件的類別列表
- 輸入插件
- 輸出插件
- 文件解析器插件
- 文件解碼器插件
- 文件格式器插件
- 過(guò)濾器插件
- 文件編碼插件
- 執(zhí)行器插件
- 配置
- Embulk配置文件格式
- 使用變量
- 包括文件
- 本地文件輸入插件
- 選項(xiàng)
- 例子
- CSV解析器插件
- 選項(xiàng)
- 例子
- Gzip解碼器插件
- 選項(xiàng)
- 例子
- 文件輸出插件
- 選項(xiàng)
- 例子
- CSV格式器插件
- 選項(xiàng)
- 例子
- Gzip編碼插件
- 選項(xiàng)
- 例子
- 重命名過(guò)濾器插件
- 選項(xiàng)
- 例子
- Embulk配置文件格式
- 定制
- 創(chuàng)建插件
- 步驟1:創(chuàng)建一個(gè)新項(xiàng)目
- 第二步:構(gòu)建項(xiàng)目
- 步驟3:確認(rèn)它的工作原理
- 第四步:修改代碼
- 釋放插件
- 檢查插件描述
- 在RubyGems.org上創(chuàng)建帳戶
- 釋放插件到RubyGems.org
- 安裝你的插件
- 創(chuàng)建插件
- JavaDoc
- RDoc
- Github
- 版本注釋
- 釋放0.7.10
- 釋放0.7.9
- 釋放0.7.8
- 釋放0.7.7
- 釋放0.7.6
- 釋放0.7.5
- 釋放0.7.4
- 釋放0.7.3
- 釋放0.7.2
- 釋放是0.7.1
- 釋放0.7.0
- 釋放0.6.27
- 釋放0.6.26
- 釋放0.6.25
- 釋放0.6.24
- 釋放0.6.23
- 釋放0.6.22
- 釋放0.6.21
- 釋放0.6.20
- 釋放0.6.19
- 釋放0.6.18
- 釋放0.6.17
- 釋放0.6.16
- 釋放0.6.15
- 釋放0.6.14
- 釋放0.6.13
- 釋放0.6.12
- 釋放0.6.11
- 釋放0.6.10
- 釋放0.6.9
- 釋放0.6.8
- 釋放0.6.7
- 釋放0.6.6
- 釋放0.6.5
- 釋放0.6.4
- 釋放0.6.3
- 釋放0.6.2
- 釋放0.6.1
- 釋放0.6.0
- 釋放0.5.5
- 釋放0.5.4
- 釋放0.5.3
- 釋放0.5.2
- 釋放0.5.1
- 釋放0.5.0
- 釋放0.4.10
- 釋放0.4.9
- 釋放0.4.8
- 釋放0.4.7
- 釋放0.4.6
- 釋放0.4.5
- 釋放0.4.4
- 釋放0.4.3
- 釋放0.4.2
- 釋放0.4.1
- 釋放0.4.0
- 釋放0.3.2
- 釋放0.3.1
- 釋放0.3.0
- 釋放0.2.1
- 釋放0.2.0
- 釋放0.1.0
| ? | ? | ? |
| ? | ? | ? |
| ? | ? |
總結(jié)
- 上一篇: 强大的企业工作平台—今目标
- 下一篇: 降雨模拟器