EOS 區塊鏈數據實時異構到 MongoDB

時間 2019-11-17

標籤 eos 區塊數據實時異構 mongodb 欄目比特幣简体版

原文原文鏈接

文/robinnode

這是「區塊鏈技術指北」的第 38 篇文章。git

若是對我感興趣，想和我交流，個人微信號：Wentasy，加我時簡單介紹下本身，並註明來自「區塊鏈技術指北」，同時我會把你拉入微信羣。github

題圖來自: © ChainONE / Original / chainon.iosql

更新：從 EOSIO 1.1.0 開始，已經默認支持 MongoDB，因此本文提供的方法僅作參考。mongodb

0x00 背景

執行 eosio_build.sh 腳本編譯 nodeos 會默認安裝 mongodb，可是從 Dawn 4.0 開始，mongo_db_plugin 插件再也不生效，詳情請參考 #3030。#4304 PR 從新支持 MongoDB，本文講解如何將鏈上數據實時同步到 MongoDB。數據庫

0x01 部署

部署的思路以下：json

編譯支持 mongo_db_plugin 的 nodeos
配置 MongoDB
啓動 MongoDB
建立數據庫
啓動 nodeos，同步主網數據
查看 MongoDB，確認數據

接下來咱們逐步講解。安全

因爲 EOSIO 代碼庫有 gh#3030-enable-mongodb 分支，因此可使用 git 自動將支持 mongo_db_plugin 插件的代碼合併，詳細命令以下：ruby

$ mkdir -p /data/mongodb && cd /data/mongodb
$ git clone -b release/1.1 https://github.com/EOSIO/eos.git --recursive
$ cd eos
$ git fetch --all --tags --prune
$ git merge --m "merge" --commit origin/gh#3030-enable-mongodb
$ git submodule update --init --recursive
$ ./eosio_build.sh
複製代碼

若是 nodeos 編譯成功，MongoDB 自動安裝，路徑在 $USER/opt/mongodb。執行 /data/mongodb/eos/build/programs/nodeos/nodeos --help | grep mongo，若是有以下的輸出，表示 MongoDB 插件編譯成功。bash

Config Options for eosio::mongo_db_plugin:
  -q [ --mongodb-queue-size ] arg (=256)
  --mongodb-wipe                        Required with --replay-blockchain,
                                        --delete-all-blocks to wipe mongo
                                        accidental wipe of mongo db.
  --mongodb-block-start arg (=0)        If specified then only abi data pushed
                                        to mongodb until specified block is
  -m [ --mongodb-uri ] arg              MongoDB URI connection string, see:
                                        https://docs.mongodb.com/master/referen
                                        in URI. Example: mongodb://127.0.0.1:27
複製代碼

接下來咱們配置 MongoDB。

$ mkdir -p /data/mongodb/db /data/mongodb/logs
$ touch /data/mongodb/mongodb.conf
複製代碼

mongodb.conf 配置文件內容以下：

systemLog:
  destination: file
  path: /data/mongodb/logs/mongo.log
  logAppend: true
storage:
  dbPath: /data/mongodb/db
  journal:
   enabled: true
net:
  bindIp: 127.0.0.1
  port: 27017
複製代碼

接着啓動 MongoDB，而且建立 eos 數據庫。

$ /$USER/opt/mongodb/bin/mongod -f /data/mongodb/mongodb.conf --fork
$ /$USER/opt/mongodb/bin/mongo --port 27017
$ use eos
複製代碼

而後配置 EOS 主網 fullnode。

$ mkdir /data/mainnet
$ cd /data/mainnet
$ git clone https://github.com/superoneio/eos-mainnet
$ mkdir -p data logs config
$ cp eos-mainnet/config.ini mainnet/config
$ cp eos-mainnet/genesis.json mainnet
$ cp eos-mainnet/*.sh mainnet
$ chmod +x mainnet
複製代碼

修改 config.ini 相關配置，添加以下參數：

plugin = eosio::mongo_db_plugin
mongodb-uri = mongodb://127.0.0.1:27017/eos
複製代碼

最後執行 start.sh，同步主網數據。

0x02 測試

咱們執行 $ /$USER/opt/mongodb/bin/mongo --port 27017 登陸到 MongoDB，能夠對同步的數據進行校驗。

> use eos
> show dbs
admin   0.000GB
config  0.000GB
eos     0.031GB
local   0.000GB
> use eos
switched to db eos
> show tables;
accounts
actions
block_states
blocks
transaction_traces
transactions
> db.accounts.find({name:{$eq:'eosio.ram'}})
{ "_id" : ObjectId("5b4163f2992ecd51b4277f77"), "name" : "eosio.ram", "createdAt" : ISODate("2018-07-08T01:08:02.071Z") }
複製代碼

0x03 小結

以前介紹了將 EOS 主網數據同步到 MySQL，本文講解了另外一種同步到文檔型數據庫的方法。MySQL 和 MongoDB 最大的區別在於，MySQL 是傳統的關係型數據庫，支持 SQL 標準，而 MongoDB 是文檔型數據庫。MySQL 天生適用於結構化數據以及須要使用事務的場景，天生支持 SQL 標準，對開發者比較友好。

MongoDB 適合以下場景：[1]