More than 1 year has passed since last update.

raspberry pi によるsymbolノード構築

Last updated at 2023-02-15Posted at 2023-02-14

はじめに

RaspberryPiでSymbolNodeを構築してみました。

非エンジニアが四苦八苦しながらなんとかノード起動まで漕ぎ着けました。
正直甘くみていました。

辿り着けたのも、先人の知恵やアドバイスのおかげです。

ありがとうございます。

加えて、QUESTにて応援していただいた皆様にも感謝申し上げます。

ありがとうございます。

参考にさせていただいたページ

ちなみにXYMが全然足りないのでテストネットで稼働させています。
何がとは言いませんが、

    NACW73ZWAD6RGZPC3P64DN3KYK5XDLLMVGHW2KQ

私のsymbolアドレスです。

使ったもの

M1 Mac
RapberryPi 4B 8GB
1TB SSD(USBのやつ)
テキトーなSDカード
テキトーなモニタ
テキトーなキーボード

１　OS起動まで

1-1 Raspberry Pi Imagerをインストール

<<ここから>>

1-2　USBブート、できるかな？

めんどければこの確認作業は飛ばして1-3から始めてもいい。で、うまくいかなければ戻ってきて確認とアップデートをするとか。

Raspberry Pi 4B からUSBブートに対応したらしい。
ただし、ブートローダが古いとダメなので、ブートローダを更新する必要がある。
確認は、一旦テキトーなSDカードにRaspbianというOSをインストールして

sudo vcgencmd bootloader_version

をすると、

update-time XXXXXXXX

とかいうのが出てくる。これはUNIXタイムなので、「UNIX TIME 変換」とか検索すれば変換サイトが出てくる。
2020年12月11日のアップデートでUSBブートに正式対応したのでそれ以降のバージョンであれば出来るとは思う。

1-3　OSイメージのダウンロード

<＜ここから＞＞

これの64-bit

1-4　書き込み

「カスタムイメージを使う」で 1-3 でダウンロードしたイメージを選択

SSDをMacに挿し、

「ストレージを選ぶ」で挿したSSDを選択。

歯車のマークで、ユーザー設定とかWi-Fi設定とかできるのでやっとく。一応ちゃんと反映されてた。

最後に「書き込む」を押して少し待てばOK。

1-5　起動

~~以下の作業をやらないとWiFiが繋がらなかった（なぜだ）。~~
~~・RaspberryPiにSSDを挿し、モニタとキーボードを接続。~~
~~・それから電源に繋ぐ。~~
~~・一旦ログインする。~~

ここまで来ればWiFiが繋がるのでssh接続で今後はいく。

ssh ユーザ名@IPアドレス

２　セキュリティって大事だよね

2-1 アップデート

sudo apt update
sudo apt upgrade

アップデートの内容によっては設定ファイルを初期化するものもあるので、この段階でやっておくといい。

2-2 ルートにパスワードを設定

sudo passwd root

2-3 新たなユーザーを作成

デフォルトユーザの場合は新たなユーザーを作る

sudo su

このコマンドで一旦ルートユーザーになる

adduser ユーザ名

このコマンドで新たなユーザーを作る。パスワードを設定した後、フルネームとかを聞かれるが、空白のままエンターでOK。

2-4 作ったユーザーをsudoグループに追加し、権限を持たせる

gpasswd -a ユーザ名 sudo

2-5 データ移行と移動ログインの解除

省略

2-6 初期ユーザの削除

一旦ログアウトし、新たに作ったユーザでログインして、次のコマンドを実行。

sudo userdel -r ユーザ名

2-7 ssh設定の変更

sudo nano /etc/ssh/sshd_config

これでsshの設定を変える。（自分はnano派だが、viを使っても良い）

#Port 22 -> Port 好きなポート番号

気休め程度だがポート番号を変える

#PermitRootLogin prohibit-password -> PermitRootLogin no

ルートログインを禁止する

#PermitEmptyPasswords no　-> PermitEmptyPasswords no

これもついでにやっとく

sudo /etc/init.d/ssh restart

これでsshを再起動し、設定を反映させる

2-8 IPアドレスの制限

省略

2-9 公開鍵でログインする

logout

一旦ログアウトする。ここからはMacでの作業。

ssh-keygen -t rsa -b 4096

このコマンドで鍵ペアを作る。
サイトによっては2048で鍵ペアを作っているみたいだが、rsaの場合は強度的に4096がいいらしい。
パスフレーズ（この鍵を使う時に聞かれるパスワードという認識でとりあえずはいい）を聞かれるので、好きなものを設定する（忘れないようにする。）

ls -al ~/.ssh

これで、「id_rsa」「id_rsa.pub」ができているのを確認。
id_rsaが秘密鍵
id_rsa.pubが公開鍵

ssh-copy-id -i ~/.ssh/id_rsa.pub -p ポート番号 ユーザ名@IPアドレス

これでraspberry pi に公開鍵を送信・登録を行う。
うまくいかない時はsudoをつける。

ssh -p ポート番号 -i id_rsa ユーザ名@IPアドレス

これでログインする。
うまくいかない時はsudoをつける。

ここからはraspberry piでの作業。

2-10 パスワードでログインできないようにする

sudo nano /etc/ssh/sshd_config

もっかいこのファイルを操作し、

#PasswordAuthentication yes -> PasswordAuthentication no

こんな感じに変更

３　インストール

sudo apt-get install -y nodejs npm
sudo npm install -g npm@latest
sudo apt install -y docker.io
sudo apt install -y docker-compose
sudo usermod -aG docker ユーザ名
su - ユーザ名

これらのコマンドを順に実行する。

sudo reboot

自分は念のためここで一旦再起動させた。

ここまでが準備運動。ここからが構築本番。

４　構築その１

めんどいので処理をシェルスクリプトにまとめた。

nano ~/テキトーなファイル名.sh

をやって、以下の内容を貼り付ける。

#!/bin/bash

baseFolderName="mysymbol"
check=""


echo "********** Symbolリポジトリのクローン"
rm -rf symbol
git clone https://github.com/symbol/symbol.git
cd symbol
git checkout -b 1.0.3.5  refs/tags/client/catapult/v1.0.3.5


echo "********** コンフィグファイルの作成"
echo "compiler: ../compilers/gcc-latest.yaml" > ./jenkins/catapult/configurations/gcc-12-aarch64.yaml
echo "architecture: armv8-a" >> ./jenkins/catapult/configurations/gcc-12-aarch64.yaml

check=`docker images | grep symbol-server-compiler`
while [ "$check" = "" ]
do

echo "********** ベースとなるDockerイメージの作成 1/2"
echo -e "\
FROM arm64v8/ubuntu:22.04 \n\
\n\
ARG DEBIAN_FRONTEND=noninteractive \n\
\n\
RUN apt-get update >/dev/null && \\ \n\
    apt-get install -y \\ \n\
    apt-utils \\ \n\
    build-essential \\ \n\
    gnupg2 \\ \n\
    curl \\ \n\
    xz-utils \\ \n\
    wget \\ \n\
    >/dev/null \n\
\n\
\n\
ARG COMPILER_VERSION=12 \n\
RUN apt-get update >/dev/null && \\ \n\
    apt-get install -y \\ \n\
    gcc-\${COMPILER_VERSION} g++-\${COMPILER_VERSION} >/dev/null && \\ \n\
    update-alternatives --install /usr/bin/gcc gcc /usr/bin/gcc-\${COMPILER_VERSION} 100 && \\ \n\
    update-alternatives --install /usr/bin/g++ g++ /usr/bin/g++-\${COMPILER_VERSION} 100 && \\ \n\
    update-alternatives --install /usr/bin/cc cc /usr/bin/gcc 100 && \\ \n\
    update-alternatives --install /usr/bin/c++ c++ /usr/bin/g++ 100 && \\ \n\
    update-alternatives --install /usr/bin/gcov gcov /usr/bin/gcov-\${COMPILER_VERSION} 100 && \\ \n\
    update-alternatives --install /usr/bin/gcov-dump gcov-dump /usr/bin/gcov-dump-\${COMPILER_VERSION} 100 && \\ \n\
    update-alternatives --install /usr/bin/gcov-tool gcov-tool /usr/bin/gcov-tool-\${COMPILER_VERSION} 100 && \\ \n\
    rm -rf /var/lib/apt/lists/* \
" > jenkins/catapult/compilers/ubuntu-gcc/Dockerfile-ubuntu-gcc-12


echo "********** ベースとなるDockerイメージの作成 2/2"
docker build -f jenkins/catapult/compilers/ubuntu-gcc/Dockerfile-ubuntu-gcc-12 -t $baseFolderName/symbol-server-compiler:ubuntu-gcc-12 .

check=`docker images | grep symbol-server-compiler`

done



echo "********** runDockerBuild.pyを修正"
sed -i -e s/symbolplatform/$baseFolderName/g \
 -e s/"--source-path=\/catapult-src\/client\/catapult"/"--source-path=\/catapult-src\/catapult"/g \
 -e s/"f'registry.hub.docker.com\/{prepare_replacements\[\"base_image_name\"\]}'"/"f'{prepare_replacements\[\"base_image_name\"\]}'"/g \
 -e s/"environment_manager.copy_tree_with_symlinks(source_path \/ 'client\/catapult' \/ folder_name, folder_name)"/\
"environment_manager.copy_tree_with_symlinks(source_path \/ 'catapult' \/ folder_name, folder_name)"/g \
 jenkins/catapult/runDockerBuild.py





echo "********** environment.pyの修正"
sed -i -e s/"for descriptor in \[('ubuntu', '\/usr\/lib\/x86_64-linux-gnu'), ('fedora', '\/usr\/lib64')\]:"/\
"for descriptor in \[('ubuntu', '\/usr\/lib\/aarch64-linux-gnu'), ('fedora', '\/usr\/lib64')\]:"/g \
 jenkins/catapult/environment.py





check=`docker images | grep preimage1`
while [ "$check" = "" ]
do

echo "********** 中間イメージ1 1/2"
python3 ./jenkins/catapult/baseImageDockerfileGenerator.py \
    --compiler-configuration jenkins/catapult/configurations/gcc-12-aarch64.yaml \
    --operating-system ubuntu \
    --versions ./jenkins/catapult/versions.properties \
    --layer os \
| sed -e s/symbolplatform/$baseFolderName/g \
 -e s/cmake-3.23.2-Linux-x86_64.sh/cmake-3.24.3-linux-aarch64.sh/g \
 -e s/v3.23.2/v3.24.3/g \
> Dockerfile-preimage1

echo "********** 中間イメージ1 2/2"
docker build -f Dockerfile-preimage1 -t $baseFolderName/symbol-server-build-base:ubuntu-gcc-12-armv8-a-preimage1 .

check=`docker images | grep preimage1`

done



check=`docker images | grep preimage2`
while [ "$check" = "" ]
do

echo "********** 中間イメージ2 1/2"
python3 ./jenkins/catapult/baseImageDockerfileGenerator.py \
    --compiler-configuration jenkins/catapult/configurations/gcc-12-aarch64.yaml \
    --operating-system ubuntu \
    --versions ./jenkins/catapult/versions.properties \
    --layer boost \
| sed -e s/symbolplatform/$baseFolderName/g \
> Dockerfile-preimage2

echo "********** 中間イメージ2 1/2"
docker build -f Dockerfile-preimage2 -t $baseFolderName/symbol-server-build-base:ubuntu-gcc-12-armv8-a-preimage2 .

check=`docker images | grep preimage2`

done



check=`docker images | grep preimage3`
while [ "$check" = "" ]
do

echo "********** 中間イメージ3 1/2"
python3 ./jenkins/catapult/baseImageDockerfileGenerator.py \
    --compiler-configuration jenkins/catapult/configurations/gcc-12-aarch64.yaml \
    --operating-system ubuntu \
    --versions ./jenkins/catapult/versions.properties \
    --layer deps \
| sed -e s/symbolplatform/$baseFolderName/g \
 -e s/"Configure linux-x86_64"/"Configure linux-aarch64"/g \
> Dockerfile-preimage3


echo "********** 中間イメージ3 2/2"
docker build -f Dockerfile-preimage3 -t $baseFolderName/symbol-server-build-base:ubuntu-gcc-12-armv8-a-preimage3 . --memory-swap -1

check=`docker images | grep preimage3`

done



check=`docker images | grep ubuntu-gcc-12-armv8-a$'\s'`
while [ "$check" = "" ]
do

echo "********** 最終レイヤー 1/2"
python3 ./jenkins/catapult/baseImageDockerfileGenerator.py \
    --compiler-configuration jenkins/catapult/configurations/gcc-12-aarch64.yaml \
    --operating-system ubuntu \
    --versions ./jenkins/catapult/versions.properties \
    --layer test \
| sed -e s/symbolplatform/$baseFolderName/g \
 -e s/"Configure linux-x86_64"/"Configure linux-aarch64"/g \
> Dockerfile-preimage4

echo "最終レイヤー 2/2"
docker build -f Dockerfile-preimage4 -t $baseFolderName/symbol-server-build-base:ubuntu-gcc-12-armv8-a .

check=`docker images | grep ubuntu-gcc-12-armv8-a$'\s'`

done



check=`docker images | grep symbol-server-test-base`
while [ "$check" = "" ]
do

echo "********** symbol-server-test-baseイメージを作成 1/2"
echo -e "\
FROM arm64v8/ubuntu:22.04 \n\

CMD ["/bin/bash"] \n\
ARG DEBIAN_FRONTEND=noninteractive \n\
\n\
RUN apt-get -y update \ \n\
    && apt-get install -y bison gdb git flex python3 python3-ply python3-pip shellcheck inotify-tools libdw-dev libelf-dev libiberty-dev libslang2-dev \ \n\
    && rm -rf /var/lib/apt/lists/* \ \n\
    && pip3 install -U colorama cryptography gitpython pycodestyle pylint pylint-quotes PyYAML \ \n\
    && git config --global http.postBuffer 524288000 \ \n\
    && git config --global https.postBuffer 524288000 \ \n\
    && git clone --depth 1 https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git linux.git \ \n\
    && cd linux.git/tools/perf \ \n\
    && make \ \n\
    && cp perf /usr/bin \ \n\
    && cd ../../.. \ \n\
    && rm -rf linux.git \
" > Docker-test-preimage

echo "********** symbol-server-test-baseイメージを作成 2/2"
docker build -f Docker-test-preimage -t $baseFolderName/symbol-server-test-base:ubuntu .

check=`docker images | grep symbol-server-test-base`

done


check=`docker images | grep symbol-server$'\s'`
while [ "$check" = "" ]
do

echo "********** クライアントのコンパイル"
sudo mkdir /jenkins_cache
sudo chown 1000:1000 /jenkins_cache

python3 jenkins/catapult/runDockerBuild.py \
--compiler-configuration jenkins/catapult/configurations/gcc-12-aarch64.yaml \
--build-configuration jenkins/catapult/configurations/release-private.yaml \
--operating-system ubuntu \
--user "$(id -u):$(id -g)" \
--source-path client \
--destination-image-label gcc-12-armv8-a-main-9273d6c5

# うまくいかなかったのでハードコーディング
docker tag mysymbol/symbol-server-private:gcc-12-armv8-a-main-9273d6c5 mysymbol/symbol-server:gcc-1.0.3.5

check=`docker images | grep symbol-server$'\s'`

done




echo "********** restイメージ 1/3"

cd ./client
mv ./rest ./rest_old
git clone https://github.com/symbol/symbol.git -b rest/v2.4.2
cp -r ./symbol/client/rest ./
rm -rf symbol



echo "********** restイメージ 2/3"
cd ./rest
cat ./Dockerfile | sed s/lts/16/g > ./Dockerfilev2

echo "********** restイメージ 3/3"
docker build -f ./Dockerfilev2 -t $baseFolderName/symbol-rest:2.4.2 .





echo "********** Node.js を最新バージョンにする"
sudo npm install -g n
sudo n latest


check=`symbol-bootstrap version | grep node`
while [ "$check" = "" ]
do

echo "********** symbol-bootstrapのインストール"
sudo npm install -g symbol-bootstrap

echo "コンテナイメージの変更"
sudo cp /usr/local/lib/node_modules/symbol-bootstrap/presets/shared.yml /usr/local/lib/node_modules/symbol-bootstrap/presets/shared_old.yml
sudo sed -i -e s/"symbolServerImage: symbolplatform"/"symbolServerImage: "$baseFolderName/g \
 -e s/"symbolRestImage: symbolplatform"/"symbolRestImage: "$baseFolderName/g \
 /usr/local/lib/node_modules/symbol-bootstrap/presets/shared.yml

check=`symbol-bootstrap version | grep node`
done

bash テキトーなファイル名.sh

これで実行。
おそらく大丈夫なハズ。

baseFolderName=

は好きな名前を入れられたい。

ネットワークが貧弱だとイメージ作成が失敗することがあるので上手くいくまでループさせている。
素人が書いたスクリプトなので、雑な部分は大いにある。

peerノードでいい人は

echo "********** restイメージ 1/3"

から始まるrestイメージの部分は削除してもいい。

docker images

スクリプト実行後はこれで作成済みのDockerのイメージが見られるので、全て作成されたか確認

５　DDNSの設定

このサイトのとおりやった。感謝。

６　symbol-bootstrap

細かな設定は他サイトを参照されたい。

6-1 設定ファイルの作成１

cd ~/symbol

で移動し、

symbol-bootstrap wizerd

で設定ファイルを作る。

~/symbol/custom-preset.yml

があることを確認したら

nano ~/symbol/custom-preset.yml

で、末尾に

symbolServerImage: シェルスクリプトで設定した(baseFolderNameの)名前/symbol-server:gcc-1.0.3.4  
symbolRestImage: シェルスクリプトで設定した(baseFolderNameの)名前/symbol-rest:2.4.2            #先程作成したイメージ名

を追加。

6-2 設定ファイルの作成２

symbol-bootstrap config -p testnet -a dual -c custom-preset.yml

を実行。メインネットがいい人は testnetをmainnetに変更すること。

symbol-bootstrap compose

を実行。

6-3 起動

symbol-bootstrap run -d

を実行し、ノードを起動。

symbol-bootstrap healthCheck

で、正常に作動しているかが確認できる。

終わりに

    NACW73ZWAD6RGZPC3P64DN3KYK5XDLLMVGHW2KQ

しつこいようですが私のsymbolアドレスです。

You get articles that match your needs
You can efficiently read back useful information
You can use dark theme

What you can do with signing up

raspberry pi によるsymbolノード構築

はじめに

辿り着けたのも、先人の知恵やアドバイスのおかげです。

ありがとうございます。

加えて、QUESTにて応援していただいた皆様にも感謝申し上げます。

ありがとうございます。

使ったもの

１ OS起動まで

1-1 Raspberry Pi Imagerをインストール

1-2 USBブート、できるかな？

1-3 OSイメージのダウンロード

1-4 書き込み

1-5 起動

２ セキュリティって大事だよね

2-1 アップデート

2-2 ルートにパスワードを設定

2-3 新たなユーザーを作成

2-4 作ったユーザーをsudoグループに追加し、権限を持たせる

2-5 データ移行と移動ログインの解除

2-6 初期ユーザの削除

2-7 ssh設定の変更

2-8 IPアドレスの制限

2-9 公開鍵でログインする

2-10 パスワードでログインできないようにする

３ インストール

ここまでが準備運動。ここからが構築本番。

４ 構築その１

５ DDNSの設定

６ symbol-bootstrap

6-1 設定ファイルの作成１

6-2 設定ファイルの作成２

6-3 起動

終わりに

１　OS起動まで

1-2　USBブート、できるかな？

1-3　OSイメージのダウンロード

1-4　書き込み

1-5　起動

２　セキュリティって大事だよね

３　インストール

４　構築その１

５　DDNSの設定

６　symbol-bootstrap