LoginSignup
0

More than 5 years have passed since last update.

sshでリモートサーバから特定の条件に合致するファイルのみを持ってくる方法

Posted at

やりたいこと

リモートサーバからssh(scpでもいいんですが)で特定の条件を満たすファイルのみをローカルに持ってきたい(スクリプトで)。

調査した結果

単一のファイルやディレクトリをまとめてごっそり持ってくる方法はヒットしましたが、何か条件でフィルタした結果を持ってくる方法は特に見つかりませんでした。

結局どうするか?

A.リモートサーバで実行したいコマンドをヒアドキュメントに書いてそれをsshに読み込ませました。
(クォーテーションを深く考えなくてよいのでこれが楽かと。)

コマンドバージョン

$ ssh -V
OpenSSH_7.4p1, OpenSSL 1.0.2k-fips  26 Jan 2017
$ tar --version
tar (GNU tar) 1.26

sample.bash
DATE=$(date '+%Y-%m-%d')
cat << EOF >cmd.txt
  mkdir ${DATE}
  grep -l keyword * |  # or [awk '/keyword/{print FILENAME}' * | uniq]
  [or awk '\$1==keyword{print FILENAME}' | uniq]
  xargs -If cp -p f ${DATE}
  tar -zcf - ${DATE}
  rm -fr ${DATE}
EOF

cat cmd.txt |
ssh user@remoteServerAddress |
tar -zxf - -C localDirectory

説明 その1

リモート側で実行するコマンド

  mkdir ${DATE}

圧縮用のディレクトリーを作成します。
このディレクトリーに、ローカルに持ってきたいファイルを詰め込みます。
この${DATE}はローカルサーバ側で解釈するので、展開されてからリモートサーバへ渡されます。
というよりcmd.txtの段階で既に展開されています。

  grep -l keyword * |  # or [awk '/keyword/{print FILENAME}' * | uniq]
  [or awk '\$1==keyword{print FILENAME}' | uniq]

検索の仕方は何でもいいので、ファイル名だけ抽出します。
ファイル名がフルパスかどうかは、ローカルに持ってきたいファイルの置いてあるディレクトリ次第ですね。

awkで使用している$1はローカル側(シェルスクリプト)ではなくawkに解釈して欲しいので\を付けます。

  xargs -If cp -p f ${DATE}

ファイルを作成したディレクトリへ放り込みます。

  tar -zcf - ${DATE}

この辺が正直説明できるほど詳しくないのですが、ファイルを放り込んだディレクトリを圧縮します。
-には本来圧縮後ファイル名を記載するのですが、すぐ解凍するからかパイプで渡すからなのか-にしています。

  rm -fr ${DATE}

お掃除です。不要であればしなくてもいいです。

説明 その2

ローカル側で実行するコマンド

cat cmd.txt |
ssh user@remoteServerAddress |
tar -zxf - -C localDirectory

リモート側で実行するコマンドをまとめてsshに渡して実行させます。
その結果が圧縮ファイルになりますが、それをパイプで受け取ってtarですぐに解凍してしまいます。
-C localDirectoryは解凍場所の指定です。

補足

全てパイプでつなげることも可能です。

sample.bash
DATE=$(date '+%Y-%m-%d')
cat << EOF | ssh user@remoteServerAddress | tar -zxf - -C localDirectory
  mkdir ${DATE}
  grep -l keyword * |  # or [awk '/keyword/{print FILENAME}' * | uniq]
  [or awk '\$1==keyword{print FILENAME}' | uniq]
  xargs -If cp -p f ${DATE}
  tar -zcf - ${DATE}
  rm -fr ${DATE}
EOF

参考にさせて頂いたサイト様

sshでリモートシェル実行時に``で括ったコマンドを使う - Qiita
ssh経由でのtarによるフォルダの圧縮・解凍方法 _ 俺的備忘録 〜なんかいろいろ〜
[Linux]ファイルの圧縮、解凍方法 - Qiita

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0