SSH on ゲンゾウ用ポストイット

コマンドの出力結果からANSIエスケープシーケンスのカラーリングを取り除く方法

Thu, 09 Feb 2023 09:00:44 +0900

はじめに

ターミナル操作時、コマンドの実行結果が色付けされていることがあります。

僕がプログラミングを始めた頃はもう少し淡白なコマンドの出力結果ばかりだったのですが、最近のツールは出力結果がカラフルなものも多いです。

ターミナル上の出力結果をカラフルに色付けしてくれるための制御文字は ANSI エスケープシーケンスと呼ばれます。 ( 厳密に言うと、ANSI エスケープシーケンスには色付けだけでなく、カーソル位置、フォントスタイル、その他のオプションなどの制御文字が含まれているそうです。 )

コマンドによっては、出力結果をパイプで繋いだ場合にカラーリングの ANSI エスケープシーケンスを除去してくれ、パイプ先で文字列操作する際に大変便利です。

例えば、 ls コマンドは ls -l を実行すると色付けされますが、 ls -l | cat のようにパイプでつなぐと制御文字が除去されます。 cut で切り取る場合は制御文字が邪魔になるので大変便利な挙動です。しかし、コマンドによってはこのような色付けの制御文字を除去しません。

そんなときに ANSI エスケープシーケンスのカラーリング制御文字を取り除く方法について紹介します。

検証環境

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


$ uname -moi
aarch64 aarch64 GNU/Linux

$ head -n 3 /etc/os-release
PRETTY_NAME="Ubuntu Kinetic Kudu (development branch)"
NAME="Ubuntu"
VERSION_ID="22.10"

$ bash -version | head -n 1
GNU bash, バージョン 5.2.0(1)-release (aarch64-unknown-linux-gnu)

$ sed --version | head -n 2
sed (GNU sed) 4.8
パッケージ作成者: Debian

`[...]` で囲まれた部分の文字列だけを取り出したいが ANSI エスケープシーケンスが邪魔をする場合

JavaScript 関連のツールを起動した際の文言として、以下のようなものがあります。

`aws-cli` を使ってコマンドラインからAWS EC2とVPCを構築する

Mon, 04 Mar 2019 12:35:33 +0900

はじめに

AWS Transfer for SFTP の価格があまりにも高すぎたため、 EC2 上に SFTP サーバを構築することにしました。

今までは VPC や インターネットゲートウェイ を使わずに EC2 作成をしていたため、これらを導入した場合の手順を整理してみました。

準備

aws-cli コマンドが利用できること
jq コマンドが利用できること

ja はなくてもいいが、今回各AWS構成要素を作成した際のJSONレスポンスをパースしてできる限りコマンドラインのみの操作としたかったので利用しました。

検証環境

1
2
3
4
5
6
7
8


$ uname -moi
x86_64 MacBookPro10,1 Darwin

$ bash -version
GNU bash, バージョン 5.0.2(1)-release (x86_64-apple-darwin18.2.0)

$ aws --version
aws-cli/1.16.110 Python/3.7.2 Darwin/18.2.0 botocore/1.12.100

ネットワーク周りの設定

VPCの作成

1
2
3
4
5
6
7
8
9


# VPCの新規作成 => 作成されたVPCのIDを保存
$ EC2_VPC_ID=$(
 aws ec2 create-vpc \
 --cidr-block '172.20.0.0/16' \
 | jq -r '.Vpc.VpcId'
)

## 確認
$ echo "${EC2_VPC_ID}"

Subnetの作成

 1
 2
 3
 4
 5
 6
 7
 8
 9
10


# Subnetの新規作成 => 作成されたSubnetのIDを保存
$ EC2_SUBNET_ID=$(
 aws ec2 create-subnet \
 --cidr-block '172.20.0.0/16' \
 --vpc-id "${EC2_VPC_ID}" \
 | jq -r '.Subnet.SubnetId'
)

## 確認
$ echo "${EC2_SUBNET_ID}"

インターネットゲートウェイの作成

1
2
3
4
5
6
7
8


# インターネットゲートウェイの新規作成 => 作成されたインターネットゲートウェイのIDを保存
$ EC2_INTERNET_GATEWAY_ID=$(
 aws ec2 create-internet-gateway \
 | jq -r '.InternetGateway.InternetGatewayId'
)

## 確認
$ echo "${EC2_INTERNET_GATEWAY_ID}"

VPCへインターネットゲートウェイを割り当てる

1
2
3


$ aws ec2 attach-internet-gateway \
 --internet-gateway-id "${EC2_INTERNET_GATEWAY_ID}" \
 --vpc-id "${EC2_VPC_ID}"

ルートテーブルの設定

インターネットゲートウェイ経由でVPCへアクセスできるようにします。

ssh-copy-idを使ってssh公開鍵を対象サーバーに配置する

Wed, 09 Dec 2015 21:29:03 +0900

背景

ssh-copy-id という、操作中のユーザーのSSH公開鍵を対象サーバーに簡単に配置するためのコマンドを知ったので使ってみた。

環境

1
2
3
4
5
6


$ uname -a
Darwin genzouw-MacBook-Pro.local 15.0.0 Darwin Kernel Version 15.0.0: Sat Sep 19 15:53:46 PDT 2015; root:xnu-3247.10.11~1/RELEASE_X86_64 x86_64 i386 MacBookPro10,1 Darwin
$ bash -version
GNU bash, バージョン 4.3.42(1)-release (x86_64-apple-darwin14.5.0)
$ zsh --version
zsh 5.1.1 (x86_64-apple-darwin15.0.0)

検証

Vagrantで新しいLinuxサーバーを立てる

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23


$ vagrant init

# ここではすでにBoxを追加していたため、Vagrantfileを編集して利用するBoxを設定した
$ vi Vagrantfile
$ vagrant up

# ログイン
$ vagrant ssh

[vagrant@vagrant-centos65 ~]$ sudo useradd genzouw
[vagrant@vagrant-centos65 ~]$ sudo su - genzouw

# sshの鍵の設定はない状態
[genzouw@vagrant-centos65 ~]$ mkdir .ssh
[genzouw@vagrant-centos65 ~]$ chmod 700 .ssh/
[genzouw@vagrant-centos65 ~]$ exit
logout

# 初期パスワードを設定
[vagrant@vagrant-centos65 ~]$ sudo passwd genzouw
[vagrant@vagrant-centos65 ~]$ exit
logout
Connection to 127.0.0.1 closed.

Mac上に ssh-copy-id がインストールされていなかったのでインストール

1
2
3
4
5
6
7
8
9


$ brew install ssh-copy-id
==> Downloading https://homebrew.bintray.com/bottles/ssh-copy-id-6.8p1.el_capitan.bottle.tar.gz
####################################################################### 100.0%
==> Pouring ssh-copy-id-6.8p1.el_capitan.bottle.tar.gz
? /usr/local/Cellar/ssh-copy-id/6.8p1: 7 files, 344K

# 試しに実行
$ ssh-copy-id
Usage: /usr/local/bin/ssh-copy-id [-h|-?|-n] [-i [identity_file]] [-p port] [[-o <ssh -o options>] ...] [user@]hostname

早速鍵の設定

1

$ ssh-copy-id genzouw@127.0.0.1 -p2222

結果

おもむろにVagrant環境に接続してみる

コマンド一発で、あるPostgreSQLサーバから別のPostgreSQLサーバにデータをコピーする

Fri, 27 May 2011 00:15:02 +0900

トイレに行く前にターミナルから一発実行したコマンド。

PostgreSQLデータベースのデータをあるサーバから別のサーバに持っていきたいときに便利なコマンド。

これだとゴミファイルも残らない。

以下の部分には適当に書き換えて使ってください。

文字列	説明
from_user	コピー元サーバーユーザ
from_server	コピー元サーバーホスト
from_dbuser	コピー元 DBユーザ
from_dbpass	コピー元 DBパスワード
from_dbname	コピー元 DB名
————-	—————————–
to_user	コピー先サーバーユーザ
to_server	コピー先サーバーホスト
to_dbuser	コピー先 DBユーザ
to_dbpass	コピー先 DBパスワード
to_dbname	コピー先 DB名

コマンド

1
2


$ ssh from_user@from_server "PGPASSWORD=from_dbpass pg_dump -c -U from_dbuser from_dbname | gzip -c" \
 | ssh to_user@to_server "gunzip -c | PGPASSWORD=to_dbpass psql -U to_dbuser to_dbname"

事前に設定しておくと良い設定

ssh-keygenで秘密鍵を作っておくと ssh コマンド実行時のパスワード入力に悩まされない。

SSH on ゲンゾウ用ポストイット

コマンドの出力結果からANSIエスケープシーケンスのカラーリングを取り除く方法

はじめに

検証環境

[...] で囲まれた部分の文字列だけを取り出したいが ANSI エスケープシーケンスが邪魔をする場合

`aws-cli` を使ってコマンドラインからAWS EC2とVPCを構築する

はじめに

準備

検証環境

ネットワーク周りの設定

VPCの作成

Subnetの作成

インターネットゲートウェイの作成

VPCへインターネットゲートウェイを割り当てる

ルートテーブルの設定

ssh-copy-idを使ってssh公開鍵を対象サーバーに配置する

背景

環境

検証

Vagrantで新しいLinuxサーバーを立てる

Mac上に ssh-copy-id がインストールされていなかったのでインストール

早速鍵の設定

結果

コマンド一発で、あるPostgreSQLサーバから別のPostgreSQLサーバにデータをコピーする

コマンド

事前に設定しておくと良い設定

`[...]` で囲まれた部分の文字列だけを取り出したいが ANSI エスケープシーケンスが邪魔をする場合