プロジェクト

全般

プロフィール

丼鯖の建てかた » 履歴 » バージョン 6

白林檎 美和, 2020/07/16 02:48

1 1 白林檎 美和
# 丼鯖の建てかた
2
## 材料
3
* 最新のFreeBSD, nginx, PostgreSQL等が走るホスト
4
* データ置き場のストレージ: ユーザーを増やしたり,廃人のやうにつぶやいたりする気満々の方のみ
5
* 80/tcp, 443/tcpへ外からアクセス可能な,イソターネット接続環境
6
7
## 準備
8
### OSのインスコ
9
1. 最新のFreeBSDのディスクイメージを取ってきて,そいつからホストを起動。2020/7/7現在の最新リリースは, [12.1](http://ftp.jaist.ac.jp/pub/FreeBSD/releases/ISO-IMAGES/12.1/)。
10
1. テキストベースのウィザードを,淡々と進める。データ置き場のストレージを,ルートファイルシステムと別に設ける方は,そいつを /usr/home へマウント。
11 6 白林檎 美和
1. 丼インスタンスの各種プロセスを実行するためのユーザー “mastodon” を作成。プライマリ以外のグループに, wheelを指定。
12 1 白林檎 美和
1. 作業しやすいやう, sshdを有効化。sshdを常駐させるもよし, inetdで必要なときだけ起こすもよし。
13
14
### ホストがNATの内側にいる場合
15
1. イソターネットからの80/tcp, 443/tcpへのアクセスを,ホストへ通すよう設定。
16
1. NATの内外どちらからも,同じFQDNでホストへアクセスできるよう, DNS鯖を設定。さうしないと, SSLの証明書を取れなかったり, WWWブラウザで開いたときにSSLが有効にならなかったりする。
17
18
## 丼建て
19
ここからは基本的に,公式サイトの[Installing from source](https://docs.joinmastodon.org/admin/install/)の順番で進める。Ubuntu (Debian系Linux) 固有のコマンド等がばしばし出てきて, FreeBSDでは使えないので,読み替えていく。
20
### Pre-requisites
21
1. /etc/make.conf へ, 次を追加。
22
23
    ```
24
DEFAULT_VERSIONS+=perl5=5.32 python=3.8 python3=3.8 ruby=2.7 ssl=openssl
25
```
26 5 白林檎 美和
    公式は未だruby 2.6.6を指定していたりするので,心配な方は `ruby=2.6` にするとよい。
27
1. パッケージのオプションを選択。nginxのオプションは, PASSENGERをON。丼では使わないが, Redmine等を建てるときに要る。
28 1 白林檎 美和
    ```
29
# portsnap fetch update
30 5 白林檎 美和
# don_pkgs='databases/gdbm databases/postgresql12-server databases/postgresql12-contrib databases/redis devel/bison devel/git devel/protobuf devel/protobuf-c devel/bison devel/icu devel/readline dns/libidn graphics/ImageMagick7 multimedia/ffmpeg textproc/libxml2 textproc/libxslt security/openssl security/py-certbot-nginx security/sudo sysutils/rubygem-bundler www/nginx www/yarn-node12'
31 1 白林檎 美和
# for pack in don_packs; do make -C /usr/ports/$pack config-recursive; done
32
```
33 5 白林檎 美和
1. Portsの一括インスコや更新に便利な, portupgradeをインスコ。これがrubyを引き連れてくる。
34 1 白林檎 美和
    ```
35
# make -C /usr/ports/ports-mgmt/portupgrade config-recursive install clean
36
```
37
1. 丼が使うパッケージを, portsからごりごりインスコ。
38
    ```
39
# portinstall $don_pkgs
40
```
41
1. 既存のFreeBSDの環境へ導入する方は,ここでユーザー “mastodon” を作成。bsdconfigの [6  Login/Group Management]→[1  Add Login] なり, adduserなり,お好きな方法で。
42 6 白林檎 美和
    プライマリ以外のグループに, wheelを指定。
43
1. /usr/local/etc/sudoers の行 `# %wheel ALL=(ALL) ALL` から,先頭の `# ` を削除。
44 2 白林檎 美和
45
### Setup
46
1. /etc/rc.conf へ次を追加。
47
48
    ```
49
nginx_enable="YES"
50
postgresql_enable="YES"
51
redis_enable="YES"
52
```
53
1. データ置き場を分けた方は, `postgresql_data="/usr/home/postgres/data12"` も追加。既に /var/db/postgres が作られていたら, /usr/home へ移動。
54
1. ぽすぐれを初期化,起動。
55
    ```
56
# service postgresql initdb
57
# service postgresql start
58
```
59
1. 丼DB用のユーザーを作成。ついでに,スーパーユーザーへパスワードを付与。
60
    ```
61
# sudo -u postgres psql
62
postgres=# CREATE USER mastodon WITH PASSWORD '<ぱすわぁど>' CREATEDB;
63
postgres=# ALTER ROLE postgres WITH PASSWORD '<ぱすわぁど>';
64
postgres=# \q  ← ^D
65
```
66
1. ユーザーmastodonへ切り替え。
67
    ```
68
# su - mastodon
69
```
70
1. 丼鯖の最新リリースを取得。
71
    ```
72
$ git clone https://github.com/tootsuite/mastodon.git live
73
$ cd live
74
$ git checkout <最新リリースのタグ>
75
```
76
1. 丼鯖が使う, rubyや農奴のパッケージを, live以下へ配置。`getconf _NPROCESSORS_ONLN` は,ホストのCPUのスレッド数を返す。
77
    ```
78
$ bundle config deployment 'true'
79
$ bundle config without 'development test'
80
$ bundle install -j$(getconf _NPROCESSORS_ONLN)
81
$ yarn install --pure-lockfile
82
```
83
1. 初回設定。
84
  * DBはUNIX domain socketではなく, localhostを指定。前者では, socketのパス名がUbuntu標準と合わず失敗。
85
  * adminのパスワードがランダムに生成されるので,控えておく。
86
87
    ```
88
$ export RAILS_ENV=production
89
$ bundle exec rake mastodon:setup
90
```
91 3 白林檎 美和
1. dist/nginx.conf を /usr/local/etc/nginx/mastodon.conf へコピー。
92
1. /usr/local/etc/nginx に nginx.conf がなかったら,nginx.conf-dist をコピー。
93
    ```
94
# cp -p dist/nginx.conf /usr/local/etc/nginx/mastodon.conf
95
# cd /usr/local/etc/nginx
96
# cp -p nginx.conf-dist nginx.conf
97
```
98
1. nginx.conf の `http { ... }` から, `server { ... }` を削除。末尾に `include mastodon.conf;` を追加。
99
1. mastodon.conf を編集。
100
   1. `server_name` に,ホストのFQDNを記載。
101
   1. IPv6を使わない環境 ⇒ `listen [::]:80;`, `listen [::]:443 ssl http2;` をコメントアウト。
102
   1. /usr/local/etc/letsencrypt/options-ssl-nginx.conf と重複する,次の行をコメントアウト。
103
104
        ```
105
ssl_protocols TLSv1.2 TLSv1.3;
106
ssl_ciphers HIGH:!MEDIUM:!LOW:!aNULL:!NULL:!SHA;
107
ssl_prefer_server_ciphers on;
108
        ```
109
1. nginxを起動。
110
    ```
111
# service nginx start
112
```
113
1. Let's encryptからSSL証明書を貰う。
114
    ```
115
# certbot --nginx -d <ホストのFQDN>
116
```
117
1. mastodon.conf に次の行が足されたのを確認。
118
    ```
119
ssl_certificate /usr/local/etc/letsencrypt/live/<ホストのFQDN>/fullchain.pem;
120
ssl_certificate_key /usr/local/etc/letsencrypt/live/<ホストのFQDN>/privkey.pem;
121
include /usr/local/etc/letsencrypt/options-ssl-nginx.conf; # managed by Certbot
122
ssl_dhparam /usr/local/etc/letsencrypt/ssl-dhparams.pem; # managed by Certbot
123
```
124
1. nginxを再起動。
125
    ```
126
# service nginx restart
127
```
128
1. /etc/periodic.conf に `weekly_certbot_enable="YES"` を追加。同ファイルがなければ作る。
129
1. dist/*.service の内容を基に,丼鯖の各種サービスの起動/終了用スクリプト /usr/local/etc/rc.d/mastodon を作成。最低限start, stop, restartができればよい。
130
131
``` shell
132
#!/bin/sh
133
134
# PROVIDE: mastodon
135
# REQUIRE: nginx postgresql redis
136
137
. /etc/rc.subr
138
139
name="mastodon"
140
rcvar="${name}_enable"
141
142
load_rc_config $name
143
: ${mastodon_enable="NO"}
144
: ${mastodon_user="mastodon"}
145
: ${mastodon_group="<ユーザーmastodonの所属グループ>"}
146
start_cmd="${name}_start"
147
stop_cmd="${name}_stop"
148
restart_cmd="${name}_restart"
149
150
MASTODON_HOME=/usr/home/mastodon/live
151
BUNDLE=/usr/local/bin/bundle
152
NODE=/usr/local/bin/node
153
DAEMON="/usr/sbin/daemon -u $mastodon_user"
154
PROCS="puma sidekiq node"
155
156
export RAILS_ENV=production
157
export NODE_ENV=production
158
export DB_POOL=25
159
export MALLOC_ARENA_MAX=2
160
export STREAMING_CLUSTER_NUM=1
161
162
mastodon_start() {
163
	cd $MASTODON_HOME
164
	for i in $PROCS; do
165
		pidfile=$i.pid
166
		if [ -f $pidfile ]; then
167
			echo "$i is running as pid $(cat $pidfile)."
168
		else
169
			touch $pidfile
170
			chmod 644 $pidfile
171
			case $i in
172
				puma ) PORT=3000 $DAEMON -p puma.pid -o log/puma.log $BUNDLE exec puma -C config/puma.rb ;;
173
				sidekiq ) $DAEMON -p sidekiq.pid -o log/sidekiq.log $BUNDLE exec sidekiq -c 25 ;;
174
				node ) PORT=4000 $DAEMON -p node.pid -o log/node.log $NODE ./streaming ;;
175
			esac
176
			echo "Started $i."
177
		fi
178
	done
179
}
180
181
mastodon_stop() {
182
	cd $MASTODON_HOME
183
	for i in $PROCS; do
184
		pidfile=$i.pid
185
		if [ -f $pidfile ]; then
186
			pid=$(cat $pidfile)
187
			kill -s TERM $pid
188
			while kill -0 $pid 2> /dev/null; do
189
				sleep 1
190
			done
191
			rm -f $pidfile
192
			echo "Stopped $i."
193
		else
194
			echo "$i is not running."
195
		fi
196
	done
197
	stty echo
198
}
199
200
mastodon_restart() {
201
	$stop_cmd
202
	$start_cmd
203
}
204
205
run_rc_command "$1"
206
```
207
1. /etc/rc.conf へ `mastodon_enable="YES"` を追加。
208 1 白林檎 美和
1. 丼鯖のサービスを起動。
209 3 白林檎 美和
210
    ```
211
# service mastodon start
212
```
213 5 白林檎 美和
1. WWWブラウザから https://*ホストのFQDN*/ を開き, adminのメアドと初期パスワードでログイン。あとはページ内から,各種設定を進める。
214 4 白林檎 美和
215
## ログ回し
216
nginxと丼サービスのログを1週間周期で固めて回すよう, newsyslogを設定。
217
1. /usr/local/etc/newsyslog.conf.d に次のファイルを作成。
218
   * nginx.conf
219
220
        ```
221
# logfilename         [owner:group]  mode  count  size  when   flags  [/pid_file]         [sig_num]
222
/var/log/nginx/*.log                 644   100    *     $W0D0  GX     /var/run/nginx.pid  SIGUSR1
223
```
224
   * mastodon.conf: “usuaji” は,ユーザーmastodonの所属グループに読み替え。
225
        ```
226
# logfilename                  [owner:group]    mode  count  size  when   flags  [/pid_file]                    [sig_num]
227
/home/mastodon/live/log/*.log  mastodon:usuaji  644   100    *     $W0D0  GRX    /usr/home/mastodon/restart.sh
228
```
229
1. /usr/home/mastodon/restart.sh を作成。
230
    ``` shell
231
#!/bin/sh
232
service mastodon restart
233
```
234
1. newsyslogを再起動。
235
    ```
236
# service newsyslog restart
237
```