Docker と docker-compose
LinuxおよびMacOSへのDockerを使用したA-Parserのインストールは推奨される方法です。A-ParserとHeadless Chromeの動作に必要なすべての依存関係とライブラリを含むイメージを用意しました。
インストール前に
Docker
システムに Dockerをインストール する必要があります。
インストールと起動
A-Parserのディストリビューションをダウンロードして解凍します:
curl -O https://a-parser.com/members/onetime/ce42f308eaa577b5/aparser-linux-x64.tar.gz
tar zxf aparser-linux-x64.tar.gz
rm -f aparser-linux-x64.tar.gz
ダウンロードはLinux用のワンタイムリンクを使用して行われます。 リンクは 会員エリア の A-Parser -> Downloads タブから取得してください。
次のコマンドを使用して実行します:
docker run --rm --name aparser -v $(pwd)/aparser:/app -p 9091:9091 -t aparser/runtime ./aparser -foreground
オプション -foreground は、ログファイルの内容をターミナルに直接出力します:
Apr 27 07:06:53.10427 [master] foreground mode
Apr 27 07:06:54.06409 [master] Found local Chromium: /app/dist/nodejs/node_modules/puppeteer/.local-chromium/linux-856583/chrome-linux/chrome
Apr 27 07:06:55.36487 [master] NodeJS console: [Rank::CMS] total loaded 1446 apps
Apr 27 07:07:19.01377 [master] Start ProxyChecker nocheck
Apr 27 07:07:19.24418 [master] Start ProxyChecker default
Apr 27 07:07:19.62635 [master] A-Parser v1.2.1176-linux-x64 started, tasks: 0 / 2, memory total: 1989 MB, available: 610 MB
起動後、A-Parserは次のアドレスで利用可能になります: http://127.0.0.1:9091
コンテナをバックグラウンドで実行するには、次のコマンドを使用します:
docker run --rm --name aparser -v $(pwd)/aparser:/app -p 9091:9091 -t -d aparser/runtime ./aparser
マルチスレッドのためのLinuxチューニング
デフォルトでは、コンテナ内でも開けるファイル/ソケットの数に制限があります。Docker経由で起動する際に制限を10240まで増やすには、--ulimit オプションを使用します:
docker run --rm --name aparser -v $(pwd)/aparser:/app -p 9091:9091 --ulimit nofile=10240:10240 -t -d aparser/runtime ./aparser
同様の設定を docker-compose.yml で指定することもできます:
services:
a-parser:
image: aparser/runtime:latest
command: ./aparser
restart: always
volumes:
- ./aparser:/app
ports:
- 9091:9091
ulimits:
nofile:
soft: 10240
hard: 10240
さらに、ホストシステムで マルチスレッドのためのLinuxチューニング を実行することをお勧めします。
A-Parserの更新
コンテナを停止します:
docker stop aparser
A-Parserを更新します:
docker run --rm --name aparser -v $(pwd)/aparser:/app -p 9091:9091 -t aparser/runtime ./aparser -foreground -doupdate
更新が完了したら、A-Parserを起動します
インターフェース経由またはワンタイムリンク経由 で更新することもできます。
docker-compose
A-Parserのディストリビューションをダウンロードして解凍します:
curl -O https://a-parser.com/members/onetime/ce42f308eaa577b5/aparser.tar.gz
tar zxf aparser.tar.gz
rm -f aparser.tar.gz
ファイル docker-compose.yml を作成します:
version: '3'
services:
a-parser:
image: aparser/runtime:latest
command: ./aparser
restart: always
volumes:
- ./aparser:/app
ports:
- 9091:9091
A-Parserを起動します:
docker compose up -d
TODO: (next) #### Let's EncryptによるHTTPS接続