Docker on いつかの熊右衛門

Docker：pull 済みイメージの最新を一括で取得する

Sat, 23 Dec 2023 12:49:41 +0900

pull 済みイメージの新しいものがあるとき、個々にアップデートするのは大変です。
なので、一括で取得するコマンドを用意しました。

for image in $(docker images --format "{{.Repository}}:{{.Tag}}"); do docker pull $image; done

foreach ($image in $(docker images --format "{{.Repository}}:{{.Tag}}")) {
 docker pull $image
}

更新後、未使用になったイメージを次のコマンドで削除しておきます。

docker rmi $(docker images -f "dangling=true" -q)

docker images -f "dangling=true" -q | ForEach-Object { docker rmi $_ }

Docker Desktop for Windows/Mac と VSCode でつくるクリーンな開発環境構築入門 (Amazon) Docker Desktop for Windows/Macでつくるクリーンな開発環境構築入門(Python版) (Amazon)

Docker で JupyterLab または Jupyter Notebook 使う

Sat, 28 Aug 2021 17:50:01 +0900

Dockerイメージが continuumio/anaconda3 で公開されているので利用はとても簡単です。

JupyterLab（Jupyer Notebook の後継）を使いたいなら

docker run -it -p 8888:8888 continuumio/anaconda3 /bin/bash -c "\
 conda install jupyter -y --quiet && \
 mkdir -p /opt/notebooks && \
 jupyter lab \
 --notebook-dir=/opt/notebooks --ip='*' --port=8888 \
 --no-browser --allow-root \
 --NotebookApp.token=''"

Jupyter Notebook の方なら

docker run -it -p 8888:8888 continuumio/anaconda3 /bin/bash -c "\
 conda install jupyter -y --quiet && \
 mkdir -p /opt/notebooks && \
 jupyter notebook \
 --notebook-dir=/opt/notebooks --ip='*' --port=8888 \
 --no-browser --allow-root \
 --NotebookApp.token=''"

で実行後、ブラウザから http://localhost:8888/ にアクセスすれば OK です。
root ユーザーの許可、トークン無しのログインを許すオプションを付けているので、閉じた環境のみで使うなどの注意はしてください。

必要なパッケージを毎回追加するのは面倒

→ Dockerイメージをカスタマイズ

前回の様な事をする場合、毎回パッケージをインストールするのは面倒なので、追加済みの Docker イメージを作っておくと便利です。

ということで以下のような Dockerfile を作成して、パッケージを追加済みのイメージを作りました。今回追加したパッケージは、

sqlite3
scikit-learn
mplfinance
yahooquery

です。

FROM continuumio/anaconda3

RUN apt-get update \
 && apt-get install --no-install-recommends -y \
 sqlite3 \
 && apt-get clean \
 && rm -r /var/lib/apt/lists/* \
 && ln -sf /usr/share/zoneinfo/Asia/Tokyo /etc/localtime

RUN pip install --upgrade pip && \
 pip install scikit-learn && \
 pip install mplfinance && \
 pip install yahooquery

RUN conda install jupyter -y --quiet && \
 mkdir -p /opt/notebooks

WORKDIR /opt/notebooks
EXPOSE 8888
ENTRYPOINT ["jupyter", "lab", "--ip='*'", "--port=8888", "--no-browser", "--allow-root", "--NotebookApp.token=''", "--notebook-dir=/opt/notebooks"]

で、この Dockerfile のあるディレクトリで

docker image build -t myjn -f Dockerfile .

とすれば、イメージが作成できます。イメージの名前は myjn にしてみました。
実行する場合は、

docker run -it \
 -p 8888:8888 \
 -v $PWD/notebooks:/opt/notebooks \
 --rm \
 myjn

で OK です。Docker 停止後も JupterLab で作成したファイルが残るように、ホストPC の ./notebooks ディレクトリを使うようにしています。

今週、ちょっと株価戻ったんですね。

2023/12/08 追記
起動時の “Would you like to receive official Jupyter news?” という通知を止めるには、次のコマンドを先に実行しておきます。

jupyter labextension disable "@jupyterlab/apputils-extension:announcements"

例えば以下の様になります。

docker run -it -p 8888:8888 continuumio/anaconda3 /bin/bash -c "\
 conda install jupyter -y --quiet && \
 mkdir -p /opt/notebooks && \
 jupyter labextension disable "@jupyterlab/apputils-extension:announcements" && \
 jupyter lab \
 --notebook-dir=/opt/notebooks --ip='*' --port=8888 \
 --no-browser --allow-root \
 --NotebookApp.token=''"

Docker Desktop for Windows/Macでつくるクリーンな開発環境構築入門(Python版) (Amazon)

UpdraftPlus によるバックアップを Docker に復元するには

Sat, 29 May 2021 19:59:00 +0900

WordPress のバックアップを UpdraftPlus で取っていますが、復元できるか確認します。
復元先にはローカルの Docker を使います。

復元先の WordPress をDocker で用意する

公式のサンプル等を参考に以下の docker-compose.yml を用意しました。

version: '3'

services:
 db:
 image: mysql@sha256:68b207d01891915410db3b5bc1f69963e3dc8f23813fd01e61e6d7e7e3a46680
 volumes:
 - ./mysql:/var/lib/mysql
 restart: always
 environment:
 MYSQL_ROOT_PASSWORD: somewordpress
 MYSQL_DATABASE: wordpress
 MYSQL_USER: wordpress
 MYSQL_PASSWORD: wordpress

 wordpress:
 depends_on:
 - db
 image: wordpress:latest
 volumes:
 - ./html:/var/www/html
 ports:
 - "80:80"
 restart: always
 environment:
 WORDPRESS_DB_HOST: db:3306
 WORDPRESS_DB_USER: wordpress
 WORDPRESS_DB_PASSWORD: wordpress

mysql のイメージが latest で無いのは Apple silicon に対応してない為で、回避策として latest のダイジェストを指定しています。

Docker コンテナを起動して WordPress を初期化する

下記コマンドで起動します。

docker compose up -d --remove-orphans

しばらく待つと、http://localhost/ で WordPress の初期設定を行うページが開けるので、そのまま初期設定を行います。

言語を選択
必要情報を入力（仮の値でOK。復元が済むまでの一時的なもの。）
WordPress をインストール

インストールが完了したら、ログイン画面になるのでログインしておきます。

UpdraftPlus プラグインを追加する

WordPress の左サイドのメニューから「プラグイン」し、「新規追加」をクリック。

プラグインを検索するテキストボックスで「UpdraftPlus」を検索し、見つかった「UpdraftPlus WordPress Backup Plugin」の「今すぐインストール」をクリック。

「UpdraftPlus」の「有効化」をクリック。

バックアップしたファイルを取得する

自分の場合は Google ドライブにバックアップしているので、直近のバックアップである下記ファイルをダウンロードしました。（ファイル名を一部変更しています。）

backup_2021-05-28-1546_kumaemoncom_6fc7e15e487e-db.gz
backup_2021-05-28-1546_kumaemoncom_6fc7e15e487e-others.zip
backup_2021-05-28-1546_kumaemoncom_6fc7e15e487e-plugins.zip
backup_2021-05-28-1546_kumaemoncom_6fc7e15e487e-themes.zip
backup_2021-05-28-1546_kumaemoncom_6fc7e15e487e-uploads.zip

バックアップした一部のファイルを書き換える

“backup_2021-05-28-1546_kumaemoncom_6fc7e15e487e-db.gz” を解凍したファイルをテキストエディタで開き、一括置換します。

“https://kuma-emon.com” → “http://localhost”
“https%3A%2F%2Fkuma-emon.com” → “http%3A%2F%2Flocalhost”

他にも “kuma-emon.com” が見つかりましたが、投稿を救い出す分には問題なさそうなので、そのままにしました。

UpdraftPlus にバックアップファイルをアップロードして復元する

「設定」の「UpdraftPlus バックアップ」にある「バックアップファイルをアップロード」をクリックし、バックアップファイルをアップロードします。
※ backup_2021-05-28-1546_kumaemoncom_6fc7e15e487e-db.gz はアップロードせず、書き換えたテキストファイルの方をアップロードします。

アップロードしたバックアップの「復元」をクリック。

「復元するコンポーネントを選択」を全て選択して「次」で進めていきます。

「UpdraftPlus 設定に戻る」をクリックするとログインになります。
ログインに使うアカウントは、復元したサイトで使っているものを入力します。

復元の状態を確認する

ざっと見た感じでは、テーマのスキンが未選択になった程度で選択し直せば大丈夫でした。
自分の場合は投稿と画像が復元できれば十分と思っているのでこれでOKですが、ご自身が必要と思うものが復元されているか確認しましょう。

WordPress のバックアップを Docker に復元してみた

Sat, 08 May 2021 20:57:00 +0900

WordPress のバックアッププラグイン「BackWPup」で自動バックアップをしていますが、自分で戻せるのか試してみました。BackWPup Pro では無いので手動です。

サービス側も自動バックアップしている

このブログは CohoHa WING を利用しているので、サーバー側で過去１４日分の自動バックアップが取られています。
操作の間違いや失敗があって戻したい場合はそれを利用する方が簡単・確実です。

復元先に Docker を使用

お試しサーバーは Docker で立ち上げるのがお手軽です。
なので、公式のサンプル等を参考に以下の docker-compose.yml を用意しました。
また、docker-compose.yml を置いたディレクトリに「mysql」「html」ディレクトリは手動で作成しておきます。

version: '3'

services:
 db:
 image: mysql@sha256:bbeff35b63bf28aeb024de309aab2d501f8aa30e94664d3840d55b36c8db53c8
 volumes:
 - ./mysql:/var/lib/mysql
 restart: always
 environment:
 MYSQL_ROOT_PASSWORD: somewordpress
 MYSQL_DATABASE: wordpress
 MYSQL_USER: wordpress
 MYSQL_PASSWORD: wordpress

 wordpress:
 depends_on:
 - db
 image: wordpress:latest
 volumes:
 - ./html:/var/www/html
 ports:
 - "80:80"
 restart: always
 environment:
 WORDPRESS_DB_HOST: db:3306
 WORDPRESS_DB_USER: wordpress
 WORDPRESS_DB_PASSWORD: wordpress

mysql のイメージが latest で無いのは Apple silicon に対応してない為で、回避策として latest（お試し時の最新）のダイジェストを指定しています。
起動してしばらく待つと、http://localhost/ で WordPress の初期設定ページ（言語選択）が開けました。
初期状態が確認できたので、一旦Dockerコンテナーは停止してバックアップから復元してみます。

バックアップのダウンロード

バックアップ対象の WordPress のメニューから、BackWPup → バックアップを選択して、バックアップしたファイルをダウンロードします。
自分は .tar.gz にしているのでダウンロード後に解凍します。できたファイルとディレクトリは以下でした。（一部のファイル名は伏せ字）

backwpup_readme.txt
xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx.pluginlist.2021-05-03.txt
error
index.php
license.txt
manifest.json
xxxxxxxxxxxxxx.sql
readme.html
wp-activate.php
wp-admin
wp-blog-header.php
wp-comments-post.php
wp-config-sample.php
wp-config.php
wp-content
wp-cron.php
wp-includes
wp-links-opml.php
wp-load.php
wp-login.php
wp-mail.php
wp-settings.php
wp-signup.php
wp-trackback.php
xmlrpc.php

バックアップから復元

解凍してできた、
・ xxxxxxxxxxxxxx.sql は mysql ディレクトリにコピー
・その他のファイルは html ディレクトリに上書きコピー
　但し、コピー先の wp-config.php は予め退避しておきます。後で内容のコピーに使います。

wp-config.php の修正

バックアップから戻した wp-config.php ファイルに、退避した wp-config.php の先頭から DB_COLLATE の定義がある範囲を上書きします。

<?php
/**
 * The base configuration for WordPress
 *
 * The wp-config.php creation script uses this file during the
 * installation. You don't have to use the web site, you can
 * copy this file to "wp-config.php" and fill in the values.
 *
 * This file contains the following configurations:
 *
 * * MySQL settings
 * * Secret keys
 * * Database table prefix
 * * ABSPATH
 *
 * @link https://codex.wordpress.org/Editing_wp-config.php
 *
 * @package WordPress
 */

// a helper function to lookup "env_FILE", "env", then fallback
if (!function_exists('getenv_docker')) {
	// https://github.com/docker-library/wordpress/issues/588 (WP-CLI will load this file 2x)
	function getenv_docker($env, $default) {
		if ($fileEnv = getenv($env . '_FILE')) {
			return rtrim(file_get_contents($fileEnv), "\r\n");
		}
		else if (($val = getenv($env)) !== false) {
			return $val;
		}
		else {
			return $default;
		}
	}
}

// ** MySQL settings - You can get this info from your web host ** //
/** The name of the database for WordPress */
define( 'DB_NAME', getenv_docker('WORDPRESS_DB_NAME', 'wordpress') );

/** MySQL database username */
define( 'DB_USER', getenv_docker('WORDPRESS_DB_USER', 'example username') );

/** MySQL database password */
define( 'DB_PASSWORD', getenv_docker('WORDPRESS_DB_PASSWORD', 'example password') );

/**
 * Docker image fallback values above are sourced from the official WordPress installation wizard:
 * https://github.com/WordPress/WordPress/blob/f9cc35ebad82753e9c86de322ea5c76a9001c7e2/wp-admin/setup-config.php#L216-L230
 * (However, using "example username" and "example password" in your database is strongly discouraged. Please use strong, random credentials!)
 */

/** MySQL hostname */
define( 'DB_HOST', getenv_docker('WORDPRESS_DB_HOST', 'mysql') );

/** Database Charset to use in creating database tables. */
define( 'DB_CHARSET', getenv_docker('WORDPRESS_DB_CHARSET', 'utf8') );

/** The Database Collate type. Don't change this if in doubt. */
define( 'DB_COLLATE', getenv_docker('WORDPRESS_DB_COLLATE', '') );

データベースの復元

xxxxxxxxxxxxxx.sql に URL が書かれている所があるので変更します。
https://kuma-emon.com を http://localhost に置換しました。

Dockerコンテナーを起動し、mysqlのコンテナーに接続してファイルから復元します。

mysql -u wordpress -D wordpress -p < /var/lib/mysql/xxxxxxxxxxxxxx.sql

それなりに復元できたが

利用できないプラグインが（BackWPup）ありました。
デザインも初期値になったものがあり、管理画面から再設定が必要でした。

記事や画像は復元できたので、もしもの際に使えそうです。