Pet*_*and 5 database postgresql persistence docker docker-compose
在 docker-compose v3 容器关闭并重新启动后,我无法持久保存 postgres 数据。这似乎是一个常见问题,但经过大量搜索后,我一直无法找到有效的解决方案。
我的问题类似于这里:How to persist data in a dockerized postgres database using volumes,但解决方案不起作用 - 所以请不要关闭。我将通过以下所有步骤来重现问题。
这是我的 docker-compose 文件:
version: "3"
services:
db:
image: postgres:latest
environment:
POSTGRES_DB: zennify
POSTGRES_USER: patientplatypus
POSTGRES_PASSWORD: SUPERSECRETPASSWORD
volumes:
- pgdata:/var/lib/postgresql/data:rw
ports:
- 5432:5432
app:
build: .
command: ["go", "run", "main.go"]
ports:
- 8081:8081
depends_on:
- db
links:
- db
volumes:
pgdata:
Run Code Online (Sandbox Code Playgroud)
这是我启动并写入数据库后的终端输出:
patientplatypus:~/Documents/zennify.me/backend:08:54:03$docker-compose up
Starting backend_db_1 ... done
Starting backend_app_1 ... done
Attaching to backend_db_1, backend_app_1
db_1 | 2018-08-19 13:54:53.661 UTC [1] LOG: listening on IPv4 address "0.0.0.0", port 5432
db_1 | 2018-08-19 13:54:53.661 UTC [1] LOG: listening on IPv6 address "::", port 5432
db_1 | 2018-08-19 13:54:53.664 UTC [1] LOG: listening on Unix socket "/var/run/postgresql/.s.PGSQL.5432"
db_1 | 2018-08-19 13:54:53.692 UTC [24] LOG: database system was shut down at 2018-08-19 13:54:03 UTC
db_1 | 2018-08-19 13:54:53.712 UTC [1] LOG: database system is ready to accept connections
app_1 | db init successful
app_1 | create_userinfo_table started
app_1 | create_userinfo_table finished
app_1 | inside RegisterUser in Golang
app_1 | here is the users email:
app_1 | %s pwoiioieind@gmail.com
app_1 | here is the users password:
app_1 | %s ANOTHERSECRETPASSWORD
app_1 | value of randSeq, 7NLHzuVRuTSxYZyNP6MxPqdvS0qy1L6k
app_1 | search_userinfo_table started
app_1 | value of OKtoAdd, %t true
app_1 | last inserted id = 1 //I inserted in database!
app_1 | value of initUserRet, added
Run Code Online (Sandbox Code Playgroud)
我还可以在另一个终端选项卡中连接到 postgres,并验证是否使用psql -h 0.0.0.0 -p 5432 -U patientplatypus zennify. 这是userinfo表的输出:
zennify=# TABLE userinfo
;
email | password | regstring | regbool | uid
-----------------------+--------------------------------------------------------------+----------------------------------+---------+-----
pwoiioieind@gmail.com | $2a$14$u.mNBrITUJaVjly15BOV9.Q9XmELYRjYQbhEUi8i4vLWtOr9QnXJ6 | r33ik3Jtf0m9U3zBRelFoWyYzpQp7KzR | f | 1
(1 row)
Run Code Online (Sandbox Code Playgroud)
所以写入数据库一次有效!
然而
现在让我们执行以下操作:
$docker-compose stop
backend_app_1 exited with code 2
db_1 | 2018-08-19 13:55:51.585 UTC [1] LOG: received smart shutdown request
db_1 | 2018-08-19 13:55:51.589 UTC [1] LOG: worker process: logical replication launcher (PID 30) exited with exit code 1
db_1 | 2018-08-19 13:55:51.589 UTC [25] LOG: shutting down
db_1 | 2018-08-19 13:55:51.609 UTC [1] LOG: database system is shut down
backend_db_1 exited with code 0
Run Code Online (Sandbox Code Playgroud)
从阅读本主题的其他线程使用docker-compose stop而不是docker-compose down应该持久化本地数据库。但是,如果我再次使用docker-compose up然后,而不向数据库写入新值,只需在 postgres 中查询表,它就是空的:
zennify=# TABLE userinfo;
email | password | regstring | regbool | uid
-------+----------+-----------+---------+-----
(0 rows)
Run Code Online (Sandbox Code Playgroud)
我原以为我可能在初始化步骤的代码中覆盖了表,但我只有(golang 代码段):
_, err2 := db.Exec("CREATE TABLE IF NOT EXISTS userinfo(email varchar(40) NOT NULL, password varchar(240) NOT NULL, regString varchar(32) NOT NULL, regBool bool NOT NULL, uid serial NOT NULL);")
Run Code Online (Sandbox Code Playgroud)
当然,如果之前没有创建表,它应该只创建表。
有没有人对出了什么问题有任何建议?据我所知,这一定是 docker-compose 的问题,而不是我的代码。谢谢您的帮助!
编辑:
我已经研究过使用 docker 的第 2 版并遵循本文中显示的格式(Docker compose not persisting data),使用以下组合:
version: "2"
services:
app:
build: .
command: ["go", "run", "main.go"]
ports:
- "8081:8081"
depends_on:
- db
links:
- db
db:
image: postgres:latest
environment:
POSTGRES_DB: zennify
POSTGRES_USER: patientplatypus
POSTGRES_PASSWORD: SUPERSECRETPASSWORD
ports:
- "5432:5432"
volumes:
- pgdata:/var/lib/postgresql/data/
volumes:
pgdata: {}
Run Code Online (Sandbox Code Playgroud)
不幸的是,我再次遇到同样的问题 - 数据可以写入,但在关机之间不会持续存在。
编辑 编辑:
请注意,使用docker-compose up实例化服务然后依赖docker-compose stop并且docker-compose start对数据的持久性没有实质性影响。在重新启动后仍然不存在。
编辑 编辑 编辑:
我还发现了更多的事情。如果您想正确执行到 docker 容器以查看数据库的值,您可以执行以下操作:
docker exec -it backend_db_1 psql -U patientplatypus -W zennify
Run Code Online (Sandbox Code Playgroud)
其中backend_db_1docker 容器数据库的名称patientplatypus是我的用户名,zennify是数据库容器中的数据库名称。
我也试过在 docker-compose 文件中添加一个网桥,但没有成功,如下所示:
version: "3"
services:
db:
build: ./db
image: postgres:latest
environment:
POSTGRES_USER: patientplatypus
POSTGRES_PASSWORD: SUPERSECRET
POSTGRES_DB: zennify
ports:
- 5432:5432
volumes:
- ./db/pgdata:/var/lib/postgresql/data
networks:
- mynet
app:
build: ./
command: bash -c 'while !</dev/tcp/db/5432; do sleep 5; done; go run main.go'
ports:
- 8081:8081
depends_on:
- db
links:
- db
networks:
- mynet
networks:
mynet:
driver: "bridge"
Run Code Online (Sandbox Code Playgroud)
我目前的工作理论是,无论出于何种原因,我的 golang 容器正在将它具有的 postgres 值写入本地存储而不是共享卷,我不知道为什么。这是我对 golang open 命令应该是什么样子的最新想法:
data.InitDB("postgres://patientplatypus:SUPERSECRET@db:5432/zennify/?sslmode=disable")
...
func InitDB(dataSourceName string) {
db, _ := sql.Open(dataSourceName)
...
}
Run Code Online (Sandbox Code Playgroud)
这再次起作用,但它不会保留数据。
我对 postgres db 和使用 docker-compose 运行的 Django 应用程序遇到了完全相同的问题。
事实证明,我的应用程序的 Dockerfile 使用了一个入口点,其中执行了以下命令:python manage.py flush清除数据库中的所有数据。由于每次应用程序容器启动时都会执行此操作,因此它会清除所有数据。它与 docker-compose 无关。
在环境变量下:
PGDATA 此可选环境变量可用于定义数据库文件的另一个位置(例如子目录)。默认为 /var/lib/postgresql/data,但如果您使用的数据卷是 fs 挂载点(如 GCE 持久磁盘),Postgres initdb 建议使用子目录(例如 /var/lib/postgresql/data/ pgdata )被创建来包含数据。
更多信息请点击此处 --> https://hub.docker.com/_/postgres/