docker-compose基础开发环境搭建(mysql、redis、minio

• 1、docker部署mysql

• mysql-docker.yml【docker-compose文件】
• my.cnf【配置信息】
• 启动mysql命令【脚本命令】

• 2、docker部署redis
• • redis-docker.yml【docker-compose文件】

• redis.conf【配置信息】
• redis启动命令【脚本命令】

• docker部署kafka
• • kafka-docker.yml【docker-compose文件】

• zookeeper配置zoo.cfg【配置信息】
• kafka配置server.properties【配置信息】
• kafka启动【脚本命令】

• 总结

1、docker部署mysql

提示：主要包括mysql配置文件my.cnf； mysql-docker.yml

mysql-docker.yml【docker-compose文件】

version: “3”
services:
cc-mysql:
container_name: cc-mysql
image: mysql:8.0.33

设置访问密码

environment:
MYSQL_ROOT_PASSWORD: shenyijie
TZ: Asia/Shanghai

访问端口映射

ports:

• ‘13306:3306’
  restart: always
  privileged: true

映射物理主机对应目录

volumes:

• ‘/etc/localtime:/etc/localtime:ro’
• ‘/hya/data/mysql/logs:/var/log/mysql:rw’
• ‘/hya/data/mysql/conf:/etc/mysql/conf.d:rw’
• ‘/hya/data/mysql/mysql-data:/var/lib/mysql:rw’

my.cnf【配置信息】

服务端参数配置

[mysqld]

MySQL启动用户

user=mysql

创建新表时将使用的默认存储引擎

default-storage-engine=INNODB

设置mysql服务端默认字符集

character-set-server=utf8mb4

数据库字符集对应一些排序等规则，注意要和character-set-server对应

collation-server=utf8mb4_general_ci

pid文件所在目录

pid-file=/var/lib/mysql/mysqld.pid

用于本地连接的socket套接字

socket=/var/lib/mysql/mysqld.sock
#数据文件存放的目录
datadir=/var/lib/mysql
#bind-address=127.0.0.1

定义清除过期日志的时间(这里设置为7天)

expire_logs_days=7

设置client连接mysql时的字符集,防止乱码

init_connect=‘SET NAMES utf8mb4’

是否对sql语句大小写敏感，1表示不敏感

lower_case_table_names=1

执行sql的模式，规定了sql的安全等级, 暂时屏蔽，my.cnf文件中配置报错

#sql_mode=STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION

事务隔离级别，默认为可重复读，mysql默认可重复读级别（此级别下可能参数很多间隙锁，影响性能）

transaction_isolation=READ-COMMITTED

TIMESTAMP如果没有显示声明NOT NULL，允许NULL值

explicit_defaults_for_timestamp=true

#它控制着mysqld进程能使用的最大文件描述(FD)符数量。
#需要注意的是这个变量的值并不一定是你设定的值，mysqld会在系统允许的情况下尽量获取更多的FD数量
open_files_limit=65535

允许最大连接数

max_connections=200

#最大错误连接数
max_connect_errors=600

[client]
default-character-set=utf8mb4 # 设置mysql客户端默认字符集

启动mysql命令【脚本命令】

docker-compose -f /Users/shenyijie/data/docker-file/mysql-docker.yml -p mysql up -d

2、docker部署redis

提示：主要包括redis配置文件redis.conf； redis-docker.yml

redis-docker.yml【docker-compose文件】

version: “3”
services:
cc-redis:
restart: always
image: redis:6.2.7
container_name: cc-redis
restart: always
hostname: cc-redis
environment:
REDIS_PASSWORD: X2I^KH!v
TZ: Asia/Shanghai
ports:

• “6379:6379”
  volumes:
• ‘/etc/localtime:/etc/localtime:ro’
• ‘/Users/shenyijie/data/soft/redis/config/redis.conf:/etc/redis/redis.conf:rw’
• ‘/Users/shenyijie/data/soft/redis/data:/data:rw’
  command:
  redis-server /etc/redis/redis.conf --appendonly yes

redis.conf【配置信息】

开启保护

protected-mode yes

绑定监听IP地址

bind 0.0.0.0

自定义密码

#requirepass X2I^KH!v
port 6379
timeout 0

900s内至少一次写操作则执行bgsave进行RDB持久化

save 900 1
save 300 10
save 60 10000

rdbcompression yes
dbfilename dump.rdb
dir /data
appendonly yes
appendfsync everysec

redis启动命令【脚本命令】

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数大数据工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年大数据全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上大数据开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加VX：vip204888 （备注大数据获取）

的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上大数据开发知识点，真正体系化！**

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加VX：vip204888 （备注大数据获取）
[外链图片转存中…(img-hlXjtMfu-1712514792279)]