Docker基础
1. Docker简介
1.1 是什么
问题:为什么会有docker出现
一款产品从开发到上线,从操作系统,到运行环境,再到应用配置。作为开发+运维之间的协作我们需要关心很多东西,这也是很多互联网公司都不得不面对的问题,特别是各种版本的迭代之后,不同版本环境的兼容,对运维人员都是考验
Docker之所以发展如此迅速,也是因为它对此给出了一个标准化的解决方案。
环境配置如此麻烦,换一台机器,就要重来一次,费力费时。很多人想到,能不能从根本上解决问题,软件可以带环境安装?也就是说,安装的时候,把原始环境一模一样地复制过来。开发人员利用 Docker 可以消除协作编码时“在我的机器上可正常工作”的问题。

之前在服务器配置一个应用的运行环境,要安装各种软件,就拿尚硅谷电商项目的环境来说吧,Java/Tomcat/MySQL/JDBC驱动包等。安装和配置这些东西有多麻烦就不说了,它还不能跨平台。假如我们是在 Windows 上安装的这些环境,到了 Linux 又得重新装。况且就算不跨操作系统,换另一台同样操作系统的服务器,要移植应用也是非常麻烦的。
传统上认为,软件编码开发/测试结束后,所产出的成果即是程序或是能够编译执行的二进制字节码等(java为例)。而为了让这些程序可以顺利执行,开发团队也得准备完整的部署文件,让维运团队得以部署应用程式,开发需要清楚的告诉运维部署团队,用的全部配置文件+所有软件环境。不过,即便如此,仍然常常发生部署失败的状况。Docker镜像的设计,使得Docker得以打破过去「程序即应用」的观念。透过镜像(images)将作业系统核心除外,运作应用程式所需要的系统环境,由下而上打包,达到应用程式跨平台间的无缝接轨运作。
docker理念
Docker是基于Go语言实现的云开源项目。
Docker的主要目标是“Build,Ship and Run Any App,Anywhere”,也就是通过对应用组件的封装、分发、部署、运行等生命周期的管理,使用户的APP(可以是一个WEB应用或数据库应用等等)及其运行环境能够做到“一次封装,到处运行”。

Linux 容器技术的出现就解决了这样一个问题,而 Docker 就是在它的基础上发展过来的。将应用运行在 Docker 容器上面,而 Docker 容器在任何操作系统上都是一致的,这就实现了跨平台、跨服务器。只需要一次配置好环境,换到别的机子上就可以一键部署好,大大简化了操作
一句话
解决了运行环境和配置问题软件容器,方便做持续集成并有助于整体发布的容器虚拟化技术。
1.2 能干嘛
之前的虚拟机技术
虚拟机(virtual machine)就是带环境安装的一种解决方案。
它可以在一种操作系统里面运行另一种操作系统,比如在Windows 系统里面运行Linux 系统。应用程序对此毫无感知,因为虚拟机看上去跟真实系统一模一样,而对于底层系统来说,虚拟机就是一个普通文件,不需要了就删掉,对其他部分毫无影响。这类虚拟机完美的运行了另一套系统,能够使应用程序,操作系统和硬件三者之间的逻辑不变。

虚拟机的缺点:
资源占用多
冗余步骤多
启动慢
容器虚拟化技术
由于前面虚拟机存在这些缺点,Linux 发展出了另一种虚拟化技术:Linux 容器(Linux Containers,缩写为 LXC)。
Linux 容器不是模拟一个完整的操作系统,而是对进程进行隔离。有了容器,就可以将软件运行所需的所有资源打包到一个隔离的容器中。容器与虚拟机不同,不需要捆绑一整套操作系统,只需要软件工作所需的库资源和设置。系统因此而变得高效轻量并保证部署在任何环境中的软件都能始终如一地运行。

比较了 Docker 和传统虚拟化方式的不同之处:
传统虚拟机技术是虚拟出一套硬件后,在其上运行一个完整操作系统,在该系统上再运行所需应用进程;
而容器内的应用进程直接运行于宿主的内核,容器内没有自己的内核,而且也没有进行硬件虚拟。因此容器要比传统虚拟机更为轻便。
每个容器之间互相隔离,每个容器有自己的文件系统 ,容器之间进程不会相互影响,能区分计算资源。
开发/运维(DevOps)
一次构建、随处运行
- 更快速的应用交付和部署
传统的应用开发完成后,需要提供一堆安装程序和配置说明文档,安装部署后需根据配置文档进行繁杂的配置才能正常运行。Docker化之后只需要交付少量容器镜像文件,在正式生产环境加载镜像并运行即可,应用安装配置在镜像里已经内置好,大大节省部署配置和测试验证时间。
- 更便捷的升级和扩缩容
随着微服务架构和Docker的发展,大量的应用会通过微服务方式架构,应用的开发构建将变成搭乐高积木一样,每个Docker容器将变成一块“积木”,应用的升级将变得非常容易。当现有的容器不足以支撑业务处理时,可通过镜像运行新的容器进行快速扩容,使应用系统的扩容从原先的天级变成分钟级甚至秒级。
- 更简单的系统运维
应用容器化运行后,生产环境运行的应用可与开发、测试环境的应用高度一致,容器会将应用程序相关的环境和状态完全封装起来,不会因为底层基础架构和操作系统的不一致性给应用带来影响,产生新的BUG。当出现程序异常时,也可以通过测试环境的相同容器进行快速定位和修复。
- 更高效的计算资源利用
Docker是内核级虚拟化,其不像传统的虚拟化技术一样需要额外的Hypervisor支持,所以在一台物理机上可以运行很多个容器实例,可大大提升物理服务器的CPU和内存的利用率。
企业级
新浪

美团

蘑菇街

1.3 去哪下
官网
docker官网:http://www.docker.com
docker中文网站:https://www.docker-cn.com/
仓库
- Docker Hub官网: https://hub.docker.com/
2. Docker安装
2.1 前提说明
目前,CentOS 仅发行版本中的内核支持 Docker。
Docker 运行在 CentOS 7 上,要求系统为64位、系统内核版本为 3.10 以上。[我们基于7以上的版本来讲的哦]
Docker 运行在 CentOS-6.5 或更高的版本的 CentOS 上,要求系统为64位、系统内核版本为 2.6.32-431 或者更高版本。
uname命令用于打印当前系统相关信息(内核版本号、硬件架构、主机名称和操作系统类型等)。
uname -r

查看操作系统版本
cat /etc/redhat-release

2.2 Docker的基本组成
1 | 镜像(image) |
Docker的架构图

2.3 安装步骤
2.3.1 本人简易安装法
1 | 本人简易安装法(不懂官网为啥那么繁琐) |
2.3.2 CentOS6.8安装Docker
- yum install -y epel-release
Docker使用EPEL发布,RHEL系的OS首先要确保已经持有EPEL仓库,否则先检查OS的版本,然后安装相应的EPEL包。

- yum install -y docker-io

- 安装后的配置文件:/etc/sysconfig/docker

启动Docker后台服务:service docker start
docker version验证

2.3.3 CentOS7官网步骤安装Docker
官网:https://docs.docker.com/install/linux/docker-ce/centos/
官网中文安装参考手册:https://docs.docker-cn.com/engine/installation/linux/docker-ce/centos/#prerequisites
1 | 1. 确定你是CentOS7及以上版本 cat /etc/redhat-release |
2.4 永远的HelloWorld
2.4.1 阿里云镜像加速
注册一个属于自己的阿里云账户(可复用淘宝账号)
搜索 容器镜像服务 找到后如下图


获取加速器地址

配置本机Docker运行镜像加速器
mkdir -p /etc/docker
vim /etc/docker/daemon.json
1 | #网易云 |
systemctl daemon-reload
systemctl restart docker
启动Docker后台容器(测试运行 hello-world)
- docker run hello-world

输出这段提示以后,hello world就会停止运行,容器自动终止。
- run干了什么

2.5 底层原理
2.5.1 Docker是怎么工作的
Docker是一个Client-Server结构的系统,Docker守护进程运行在主机上, 然后通过Socket连接从客户端访问,守护进程从客户端接受命令并管理运行在主机上的容器。 容器,是一个运行时环境,就是我们前面说到的集装箱。

2.5.2 为什么Docker比较比VM快
(1)docker有着比虚拟机更少的抽象层。由亍docker不需要Hypervisor实现硬件资源虚拟化,运行在docker容器上的程序直接使用的都是实际物理机的硬件资源。因此在CPU、内存利用率上docker将会在效率上有明显优势。
(2)docker利用的是宿主机的内核,而不需要Guest OS。因此,当新建一个容器时,docker不需要和虚拟机一样重新加载一个操作系统内核。仍而避免引寻、加载操作系统内核返个比较费时费资源的过程,当新建一个虚拟机时,虚拟机软件需要加载Guest OS,返个新建过程是分钟级别的。而docker由于直接利用宿主机的操作系统,则省略了返个过程,因此新建一个docker容器只需要几秒钟。


3. Docker常用命令
3.1 帮助命令
docker version
docker info
docker –help
3.2 镜像命令
1. docker images
列出本地主机上的镜像

1 | OPTIONS说明: |
2. docker search 某个XXX镜像名字
命令
1 | docker search [OPTIONS] 镜像名字 |
3. docker pull 某个XXX镜像名字
1 | 下载镜像 |
4. docker rmi 某个XXX镜像名字ID
1 | 删除镜像 |
3.3 容器命令
有镜像才能创建容器,这是根本前提(下载一个CentOS镜像演示) docker pull centos
1 | *新建并启动容器 |
重要
- 启动守护式容器
1 | docker run -d 容器名 |
- 查看容器日志
1 | docker logs -f -t --tail 容器ID |


- 查看容器内运行的进程
1 | docker top 容器ID |
- 查看容器内部细节
1 | docker inspect 容器ID |
- 进入正在运行的容器并以命令行交互
1 | docker exec -it 容器ID bashShell |

- 从容器内拷贝文件到主机上
docker cp 容器ID:容器内路径 目的主机路径

3.4 小总结
常用命令

1 | attach Attach to a running container # 当前 shell 下 attach 连接指定运行镜像 |
4. Docker 镜像
4.1 是什么
镜像是一种轻量级、可执行的独立软件包,用来打包软件运行环境和基于运行环境开发的软件,它包含运行某个软件所需的所有内容,包括代码、运行时、库、环境变量和配置文件。
- UnionFS(联合文件系统)
UnionFS(联合文件系统):Union文件系统(UnionFS)是一种分层、轻量级并且高性能的文件系统,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem)。Union 文件系统是 Docker 镜像的基础。镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。

特性:一次同时加载多个文件系统,但从外面看起来,只能看到一个文件系统,联合加载会把各层文件系统叠加起来,这样最终的文件系统会包含所有底层的文件和目录
Docker镜像加载原理
docker的镜像实际上由一层一层的文件系统组成,这种层级的文件系统UnionFS。
bootfs(boot file system)主要包含bootloader和kernel, bootloader主要是引导加载kernel, Linux刚启动时会加载bootfs文件系统,在Docker镜像的最底层是bootfs。这一层与我们典型的Linux/Unix系统是一样的,包含boot加载器和内核。当boot加载完成之后整个内核就都在内存中了,此时内存的使用权已由bootfs转交给内核,此时系统也会卸载bootfs。
rootfs (root file system) ,在bootfs之上。包含的就是典型 Linux 系统中的 /dev, /proc, /bin, /etc 等标准目录和文件。rootfs就是各种不同的操作系统发行版,比如Ubuntu,Centos等等。

平时我们安装进虚拟机的CentOS都是好几个G,为什么docker这里才200M??

对于一个精简的OS,rootfs可以很小,只需要包括最基本的命令、工具和程序库就可以了,因为底层直接用Host的kernel,自己只需要提供 rootfs 就行了。由此可见对于不同的linux发行版, bootfs基本是一致的, rootfs会有差别, 因此不同的发行版可以公用bootfs。
- 分层的镜像
以我们的pull为例,在下载的过程中我们可以看到docker的镜像好像是在一层一层的在下载

- 为什么 Docker 镜像要采用这种分层结构呢
最大的一个好处就是 - 共享资源
比如:有多个镜像都从相同的 base 镜像构建而来,那么宿主机只需在磁盘上保存一份base镜像,
同时内存中也只需加载一份 base 镜像,就可以为所有容器服务了。而且镜像的每一层都可以被共享。
4.2 特点
Docker镜像都是只读的
当容器启动时,一个新的可写层被加载到镜像的顶部。
这一层通常被称作“容器层”,“容器层”之下的都叫“镜像层”。
4.3 Docker镜像commit操作补充
1 | docker commit提交容器副本使之成为一个新的镜像 |
案例演示
1、从Hub上下载tomcat镜像到本地并成功运行


docker run -it -p 8080:8080 tomcat
1 | -p 主机端口:docker容器端口 |

2、故意删除上一步镜像生产tomcat容器的文档


3、也即当前的tomcat运行实例是一个没有文档内容的容器,以它为模板commit一个没有doc的tomcat新镜像atguigu/tomcat02

4、启动我们的新镜像并和原来的对比
启动atguigu/tomcat02,它没有docs

新启动原来的tomcat,它有docs

5. Docker容器数据卷
5.1 是什么
一句话:有点类似我们Redis里面的rdb和aof文件
1 |
|
5.2 能干嘛
容器的持久化
容器间继承+共享数据
1 |
|
5.3 数据卷(容器内添加)
5.3.1 直接命令添加
命令
docker run -it -v /宿主机目录:/容器内目录 centos /bin/bash

查看数据卷是否挂载成功
docker inspect 容器ID

容器和宿主机之间数据共享

容器停止退出后,主机修改后数据是否同步

命令(带权限)
docker run -it -v /宿主机绝对路径目录:/容器内目录:ro 镜像名

5.3.2 DockerFile添加
1、根目录下新建mydocker文件夹并进入
2、可在Dockerfile中使用VOLUME指令来给镜像添加一个或多个数据卷
1 | VOLUME["/dataVolumeContainer","/dataVolumeContainer2","/dataVolumeContainer3"] |
3、File构建

1 | # volume test |
4、build后生成镜像(获得一个新镜像zzyy/centos)

5、run容器

6、通过上述步骤,容器内的卷目录地址已经知道对应的主机目录地址哪??


7、主机对应默认地址

5.3.3 备注
Docker挂载主机目录Docker访问出现cannot open directory .: Permission denied
解决办法:在挂载目录后多加一个–privileged=true参数即可
5.4 数据卷容器
5.4.1 是什么
命名的容器挂载数据卷,其它容器通过挂载这个(父容器)实现数据共享,挂载数据卷的容器,称之为数据卷容器
5.4.2 总体介绍
以上一步新建的镜像zzyy/centos为模板并运行容器dc01/dc02/dc03
它们已经具有容器卷
/dataVolumeContainer1
/dataVolumeContainer2
5.4.3 容器间传递共享(–volumes-from)
1、先启动一个父容器dc01(在dataVolumeContainer2新增内容)

2、dc02/dc03继承自dc01
–volumes-from
1 | docker run -it --name dc02 --volumes-from dc01 zzyy/centos |

3、回到dc01可以看到02/03各自添加的都能共享了

4、删除dc01,dc02修改后dc03可否访问

5、删除dc02后dc03可否访问

6、新建dc04继承dc03后再删除dc03

结论:容器之间配置信息的传递,数据卷的生命周期一直持续到没有容器使用它为止
注意事项
–privileged=true
Docker挂载主机目录访问如果出现cannot open directory .: Permission denied
解决办法:在挂载目录后多加一个–privileged=true参数即可
如果是CentOS7安全模块会比之前系统版本加强,不安全的会先禁止,所以目录挂载的情况被默认为不安全的行为,
在SELinux里面挂载目录被禁止掉了额,如果要开启,我们一般使用–privileged=true命令,扩大容器的权限解决挂载目录没有权限的问题,也即使用该参数,container内的root拥有真正的root权限,否则,container内的root只是外部的一个普通用户权限。

6. DockerFile解析
6.1 是什么
Dockerfile是用来构建Docker镜像的构建文件,是由一系列命令和参数构成的脚本。
构建三步骤
编写Dockerfile文件
docker build
docker run
文件什么样???
以我们熟悉的CentOS为例 — https://hub.docker.com/_/centos/


6.2 DockerFile构建过程解析
Dockerfile内容基础知识
1:每条保留字指令都必须为大写字母且后面要跟随至少一个参数
2:指令按照从上到下,顺序执行
3:#表示注释
4:每条指令都会创建一个新的镜像层,并对镜像进行提交
Docker执行Dockerfile的大致流程
(1)docker从基础镜像运行一个容器
(2)执行一条指令并对容器作出修改
(3)执行类似docker commit的操作提交一个新的镜像层
(4)docker再基于刚提交的镜像运行一个新容器
(5)执行dockerfile中的下一条指令直到所有指令都执行完成
小总结
从应用软件的角度来看,Dockerfile、Docker镜像与Docker容器分别代表软件的三个不同阶段,
- Dockerfile是软件的原材料
- Docker镜像是软件的交付品
- Docker容器则可以认为是软件的运行态。
Dockerfile面向开发,Docker镜像成为交付标准,Docker容器则涉及部署与运维,三者缺一不可,合力充当Docker体系的基石。

1 Dockerfile,需要定义一个Dockerfile,Dockerfile定义了进程需要的一切东西。Dockerfile涉及的内容包括执行代码或者是文件、环境变量、依赖包、运行时环境、动态链接库、操作系统的发行版、服务进程和内核进程(当应用进程需要和系统服务和内核进程打交道,这时需要考虑如何设计namespace的权限控制)等等;
2 Docker镜像,在用Dockerfile定义一个文件之后,docker build时会产生一个Docker镜像,当运行 Docker镜像时,会真正开始提供服务;
3 Docker容器,容器是直接提供服务的。
6.3 DockerFile体系结构(保留字指令)
1 | FROM 基础镜像,当前新镜像是基于哪个镜像的 |


小总结

6.4 案例
6.4.1 Base镜像(scratch)
Docker Hub 中 99% 的镜像都是通过在 base 镜像中安装和配置需要的软件构建出来的

6.4.2自定义镜像mycentos
1、编写
Hub默认CentOS镜像什么情况

1 | 自定义mycentos目的使我们自己的镜像具备如下: |
准备编写DockerFile文件

myCentOS内容DockerFile

1 | FROM centos |
2、构建
docker build -t 新镜像名字:TAG .
1 | 会看到 docker build 命令最后有一个 . . 表示当前目录 |

3、运行
docker run -it 新镜像名字:TAG
可以看到,我们自己的新镜像已经支持vim/ifconfig命令,扩展成功了。

4、列出镜像的变更历史
docker history 镜像名
6.4.3CMD/ENTRYPOINT 镜像案例
都是指定一个容器启动时要运行的命令
- CMD
Dockerfile 中可以有多个 CMD 指令,但只有最后一个生效,CMD 会被 docker run 之后的参数替换
1 | Case |
- ENTRYPOINT
docker run 之后的参数会被当做参数传递给 ENTRYPOINT,之后形成新的命令组合

制作CMD版可以查询IP信息的容器
1 | FROM centos |

crul命令解释
1 |
|
问题:如果我们希望显示 HTTP 头信息,就需要加上 -i 参数

WHY
1 |
|
制作ENTROYPOINT版查询IP信息的容器
1 | FROM centos |

6.4.4自定义镜像Tomcat9
1、mkdir -p /zzyyuse/mydockerfile/tomcat9
2、在上述目录下touch c.txt
3、将jdk和tomcat安装的压缩包拷贝进上一步目录
apache-tomcat-9.0.8.tar.gz

jdk-8u171-linux-x64.tar.gz

4、在/zzyyuse/mydockerfile/tomcat9目录下新建Dockerfile文件
1 | FROM centos |
目录内容

5、构建

构建完成

6、run
1 | docker run -d -p 9080:8080 --name myt9 -v /zzyyuse/mydockerfile/tomcat9/test:/usr/local/apache-tomcat-9.0.8/webapps/test -v /zzyyuse/mydockerfile/tomcat9/tomcat9logs/:/usr/local/apache-tomcat-9.0.8/logs --privileged=true zzyytomcat9 |
备注
1 | Docker挂载主机目录Docker访问出现cannot open directory .: Permission denied |
7、验证

8、 结合前述的容器卷将测试的web服务test发布
总体概述

web.xml
1 |
|
a.jsp
1 | <%@ page language="java" contentType="text/html; charset=UTF-8" pageEncoding="UTF-8"%> |
测试



6.5 小总结

7. Docker常用安装
7.1 总体步骤
- 搜索镜像
- 拉取镜像
- 查看镜像
- 启动镜像
- 停止容器
- 移除容器
7.2 安装tomcat
docker hub上面查找tomcat镜像
docker search tomcat

从docker hub上拉取tomcat镜像到本地
docker pull tomcat
1官网命令

2拉取完成


docker images查看是否有拉取到的tomcat

使用tomcat镜像创建容器(也叫运行镜像)
docker run -it -p 8080:8080 tomcat
7.3 安装mysql
docker hub上面查找mysql镜像

从docker hub上(阿里云加速器)拉取mysql镜像到本地标签为5.6

使用mysql5.6镜像创建容器(也叫运行镜像)
使用mysql镜像
1 | docker run -p 12345:3306 --name mysql -v /zzyyuse/mysql/conf:/etc/mysql/conf.d -v /zzyyuse/mysql/logs:/logs -v /zzyyuse/mysql/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.6 |

外部Win10也来连接运行在dokcer上的mysql服务

数据备份小测试(可以不做)
1 | docker exec myql服务容器ID sh -c ' exec mysqldump --all-databases -uroot -p"123456" ' > /zzyyuse/all-databases.sql |
7.4 安装redis
从docker hub上(阿里云加速器)拉取redis镜像到本地标签为3.2

使用redis3.2镜像创建容器(也叫运行镜像)
使用镜像
1 | docker run -p 6379:6379 -v /zzyyuse/myredis/data:/data -v /zzyyuse/myredis/conf/redis.conf:/usr/local/etc/redis/redis.conf -d redis:3.2 redis-server /usr/local/etc/redis/redis.conf --appendonly yes |
在主机/zzyyuse/myredis/conf/redis.conf目录下新建redis.conf文件
vim /zzyyuse/myredis/conf/redis.conf/redis.conf(这只是修改的内容)
1 |
|
测试redis-cli连接上来
docker exec -it 运行着Rediis服务的容器ID redis-cli

测试持久化文件生成

8. 本地镜像发布到阿里云
8.1 本地镜像发布到阿里云流程

8.2 镜像的生成方法
前面的DockerFile
从容器创建一个新的镜像
docker commit [OPTIONS] 容器ID [REPOSITORY[:TAG]]
1 | OPTIONS说明: |

8.3 将本地镜像推送到阿里云
1、本地镜像素材原型

2、阿里云开发者平台

3、创建仓库镜像

4、将镜像推送到registry


5、公有云可以查询到

6、查看详情

8.4 将阿里云上的镜像下载到本地
下载到本地







