docker_quickstart
简介
是什么
为什么会出现docker
一款产品从开发到上线,从操作系统,到运行环境,再到应用配置。作为开发+运维之间的协作我们需要关心很多东西,这也是很多互联网公司都不得不面对的问题,特别是各种版本的迭代之后,不同版本环境的兼容,对运维人员都是考验。
docker之所以发展如此迅速,也是因为它对此给出了一个标准化的解决方案。环境配置如此麻烦,换一台机器,就要重来一次,费力费时。很多人想到,能不能从根本上解决问题,软件可以带环境安装?也就是说,安装的时候,把原始环境一模一样地复制过来。开发人员利用docker可以消除协作编码时“在我的机器上可正常工作”的问题。
之前在服务器配置一个应用的运行环境,要安装各种软件,就拿一个电商项目的环境来说吧,Java/Tomcat/MySQL/JDBC驱动包等。安装和配置这些东西有多麻烦就不说了,它还不能跨平台。假如我们是在 Windows 上安装的这些环境,到了 Linux 又得重新装。况且就算不跨操作系统,换另一台同样操作系统的服务器,要移植应用也是非常麻烦的。
传统上认为,软件编码开发/测试结束后,所产出的成果即是程序或是能够编译执行的二进制字节码等(java为例)。而为了让这些程序可以顺利执行,开发团队也得准备完整的部署文件,让运维运团队得以部署应用程式,开发需要清楚的告诉运维部署团队,用的全部配置文件+所有软件环境。不过,即便如此,仍然常常发生部署失败的状况。docker镜像的设计,使得docker得以打破过去「程序即应用」的观念。透过镜像(images)将作业系统核心除外,运作应用程式所需要的系统环境,由下而上打包,达到应用程式跨平台间的无缝接轨运作。
docker理念
docker是基于Go语言实现的云开源项目。
docker的主要目标是“Build,Ship and Run Any App,Anywhere”(在任何地方构建、发布并运行任何应用),也就是通过对应用组件的封装、分发、部署、运行等生命周期的管理,使用户的APP(可以是一个WEB应用或数据库应用等等)及其运行环境能够做到“一次封装,到处运行”。
Linux 容器工作的出现就解决了这样一个问题,而 docker 就是在它的基础上发展过来的。将应用运行在 docker 容器上面,而 docker 容器在任何操作系统上都是一致的,这就实现了跨平台、跨服务器。只需要一次配置好环境,换到别的机子上就可以一键部署好,大大简化了操作。
docker基本组成
docker client 就是跟docker沟通的命令终端窗口 docker run 镜像, 要是没有本地没有镜像从仓库里拉一个镜像再生成容器再运行。 3.1. 镜像 docker 镜像(Image)就是一个只读的模板。镜像可以用来创建 docker 容器,一个镜像可以创建很多容器。
3.2. 容器 docker利用容器(Container)独立运行一个或一组应用。容器是用镜像创建的运行实例。它可以被启动、开始、停止、删除。可以把容器看做是一个简易版的 Linux 环境(包括root用户权限、进程空间、用户空间和网络空间等)和运行在其中的应用程序。
容器的定义和镜像几乎一模一样,也是一堆层的统一视角,唯一区别在于容器的最上面那一层是可读可写的。
容器是完全使用沙箱机制,相互之间不会有任何接口,更重要的是容器性能开销极低。
3.3. 仓库 仓库(Repository)是集中存放镜像文件的场所。 仓库(Repository)和仓库注册服务器(Registry)是有区别的。仓库注册服务器上往往存放着多个仓库,每个仓库中又包含了多个镜像,每个镜像有不同的标签(tag)。
仓库分为公开仓库(Public)和私有仓库(Private)两种形式。最大的公开仓库是 docker Hub,存放了数量庞大的镜像供用户下载。国内的公开仓库包括阿里云 、网易云等。
3.4. 总结 docker 本身是一个容器运行载体或称之为管理引擎。我们把应用程序和配置依赖打包好形成一个可交付的运行环境,这个打包好的运行环境就是image镜像文件。只有通过这个镜像文件才能生成 docker 容器。image 文件可以看作是容器的模板。docker 根据 image 文件生成容器的实例。同一个 image 文件,可以生成多个同时运行的容器实例。
- 一个容器运行一种服务,当我们需要的时候,就可以通过docker客户端创建一个对应的运行实例,也就是我们的容器
- 至于仓库,就是放了一堆镜像的地方,我们可以把镜像发布到仓库中,需要的时候从仓库中拉下来就可以了。
docker核心概念
docker镜像(Images)
Docker 镜像是用于创建 Docker 容器的 模板。
docker容器(Container)
容器是独立运行的一个或一组应用。
docker客户端(Client)
客户端通过命令行或者其他工具使用 Docker API 与 Docker 的守护进程通信
docker主机(Host)
一个物理或者虚拟的机器用于执行 Docker 守护进程和容器。
docker仓库(Registry)
Docker 仓库用来保存镜像,可以理解 为代码控制中的代码仓库。Docker Hub 提供了庞大的镜像集合供使用。
使用docker的步骤
- 安装Docker
- 去Docker仓库找到这个软件对应的镜像
- 使用Docker运行这个镜像,这个镜像就会生成一个Docker容器
- 对容器的启动停止就是对软件的启动停止;
一句话
docker是解决了运行环境和配置问题的软件容器平台,方便做持续集成并有助于整体发布的容器虚拟化工作。 标准化的集装与隔离, 类似于简单的虚拟机。
能干嘛
之前的虚拟化工作
虚拟机(virtual machine)就是带环境安装的一种解决方案。
它可以在一种操作系统里面运行另一种操作系统,比如在Windows 系统里面运行Linux 系统。虚拟机连硬件都模拟,应用程序对此毫无感知,因为虚拟机看上去跟真实系统一模一样,而对于底层系统来说,虚拟机就是一个普通文件,不需要了就删掉,对其他部分毫无影响。这类虚拟机完美的运行了另一套系统,能够使应用程序,操作系统和硬件三者之间的逻辑不变。
虚拟机缺点:1.资源占用多; 2.冗余步骤多; 3.启动慢
容器化虚拟工作
由于前面虚拟机存在这些缺点,Linux 发展出了另一种虚拟化工作:Linux 容器(Linux Containers,缩写为 LXC)。
Linux 容器不是模拟一个完整的操作系统,而是对进程进行隔离。有了容器,就可以将软件运行所需的所有资源打包到一个隔离的容器中。容器与虚拟机不同,不需要捆绑一整套操作系统,只需要软件工作所需的库资源和设置。系统因此而变得高效轻量并保证部署在任何环境中的软件都能始终如一地运行。
docker 和传统虚拟化方式的不同之处:
- 传统虚拟机工作是虚拟出一套硬件后,在其上运行一个完整操作系统,在该系统上再运行所需应用进程;
- 容器内的应用进程直接运行于宿主机的内核,容器内没有自己的内核,而且也没有进行硬件虚拟。因此容器要比传统虚拟机更为轻便。
- 每个容器之间互相隔离,每个容器有自己的文件系统 ,容器之间进程不会相互影响,能区分计算资源。
开发自运维(DevOps)
-
更快捷的应用交付和部署 传统的应用开发完成后,需要提供一堆安装程序和配置说明文档,安装部署后需根据配置文档进行繁杂的配置才能正常运行。docker化之后只需要交付少量容器镜像文件,在正式生产环境加载镜像并运行即可,应用安装配置在镜像里已经内置好,大大节省部署配置和测试验证时间。
-
更便捷的升级和扩缩容 随着微服务架构和docker的发展,大量的应用会通过微服务方式架构,应用的开发构建将变成搭乐高积木一样,每个docker容器将变成一块“积木”,应用的升级将变得非常容易。当现有的容器不足以支撑业务处理时,可通过镜像运行新的容器进行快速扩容,使应用系统的扩容从原先的天级变成分钟级甚至秒级。
-
更简单的系统运维 应用容器化运行后,生产环境运行的应用可与开发、测试环境的应用高度一致,容器会将应用程序相关的环境和状态完全封装起来,不会因为底层基础架构和操作系统的不一致性给应用带来影响,产生新的BUG。当出现程序异常时,也可以通过测试环境的相同容器进行快速定位和修复。
-
更高效的计算资源利用 docker是内核级虚拟化,其不像传统的虚拟化工作一样需要额外的Hypervisor支持,所以在一台物理机上可以运行很多个容器实例,可大大提升物理服务器的CPU和内存的利用率。
Hypervisor,又称虚拟机监视器(英语:virtual machine monitor,缩写为 VMM),是用来建立与执行虚拟机器的软件、固件或硬件。 被Hypervisor用来执行一个或多个虚拟机器的电脑称为主体机器(host machine),这些虚拟机器则称为客体机器(guest machine)。hypervisor提供虚拟的作业平台来执行客体操作系统(guest operating systems),负责管理其他客体操作系统的执行阶段;这些客体操作系统,共同分享虚拟化后的硬件资源。
企业级
新浪
美团
蘑菇街
云工作会是一个趋势,之前在服务器上的应用很多都在往云上迁移
今天的优势会被明天的趋势所取代,云端,客户端
去哪下
学工作,必登官网
- 官网 docker官网 docker中文网站
- 仓库 docker Hub官网
安装
安装步骤
-
去官网下载docker.dmg 阿里云的mac版本的docker.dmg下载地址
-
下载安装好后根据电脑配置做一些资源设置,可以先使用默认值
-
配置镜像加速 阿里云容器镜像服务 3.1. 获取加速器地址
阿里云 { “registry-mirrors”: [“https://xxxx.mirror.aliyuncs.com”] } 3.2. 在docker中配置
|
|
3.3. 检验
|
|
表示配置加速器ok
|
|
表示docker client和docker server的交互ok
|
|
表示本地拉取和运行镜像ok
docker run 干了什么
在linux系统安装docker
|
|
如果是在linux虚拟机上安装docker需要注意网络配置
桥接网络=选好网卡(区分宿主机有线和无线)==接入网线;
设置好网络以后使用命令重启虚拟机的网络
|
|
查看linux的ip地址
|
|
使用客户端(smartty)连接linux;
底层原理
docker是怎么工作的
docker是一个Client-Server结构的系统,docker守护进程运行在主机上, 然后通过Socket连接从客户端访问,守护进程从客户端接受命令并管理运行在主机上的容器。 容器,是一个运行时环境,就是我们前面说到的集装箱。
为什么docker比VM快
- docker有着比虚拟机更少的抽象层。由于docker不需要Hypervisor实现硬件资源虚拟化,运行在docker容器上的程序直接使用的都是实际物理机的硬件资源。因此在CPU、内存利用率上docker将会在效率上有明显优势。
- docker利用的是宿主机的内核,而不需要Guest OS。因此,当新建一个容器时,docker不需要和虚拟机一样重新加载一个操作系统内核。从而避免引寻、加载操作系统内核这个个比较费时费资源的过程,当新建一个虚拟机时,虚拟机软件需要加载Guest OS,这个新建过程是分钟级别的。而docker由于直接利用宿主机的操作系统,则省略了这个过程,因此新建一个docker容器只需要几秒钟。
常用命令
帮助命令
|
|
镜像命令
- 列出本地主机上的镜像
|
|
- 搜索某个镜像
|
|
- 拉取镜像
|
|
- 删除镜像
|
|
容器命令
- 新建并启动容器
|
|
- 列出所有当前正在运行的容器
|
|
- 退出容器 3.1. 停止容器并退出
|
|
3.2. 不停止容器退出 快捷键ctrl+P+Q
- 启动容器
|
|
- 重启容器
|
|
- 停止容器
|
|
- 强制停止容器
|
|
- 删除容器
|
|
- 启动守护式容器
|
|
注意:此时使用docker ps -a 进行查看, 会发现容器已经退出。很重要的一点:docker容器后台运行,就必须有一个前台进程.容器运行的命令如果不是那些一直挂起的命令(比如运行top,tail),就是会自动退出的。
这个是docker的机制问题,比如你的web容器,我们以nginx为例,正常情况下,我们配置启动服务只需要启动响应的service即可。例如 service nginx start 但是,这样做,nginx为后台进程模式运行,就导致docker前台没有运行的应用,这样的容器后台启动后,会立即自杀因为他觉得他没事可做了.所以,最佳的解决方案是,将你要运行的程序以前台进程的形式运行。
- 查看容器日志
|
|
- 查看容器内运行的进程
|
|
- 查看容器内部细节
|
|
- 进入正在运行的容器并以命令行交互
|
|
- 从容器内拷贝文件到主机上
|
|
小总结
|
|
镜像
镜像是什么
-
UnionFS(联合文件系统) Union文件系统(UnionFS)是一种分层、轻量级并且高性能的文件系统,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem)。Union 文件系统是 docker 镜像的基础。镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
-
docker镜像加载原理 docker的镜像实际上由一层一层的文件系统组成,这种层级的文件系统就是UnionFS。
bootfs(boot file system)主要包含bootloader和kernel, bootloader主要是引导加载kernel, Linux刚启动时会加载bootfs文件系统,在docker镜像的最底层也是bootfs。这一层与我们典型的Linux/Unix系统是一样的,包含boot加载器和内核。当boot加载完成之后整个内核就都在内存中了,此时内存的使用权已由bootfs转交给内核,此时系统也会卸载bootfs。
rootfs (root file system) ,在bootfs之上。包含的就是典型 Linux 系统中的 /dev, /proc, /bin, /etc 等标准目录和文件。rootfs就是各种不同的操作系统发行版,比如Ubuntu,Centos等等。
平时我们安装进虚拟机的CentOS都是好几个G,为什么docker这里才200M?
对于一个精简的OS,rootfs可以很小,只需要包括最基本的命令、工具和程序库就可以了,因为底层直接用Host的kernel,自己只需要提供 rootfs 就行了。由此可见对于不同的linux发行版, bootfs基本是一致的, rootfs会有差别, 因此不同的发行版可以公用bootfs。
-
分层的镜像 pull的时候就能看到docker的镜像在一层一层的下载。
-
为什么docker镜像要采用这种分层结构 最大的一个好处就是 - 共享资源 比如:有多个镜像都从相同的 base 镜像构建而来,那么宿主机只需在磁盘上保存一份base镜像,同时内存中也只需加载一份base镜像,就可以为所有容器服务了。而且镜像的每一层都可以被共享。
容器层&镜像层
docker镜像都是只读的,当容器启动时,一个新的可写层就被加载到镜像的顶部。这一层通常被称作“容器层”,“容器层”之下的都叫“镜像层”。
容器commit新镜像
docker commit提交容器副本使之成为一个新的镜像。
|
|
Demo:
hub上新版本的tomcat webapps都是空的
|
|
容器数据卷
是什么
有点类似Redis里面的rdb和aof文件,用来做数据持久化。
卷就是目录或文件,存在于一个或多个容器中,由docker挂载到容器,但不属于联合文件系统,因此能够绕过Union File System提供一些用于持续存储或共享数据的特性:
卷的设计目的就是数据的持久化,完全独立于容器的生存周期,因此docker不会在容器删除时删除其挂载的数据卷
特点: 1:数据卷可在容器之间共享或重用数据 2:卷中的更改可以直接生效 3:数据卷中的更改不会包含在镜像的更新中 4:数据卷的生命周期一直持续到没有容器使用它为止
添加数据卷
- 直接命令添加
|
|
- 使用dockerFile添加 2.1 可以在dockerFile中使用VOLUMN指令来个镜像添加一个或多个数据卷
|
|
出于可移植和分享的考虑,用-v 主机目录:容器目录这种方法不能够直接在dockerfile中实现。由于宿主机目录是依赖于特定宿主机的,并不能够保证在所有的宿主机上都存在这样的特定目录。
2.2 构建dockerFile dockerFile
|
|
2.3 docker build build后生成一个新的镜像
|
|
2.4 run容器查看数据卷在宿主机上的默认位置
此时如果尝试进入host上对应的目录会出错,提示目录不存在:
解决办法
在Mac OS下,进入以下目录
~/Library/Containers/com.docker.docker/Data/vms/0/
可以看到目录下有一个tty设备,screen连接进去,host对应的volume可以在这个linux实例中找到,进入该目录,其中的文件与container中的/opt/graphite/conf目录下的内容一致: 参考【容器】docker之Mac下host与container之间Volume映射问题
然而Source这个地址在本机中并不存在,在更新后的docker中应当使用:
1
$ screen ~/Library/Containers/com.docker.docker/Data/vms/0/tty
进去之后默认是空白页面,需要按下Enter:
1 2 3 4 5 6 7 8 9 10 11
linuxkit-025000000001:/# pwd / linuxkit-025000000001:/# ls EFI dev lib proc sendtohost usr bin etc media root srv var boot home mnt run sys containers init opt sbin tmp linuxkit-025000000001:/# ls /var/lib/docker/volumes/83af3ea2681490a5804183e427da 3aa50241e31d1a39145b082b5aeca945a6f7/_data 50x.html index.html linuxkit-025000000001:/#
如果需要干掉这个screen,按ctrl+a + k,最后按y确认即可以kill掉这个screen了; 如果只是暂时退出这个screen,下次再进去,使用ctrl+a + d,而如果需要再次进入的时候应当使用screen -dr,否则使用
screen ~/Library/Containers/com.docker.docker/Data/vms/0/tty
再进去会是一片乱码(+_+),将这个screen干掉即可
2.5 数据卷容器 命名的容器挂载数据卷,其它容器通过挂载这个(父容器)实现数据共享,挂载数据卷的容器,称之为数据卷容器 dc01挂在好数据卷, dc02 继承 dc01
|
|
容器之间配置信息的传递,数据卷的生命周期一直持续到没有容器使用它为止。
dockerFile
dockerFile是用来构建docker镜像的构建文件,是由一系列命令和参数构成的脚本。 构建步骤:编写dockerFile脚本 -> docker build -> docker run
dockerFile构建过程解析
- 语法 a. 每条保留字指令都必须为大写字母且后面要跟随至少一个参数 b. 指令从上到下顺序执行 c. # 表示注释 d. 每条指令都会创建一个新的镜像层,并对镜像进行提交
- 大致流程 a. docker从基础镜像运行一个容器 b. 执行一条指令并对容器作出修改 c. 执行类似docker commit的操作提交一个新的镜像层 d. docker再基于刚提交的镜像运行一个新容器 e. 执行dockerfile中的下一条指令直到所有指令都执行完成
从应用软件的角度来看,dockerfile、docker镜像与docker容器分别代表软件的三个不同阶段,
- dockerfile是软件的原材料
- docker镜像是软件的交付品
- docker容器则可以认为是软件的运行态。
dockerfile面向开发,docker镜像成为交付标准,docker容器则涉及部署与运维,三者缺一不可,合力充当docker体系的基石。
-
dockerfile,需要定义一个dockerfile,dockerfile定义了进程需要的一切东西。dockerfile涉及的内容包括执行代码或者是文件、环境变量、依赖包、运行时环境、动态链接库、操作系统的发行版、服务进程和内核进程(当应用进程需要和系统服务和内核进程打交道,这时需要考虑如何设计namespace的权限控制)等等;
-
docker镜像,在用dockerfile定义一个文件之后,docker build时会产生一个docker镜像,当运行 docker镜像时,会真正开始提供服务;
-
docker容器,容器是直接提供服务的。
保留字
|
|
构建自定义tomcat镜像
如果本地没有centos镜像需要先docker pull centos 到本地。
- 创建镜像构建过程中上下文环境目录
|
|
- 将jdk和tomcat安装压缩包拷贝进上下文目录中, 创建一个c.txt文件
|
|
- 编写dockerfile文件
|
|
文件内容如下:
|
|
- build新镜像
|
|
可以看到一条指令执行完就构建好了一个镜像,直到所有指令都执行完毕,最终的镜像才构建成功
- 检验
|
|
docker挂载主机目录docker访问出现cannot open directory .: Permission denied 解决办法:在挂载目录后多加一个–privileged=true参数即可
- 将web服务test发布,第5步已经配置好了容器数据卷,只需要将web工程目录放在宿主机test目录下即可
6.1 新建web.xml
|
|
6.2 新建a.jsp
|
|
- 重启容器
|
|
-
访问a.jsp
-
查看宿主机 logs下日志
|
|
小总结
常用安装
总体步骤 搜索镜像(search)->拉取镜像(pull)->查看镜像(images)->运行镜像(run)->停止容器(stop)->移除容器(rm)
下面主要记下常用软件需要挂载的目录
- tomcat
|
|
- mysql
|
|
此时外部就可以远程连接运行在docker上的mysql服务
- redis
|
|
客户端连接
|
|
进入到~/mysql/data目录查看是否有持久化文件(aof、rdb)生成。
本地镜像发布到阿里云
- push 流程
-
镜像的生成方法 a. 从dockerfile build b. 从容器 commit
-
将本地镜像推送到registry 3.1. 创建镜像仓库 命名空间/仓库名称
后面选择本地仓库
3.2.
获取registry地址
推送和查看 参考操作指南
4. 推送
- 拉取
|
|
- 公有云上查看
search页面