索鸟网

  1. 首页
  2. 利用Swarmkit构建Windows/Linux混合Docker集群

利用Swarmkit构建Windows/Linux混合Docker集群


在很多公司都同时存在Windows+Linux两种操作系统,在Linux上跑Docker很方便各种资料文档齐全,但是在Windows上跑Docker相对比较少,同时也受到一些限制,如Windows上docker网络问题。下面就介绍下利用Windows IIS跑Web应用,同时使用Haproxy作为负载均衡器。


方案采用Windows原生container、docker swarmkit、负载均衡器采用Haproxy+Etcd+Confd

流程说明:

  1. 开发及运维修改dockerfile及代码提交至SVN服务器,同时触发SVN钩子进行镜像构建(Windows项目在Windows构建、Linux项目在Linux构建),并push至我们的Docker私有仓库


  2. 推送镜像之后,钩子同时触发Docker Swarmkit集群的leader服务器进行服务创建或者更新


  3. 启动IIS容器,需要提前启动haproxy+etcd+confd容器,以便服务注册


Windows Docker Swarm初始化集群集群,不可以只使用docker swarm init,而不指定IP及端口,否则就会一直卡在初始化的进程下,正确的姿势如下:

docker swarm init --advertise-addr 192.168.2.20:2377  --listen-addr 192.168.2.20:2377

新建overlay网络用于容器之间互联

docker network create -d overlay myspace

如果存在测试环境/正式环境,就需要在不同的环境使用不同的overlay网络,同时指定DNS


说明事项:

1.docker swarm的endpoint-mode必须为dnsrr(--endpoint-mode=dnsrr),主要为Windows暂时不支持路由VIP模式

docker service create --name=iis --replicas=1 --network=myspace  --endpoint-mode=dnsrr --constraint "Node.Platform.OS==windows" microsoft/iis


2.启动IIS服务时必须要指定服务器的OS为windows(--constraint "Node.Platform.OS==windows"),而Linux服务指向Linux


3.服务名称不能包含点(.),否则可能报Error response from daemon: rpc error: code = 3 desc = name must be valid as a DNS name component


4.Windows Docker机器一定要打开相关防火墙接口

netsh advfirewall firewall add rule name="swm 2377" dir=in action=allow protocol=TCP localport=2377 
netsh advfirewall firewall add rule name="swm 7946" dir=in action=allow protocol=TCP localport=7946
netsh advfirewall firewall add rule name="swm 7946udp" dir=in action=allow protocol=UDP localport=7946
netsh advfirewall firewall add rule name="swm 4789" dir=in action=allow protocol=TCP localport=4789
netsh advfirewall firewall add rule name="swm 4789udp" dir=in action=allow protocol=UDP localport=4789


5.Windows退出swarm集群后再加入swarm集群,将无法再进行工作,原因是HNS无法加载新集群的网络信息,暂未找到处理办法,找到处理办法的同学留言回复下


6.自动注册: 在机器启动的时候,通过curl向etcd服务器添加配置信息

原版:
for /f "tokens=2* delims==:" %%a in ("ipconfig^|find /i "10.0"") do ( 
curl.exe -XPUT http://haproxy:2379/v2/keys/web/%site_name%/%computername% -d value="%%a:80"
)
BUG修复版:主要是解决主机重复
for /f "tokens=2* delims==:" %%a in ("ipconfig^|find /i "10.0"") do ( 
for /f "tokens=3,4 delims=." %%b in ("%%a") do curl.exe -XPUT http://haproxy:2379/v2/keys/web/%site_name%/%%b%%c -d value="%%a:80"
)

7.服务回收: 由于服务注册是利用容器启动进行注册,当容器删除后服务不自动回收,这里利用监听Haproxy状态对DOWN 5分中后的容器进行自动回收

for a in `echo "show stat" | socat stdio unix-connect:/var/run/haproxy.sock |grep -v "BACKEND"|awk -F, "/DOWN/{if ( $25 >300 ) print $1,$2}"|sed "s#_cluster #/#g"`;do curl -XDELETE http://127.0.0.1:2379/v2/keys/web/$a;done

8.如果采用hyper-v Container,则Windows Server 2016数据中心版支持不限量容器运行,但是Windows Server 2016标准版只支持2个容器。但是对于上面的操作系统层的容器则无限量支持。


9. IIS Dockerfile

FROM microsoft/iis
#install ASP.NET 4.5
RUN dism /online /enable-feature /all /featurename:NetFx4 /featurename:IIS-ApplicationInit /featurename:IIS-ASPNET45 /NoRestart
#enable windows eventlog
RUN powershell.exe -command Set-ItemProperty HKLM:\SYSTEM\CurrentControlSet\Control\WMI\Autologger\EventLog-Application Start 1
ENTRYPOINT ["C:\\SetHostsAndStartMonitoring.cmd"]
RUN for %s in (TermService,SessionEnv,iphlpsvc,RemoteRegistry,WinHttpAutoProxySvc,SENS,WinRM,LanmanWorkstation,Winmgmt) do ( sc config %s start= disabled) && reg add "HKEY_LOCAL_MACHINE\SOFTWARE\Wow6432Node\Microsoft\InetStp\Configuration" /v "MaxWebConfigFileSizeInKB" /t reg_dword -d "0" /f && reg add "HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\InetStp\Configuration" /v "MaxWebConfigFileSizeInKB" /t reg_dword -d "0" /f
VOLUME ["c:/inetpub/logs/LogFiles"]
ADD curl.exe /windows/system32/curl.exe
ENV site_version 4
ENV site_name fengwan.blog.51cto.com
RUN /windows/system32/inetsrv/appcmd.exe delete site "Default Web Site/" && /windows/system32/inetsrv/appcmd.exe add apppool /name:"%site_name%"  /managedRuntimeVersion:""  /managedPipelineMode:Integrated -queueLength:65535 && /windows/system32/inetsrv/appcmd.exe add site /name:"%site_name%" /physicalPath:"c:\wwwroot\%site_name%" -serverAutoStart:true /bindings:http://%site_name%:80 && /windows/system32/inetsrv/appcmd.exe set site /site.name:"%site_name%" /[path="/"].applicationPool:"%site_name%"
ADD SetHostsAndStartMonitoring.cmd \SetHostsAndStartMonitoring.cmd
ADD webroot C:/wwwroot/fengwan.blog.51cto.com

SetHostsAndStartMonitoring.cmd

::服务注册
for /f "tokens=2* delims==:" %%a in ("ipconfig^|find /i "10.0"") do ( 
for /f "tokens=3,4 delims=." %%b in ("%%a") do curl.exe -XPUT http://haproxy:2379/v2/keys/web/%site_name%/%%b%%c -d value="%%a:80"
)
::启动IIS服务
c:\ServiceMonitor.exe w3svc


本文出自 “枫林晚” 博客,请务必保留此出处http://fengwan.blog.51cto.com/508652/1953048

docker

来源地址:http://fengwan.blog.51cto.com/508652/1953048 版权归作者所有!

相关教程

  • Rancher v1.2:Swarmkit的实现

    引言Rancher v1.2更新了之前对Swarm的支持,与Docker一样抛弃了就有的Swarm,选择支持Swarmkit。Swarmkit引擎非常轻量级,由于其内置早Docker Engine中,所以部署起来会非常方便。虽然目前Swarmkit引擎还在不断发展,而且bug也很多,但是它也有其擅长的使用场景,比如简单的CI/CD场景,它会非常灵活简洁。本文将带大家体验一下,Ra
  • 使用Docker swarm构建wordpress集群

       最近都在忙,久不更新博客了,今天更新下Docker swarm集群和集群容错测试:1、如下拓扑:2、环境说明:Master/nfs服务器:192.168.63.217 Worker:192.168.63.217 Worker:192.168.63.2163、创建一个nfs挂载目录,用于存放wordpress代码(63.217):[root@master&
  • 30个不可不知的容器技术工具和资源

    软件容器技术影响着从开发人员、测试人员、运维人员到分析人员的IT团队中的每一个人,它不像虚拟化一样只是系统管理员的工具。容器包的大小和完整性使得团队成员能够在几秒钟内部署完整的环境。容器是一个很好的工具,同时带来了一系列下游决策,包括使用何种标准、如何存储旧版本和部署镜像、如何在生产中管理这些镜像等等。但是,该如何正确的组装产品和服务,才能在环境中有效地构建、运行和管理容器?为了
  • 走进docker系列:开篇

    本人docker初学者,边学习边总结,一方面加深自己的理解,另一方面希望对其他想深入了解docker的同学有所帮助。 由于本人缺乏实战经验,错误在所难免,欢迎批评指正,谢谢。 包含的内容 本系列主要介绍三个github上的项目: moby、containerd、runc. 由于只介绍docker核心的东西,所以不会包含下面这些项目: compose:
  • Centos7上利用corosync+pacemaker+crmsh构建高可用集群

    一、高可用集群框架资源类型:    primitive(native):表示主资源    group:表示组资源,组资源里包含多个主资源    clone:表示克隆资源    master/slave:表示主从资源资源约束
  • Docker1.12+ Swarm

    Docker Swarm是一个用于创建Docker主机(运行Docker守护进程的服务器)集群的工具,使用Swarm操作集群,会使用户感觉就像是在一台主机上进行操作docker1.12集成了swarmkit, 使你可以不用安装额外的软件包, 使用简单的命令启动创建docker swarm集群。如果你在运行 Docker 1.12时,你就可以原生创建一个 Swarm 集群 
  • Docker镜像构建

    一、docker镜像构建1、环境准备环境准备IP 主机名 操作系统 192.168.56.11 linux-node1 centos7 注意:我这里使用的是centos7,如果是使用centos5或者centos6,需要升级操作系统内核,否则Docker的许多新功能都无法使用2、构建方式- 手动构建 - 自动构建,(通过Dockerfile方式)