中国领先的IT技术网站
|
|

开源PaaS方案(三)部署BOSH

BOSH是CloudFoundry提供的用来安装部署和升级CloudFoundry的自动化工具,可是说是CloudFoundry的一部分。总体来说,BOSH是Client/Server结构, BOSH客户端称作BOSH CLI,BOSH服务器端由BOSH Director,NATS,HealthMonitor等组件组成。

作者:Yudar来源:博客园|2015-04-24 10:07

沙龙活动 | 去哪儿、陌陌、ThoughtWorks在自动化运维中的实践!10.28不见不散!


BOSH是CloudFoundry提供的用来安装部署和升级CloudFoundry的自动化工具,可是说是CloudFoundry的一部分。总体来说,BOSH是Client/Server结构, BOSH客户端称作BOSH CLI,BOSH服务器端由BOSH Director,NATS,HealthMonitor等组件组成, 详见http://docs.cloudfoundry.org/bosh/

完整的BOSH是一个分布式的环境,本文为了简化BOSH的安装,将BOSH所有的组件安装在一个虚拟机上,BOSH的这种部署方式称为MicroBOSH。

将描述如果在CentOS环境下部署BOSH客户端和在OpenStack环境上部署MicroBOSH工具。

3.1 安装ruby环境

3.1.1 作者使用rbenv来管理ruby,所以安装rbenv和ruby 环境 (如果rbenv已经安装完成或者使用rvm可跳过此步)

  1. # rm -rf $HOME/.rbenv 
  2.  
  3. # git clone git://github.com/sstephenson/rbenv.git $HOME/.rbenv 
  4.  
  5. # git clone https://github.com/sstephenson/ruby-build.git $HOME/.rbenv/plugins/ruby-build 
  6.  
  7. # echo 'export PATH="$HOME/.rbenv/bin:$PATH"' >> ~/.bash_profile 
  8.  
  9. # source ~/.bash_profile 
  10.  
  11. # echo 'eval "$(rbenv init -)"' >> ~/.bash_profile 
  12.  
  13. # source ~/.bash_profile 
  14.  
  15. # rbenv install 1.9.3-p551 
  16.  
  17. # rbenv global 1.9.3-p551 

3.1.2 安装bosh客户端

  1. rbenv rehash 
  2.  
  3. gem update --system 
  4.  
  5. gem install rake 
  6.  
  7. gem install bosh_cli bosh_cli_plugin_micro --no-ri --no-rdoc 

3.1.3 为安置MicroBosh和CloudFoundry配置SecurityGroup

(1) 创建BOSH security group,允许bosh访问

  1. # nova secgroup-create bosh "security group for bosh access” 
  2.  
  3. # nova secgroup-add-rule bosh udp 53 53 0.0.0.0/0 
  4.  
  5. # nova secgroup-add-rule bosh tcp 4222 4222 0.0.0.0/0 
  6.  
  7. # nova secgroup-add-rule bosh udp 68 68 0.0.0.0/0 
  8.  
  9. # nova secgroup-add-rule bosh tcp 25555 25555 0.0.0.0/0 
  10.  
  11. # nova secgroup-add-group-rule bosh bosh tcp 1 65535 
  12.  
  13. # nova secgroup-add-rule bosh tcp 6868 6868 0.0.0.0/0 
  14.  
  15. # nova secgroup-add-rule bosh tcp 53 53 0.0.0.0/0 
  16.  
  17. # nova secgroup-add-rule bosh tcp 25250 25250 0.0.0.0/0 
  18.  
  19. # nova secgroup-add-rule bosh tcp 25777 25777 0.0.0.0/0 

(2) 创建security group, 允许SSH 访问

  1. # nova secgroup-create ssh "security group for ssh access” 
  2.  
  3. # nova secgroup-add-rule ssh icmp -1 -1 0.0.0.0/0 
  4.  
  5. # nova secgroup-add-rule ssh tcp 22 22 0.0.0.0/0 
  6.  
  7. # nova secgroup-add-rule ssh udp 68 68 0.0.0.0/0 

(3) 创建Cloudfoundry内网security group

  1. # nova secgroup-create cf-private "cf internal security group" 
  2.  
  3. # nova secgroup-add-rule cf-private udp 68 68 0.0.0.0/0 
  4.  
  5. # nova secgroup-add-rule cf-private udp 3456 3456 0.0.0.0/0 
  6.  
  7. # nova secgroup-add-group-rule cf-private bosh tcp 1 65535 

(4) 创建CloudFoundry外网访问security group

  1. # nova secgroup-create cf-public "security group for cloudfoundry public access" 
  2.  
  3. # nova secgroup-add-rule cf-public tcp 443 443 0.0.0.0/0 
  4.  
  5. # nova secgroup-add-rule cf-public udp 68 68 0.0.0.0/0 
  6.  
  7. # nova secgroup-add-rule cf-public tcp 80 80 0.0.0.0/0 

3.2 部署MicroBosh

3.2.1 创建microbosh keypair

  1. # nova keypair-add microbosh > microbosh.pem 
  2.  
  3. # chmod 400 microbosh.pem 

3.2.2 创建工作目录

  1. # mkdir -p ~/bosh-workspace/deployments/microbosh 
  2.  
  3. # cd ~/bosh-workspace/deployments/microbosh 

3.2.3 为microbosh创建一个floating ip

  1. # nova floating-ip-create public 
  2.  
  3. +--------------+-----------+----------+--------+ 
  4.  
  5. | Ip | Server Id | Fixed Ip | Pool | 
  6.  
  7. +--------------+-----------+----------+--------+ 
  8.  
  9. 172.24.4.229 | | - | public | 
  10.  
  11. +--------------+-----------+----------+--------+ 

3.2.4 创建并且编辑部署描述文件microbosh.yml

  1. --- 
  2. name: microbosh-openstack 
  3.    
  4. logging:   
  5.   level: DEBUG   
  6.    
  7. network:   
  8.   type: dynamic #内网ip的分配方式 
  9.   vip: 172.24.10.132 #外网浮动ip 
  10.    
  11. resources:   
  12.   persistent_disk: 20000   
  13.   cloud_properties:   
  14.     instance_type: m1.small   
  15.    
  16. cloud:   
  17.   plugin: openstack   
  18.   properties:   
  19.     openstack:   
  20.       auth_url: http://172.24.10.128:5000/v2.0   
  21.       username: demo   
  22.       api_key: openstack   
  23.       tenant: demo   
  24.       default_security_groups: [bosh,ssh]   
  25.       default_key_name: demokey   
  26.       private_key: ~/bosh-workspace/deployments/demokey.pem   
  27.    
  28. apply_spec:   
  29.   properties:   
  30.     director:   
  31.       max_threads: 2 
  32.     hm:   
  33.       resurrector_enabled: true   
  34.     ntp:  
  35.       - time.asia.apple.com 

下面简单介绍一下此部署文件的含义

* network 描述了Openstack中network的属性

在笔者的Openstack环境中,网络为openstack neutron network,所以在内网使用dhcp获取ip, 因此type为dynamic。cloud_properties中的net_id是可以使用dhcp获得ip的内网地址,此id可以使用neutron net-list得到

  1. # neutron net-list 
  2.  
  3. +--------------------------------------+---------+--------------------------------------------------+ 
  4.  
  5. | id | name | subnets | 
  6.  
  7. +--------------------------------------+---------+--------------------------------------------------+ 
  8.  
  9. | 0fbe7f27-e732-4954-9134-5486d7617727 | public | 110583d9-a905-428a-a494-3c95e4a6bca6 | 
  10.  
  11. | 9e5a6fd5-fa2e-48da-94ce-f85337bc2451 | private | 052030e6-626a-4a57-b8dc-b8ab239f419d 10.0.0.0/24 | 
  12.  
  13. +--------------------------------------+---------+--------------------------------------------------+ 

为了能够从外网访问microbosh,我们需要为bosh director指定一个floating ip, bosh会自动把这个ip关联到bosh director

* resource描述了为micro bosh director分配多少资源,instance_type定义了此虚拟机的openstack flavor,persistent_disk定义了为此虚拟机挂接多大的永久磁盘

* cloud描述了如何访问openstack,其中大部分内容可以从安装产生的keystonerc_demo中找到,

  1. # cat $HOME/keystonerc_demo 
  2.  
  3. export OS_USERNAME=demo 
  4.  
  5. export OS_TENANT_NAME=demo 
  6.  
  7. export OS_PASSWORD=73b3b497ca3a42d1 
  8.  
  9. export OS_AUTH_URL=http://:35357/v2.0/ 
  10.  
  11. export PS1='[\u@\h \W(keystone_demo)]\$ ' 

* apply_spec定义了Micro bosh得属性,这里面我们只需要修改一项,那就是时间服务器的地址, 例如修改为time.asia.apple.com

3.2.5 下载microbosh的虚拟机模板(stemcell)

(1) 由于GFW的缘故,把下面这句加到/etc/hosts中

54.231.244.8 s3.amazonaws.com

(2) 创建stemcell目录

  1. # mkdir -p ~/bosh-workspace/stemcells 
  2.  
  3. # cd ~/bosh-workspace/stemcells 

(3) 下载micro bosh的stemcell

  1. # bosh public stemcells | grep -i openstack 
  2.  
  3. | bosh-stemcell-2427-openstack-kvm-ubuntu.tgz | 
  4.  
  5. | bosh-stemcell-2624-openstack-kvm-centos.tgz | 
  6.  
  7. | bosh-stemcell-2624-openstack-kvm-ubuntu-lucid.tgz | 
  8.  
  9. | bosh-stemcell-2749-openstack-kvm-centos-go_agent.tgz | 
  10.  
  11. | bosh-stemcell-2749-openstack-kvm-ubuntu-trusty-go_agent.tgz | 
  12.  
  13. | bosh-stemcell-2652-openstack-kvm-ubuntu-lucid-go_agent.tgz | 
  14.  
  15. | bosh-stemcell-2719.1-openstack-kvm-centos-go_agent.tgz | 
  16.  
  17. | bosh-stemcell-2719.1-openstack-kvm-ubuntu-trusty-go_agent.tgz | 
  18.  
  19. | bosh-stemcell-2719.2-openstack-kvm-centos-go_agent.tgz | 
  20.  
  21. | bosh-stemcell-2719.2-openstack-kvm-ubuntu-trusty-go_agent.tgz | 
  22.  
  23. | bosh-stemcell-2719.3-openstack-kvm-ubuntu-trusty-go_agent.tgz | 
  24.  
  25. # bosh download public stemcell bosh-stemcell-2652-openstack-kvm-ubuntu-lucid-go_agent.tgz 

这个stemcell虽然不是最新版,但是笔者验证通过,更新版本的stemcell笔者没有尝试

(4) 部署Micro Bosh

*设置部署描述文件

  1. # cd ~/bosh-workspace/deployments 
  2.  
  3. # bosh micro deployment microbosh 

* 部署Micro Bosh

# bosh micro deploy ~/bosh-workspace/stemcells/bosh-stemcell-2652-openstack-kvm-ubuntu-lucid-go_agent.tgz 执行这一句之后会报错错误信息如下

  1. `/home/roger/.gem/ruby/gems/fog-aws-0.1.2/lib/fog/aws/auto_scaling.rb:4:in `<class:AutoScaling>': uninitialized constant Fog::AWS::CredentialFetcher (NameError) 
  2. from /home/roger/.gem/ruby/gems/fog-aws-0.1.2/lib/fog/aws/auto_scaling.rb:3:in `<module:AWS>' 
  3. from /home/roger/.gem/ruby/gems/fog-aws-0.1.2/lib/fog/aws/auto_scaling.rb:2:in `<module:Fog>' 
  4. from /home/roger/.gem/ruby/gems/fog-aws-0.1.2/lib/fog/aws/auto_scaling.rb:1:in `<top (required)>' 
  5. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  6. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  7. from /home/roger/.gem/ruby/gems/fog-1.27.0/lib/fog/aws.rb:2:in `<top (required)>' 
  8. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  9. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  10. from /home/roger/.gem/ruby/gems/fog-1.27.0/lib/fog.rb:23:in `<top (required)>' 
  11. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  12. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  13. from /home/roger/.gem/ruby/gems/bosh-registry-1.2922.0/lib/bosh/registry.rb:10:in `<top (required)>' 
  14. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  15. from /usr/share/rubygems/rubygems/core_ext/kernel_require.rb:73:in `require' 
  16. from /home/roger/.gem/ruby/gems/bosh-registry-1.2922.0/bin/bosh-registry:3:in `<top (required)>' 
  17. from /home/roger/bin/bosh-registry:23:in `load' 
  18. from /home/roger/bin/bosh-registry:23:in `<main>' 
  19. bosh-registry -c /tmp/d20150414-92091-1rc0vqs/bosh_registry_yml20150414- 92091-9n3izm` failed, exit status=1`` 

修改

/home/roger/.gem/ruby/gems/fog-aws-0.1.2/lib/fog/aws/auto_scaling.rb在第一行之前加上如下语句

require_relative('.') 问题解决

(5) 验证Micro Bosh

# bosh target

其中的microbosh ip address是预先申请的floating ip

(6) 使用ssh访问micro bosh

# ssh -i vcap@

博文地址:http://www.cnblogs.com/yudar/p/4391539.html

【编辑推荐】

  1. PaaS 2.0:Crtana 背后的 Azure Service Fabric
  2. 想让PaaS更出彩,请不要再忘记运维
  3. 为 OpenStack 私有云创建 Linux 和 Windows 映像
  4. 开源PaaS:在OpenStack上部署CloudFoundry(一)简介
  5. 在OpenStack上部署CloudFoundry (二)部署OpenStack
【责任编辑:Ophira TEL:(010)68476606】

点赞 0
分享:
大家都在看
猜你喜欢

读 书 +更多

Java EE 5 开发指南

本书是对Java EE各种技术之间互相协作的概览和补充。 本书还展示了如何编写JavaServer Page(JSP)页面或者企业级JavaBean(EJB):探讨了...

订阅51CTO邮刊

点击这里查看样刊

订阅51CTO邮刊
× Python最火的编程语言