Ubuntu 11.04 Server安装配置OpenNebula 3.0

By , November 27, 2011 9:41 pm

OpenNebula于10月3日发布3.0版本。这两天终于有时间测试了一把。

[管理节点]

全新安装的Ubuntu 11.04 Server操作系统,安装的时候同时安装OpenSSH Server和LAMP Server。管理节点的内网IP为192.168.1.1。

首先创建cloud组和oneadmin用户:

sudo mkdir -p /srv/cloud/
sudo groupadd -g 10000 cloud
sudo useradd -u 10000 -g cloud -m oneadmin -d /srv/cloud/one -s /bin/bash
sudo passwd oneadmin
sudo chown -R oneadmin:cloud /srv/cloud/
su -l oneadmin
ssh-keygen
cat ~/.ssh/id_rsa.pub > ~/.ssh/authorized_keys
echo “StrictHostKeyChecking no” > ~/.ssh/config
exit

安装配置NFS服务:

sudo apt-get install nfs-kernel-server
sudo pico /etc/exports

增加一行内容:

/srv/cloud  *(rw,fsid=0,nohide,sync,root_squash,no_subtree_check)

启动NFS服务:

sudo /etc/init.d/nfs-kernel-server start

安装OpenNebula所依赖的软件:

sudo apt-get install libsqlite3-dev libxmlrpc-c3-dev g++ ruby libopenssl-ruby libssl-dev ruby-dev
sudo apt-get install libxml2-dev libmysqlclient-dev libmysql++-dev libsqlite3-ruby libexpat1-dev
sudo apt-get install rake rubygems libxml-parser-ruby1.8 libxslt1-dev genisoimage scons
sudo apt-get install mysql-server
sudo gem install nokogiri
sudo gem install rake
sudo gem install  xmlparser

创建MySQL数据库:

mysql -u root -p
CREATE USER ‘oneadmin’@’localhost’ IDENTIFIED BY ‘oneadmin’;
CREATE DATABASE opennebula;
GRANT ALL PRIVILEGES ON opennebula.* TO ‘oneadmin’ IDENTIFIED BY ‘oneadmin’;
quit;

下载并安装OpenNebula前端软件:

su -l oneadmin
wget http://dev.opennebula.org/attachments/download/478/opennebula-3.0.0.tar.gz
tar -zxvf opennebula-3.0.0.tar.gz
cd opennebula-3.0.0
scons sqlite=no mysql=yes
./install.sh -u oneadmin -g cloud -d /srv/cloud/one

编辑~/.bash_profile,设置一些环境变量

export ONE_LOCATION=/srv/cloud/one
export ONE_AUTH=$ONE_LOCATION/.one/one_auth
export ONE_XMLRPC=http://localhost:2633/RPC2
export PATH=$ONE_LOCATION/bin:/usr/local/bin:/var/lib/gems/1.8/bin/:$PATH

执行.bash_profile,使得这些环境变量生效:

source ~/.bash_profile

编辑~/.one/one_auth,设置OpenNebula的用户名和密码:

mkdir ~/.one
echo “oneadmin:YOUR_PASSWORD” > ~/.one/one_auth
chmod 640 ~/.one/one_auth

编辑~/etc/oned.conf,设置OpenNebula所使用的数据库参数:

# DB = [ backend = "sqlite" ]

# Sample configuration for MySQL
DB = [ backend = "mysql",
server = "localhost",
port = 0,
user = "oneadmin",
passwd = "oneadmin",
db_name = "opennebula" ]

启动OpenNebula服务:

one start

[计算节点]

全新安装的Ubuntu 11.04 Server操作系统,安装的时候同时安装OpenSSH Sever和Virtualization。计算节点的内网IP为192.168.1.2。

首先安装虚拟化支持:

(重要说明,如果在计算节点上没有安装ubuntu-vm-builder和ruby这两个软件包,用onehost create命令可以添加该计算节点,但是其状态会显示为err。)

sudo apt-get install qemu-kvm libvirt-bin bridge-utils ubuntu-vm-builder ruby

安装NFS客户端:

sudo apt-get install nfs-common

编辑/etc/fstab,配置NFS客户端:(假定OpenNebula管理节点的IP是192.168.1.1)
192.168.1.1:/srv/cloud /srv/cloud nfs defaults 0 0

创建NFS目录并挂载NFS文件系统:

sudo mkdir -p /srv/cloud
sudo mount /srv/cloud

创建cloud组和oneadmin用户:

sudo groupadd -g 10000 cloud
sudo useradd -u 10000 -g cloud -m oneadmin -s /bin/bash
sudo usermod -d /srv/cloud/one oneadmin
sudo passwd oneadmin
sudo chown oneadmin:cloud /srv/cloud/

编辑/etc/libvirt/libvirtd.conf配置libvirt,将操作权限授予给cloud组:

unix_sock_group = “cloud”

编辑/etc/libvirt/qemu.conf配置libvirt,设置VNC:

vnc_listen = “0.0.0.0″

重启libvirt:

sudo service libvirt-bin restart
sudo chown :cloud /var/run/libvirt/libvirt-sock

编辑/etc/network/interface,根据实际的网络状况配置网桥。在这里我们使用eth1连接到一个私有的内网,使用192.168.1.*的内网IP。

auto eth1
iface eth1 inet manual

auto br1
iface br1 inet static
address 192.168.1.2
netmask 255.255.255.0
network 192.168.1.0
broadcast 192.168.1.255
bridge_ports eth1
bridge_stp off
bridge_fd 0
bridge_maxwait 0

[管理节点]

添加计算节点(假定计算节点的IP是192.168.1.2):

onehost create 192.168.1.2 im_kvm vmm_kvm tm_shared

查看计算节点是否添加成功:

onehost list

这时候应该可以看到192.168.1.2出现在计算节点列表里面。如果计算节点配置正确的话,它的状态(STAT)应该显示为“on”。如果计算节点的状态显示为“err”,说明计算节点没有配置好。这时候可以做三个检查:(1)在管理节点上是否可以用无密码模式SSH登录到计算节点,(2)计算节点是否已经安装好ubuntu-vm-builder和ruby,和(3)在计算节点上oneadmin用户是否有权限控制KVM。

成功添加计算节点之后,我们下载一个预先配置好的VM进行测试。

mkdir ~/one-templates
cd ~/one-templates
wget http://dev.opennebula.org/attachments/download/170/ttylinux.tar.gz
tar xzf ttylinux.tar.gz

编辑small_network.net,定义一个网络:

NAME = “Small Network”
TYPE = FIXED

BRIDGE = br1
LEASES = [ IP="192.168.1.5"]
LEASES = [ IP="192.168.1.6"]
LEASES = [ IP="192.168.1.7"]
LEASES = [ IP="192.168.1.8"]
LEASES = [ IP="192.168.1.9"]
LEASES = [ IP="192.168.1.10"]
LEASES = [ IP="192.168.1.11"]
LEASES = [ IP="192.168.1.12"]
LEASES = [ IP="192.168.1.13"]
LEASES = [ IP="192.168.1.14"]
LEASES = [ IP="192.168.1.15"]

将如上所定义的网络添加到系统:

onevnet create small_network.net

列出系统上所有的网络(刚刚创建的Small Network 的ID可能是0):

onevnet list

编辑ttylinux.one,修改虚拟机参数:

NAME   = ttylinux
CPU    = 0.1
MEMORY = 64

DISK   = [
source   = "/srv/cloud/one/one-templates/ttylinux.img",
target   = "hda",
readonly = "no" ]

NIC    = [ NETWORK_ID = 0]

GRAPHICS = [ TYPE = "VNC"]

FEATURES=[ acpi="no" ]

在系统中创建该虚拟机:

onevm create ttylinux.one

列出系统上所有的虚拟机(刚刚创建的虚拟机的ID可能是0):

onevm list

如上命令列出了系统上所有虚拟机的状态,包括运行这些虚拟机的计算节点。如果需要了解某个虚拟机的详细状况,可以使用onevm show VM_ID命令,例如:

onevm show 0

这个命令会列出ID为0的虚拟机的所有相关信息,包括运行该虚拟机的计算节点,VNC端口号等等。找到这个端口号(假定为5900),就可以通过VNC客户端连接到该虚拟机的控制台,例如:

vncviewer 192.168.1.2:5900

[SunStone]

SunStone是OpenNebula的管理界面,可以同时为云管理员和终端用户提供服务。要启用SunStone,需要在管理节点上执行如下操作:

sudo apt-get install rails thin curl
sudo gem install json sinatra thin
sudo gem install sequel sinatra-sequel
sudo ln -s /usr/bin/rackup1.8 /usr/bin/rackup

启动SunStone服务:

su -l oneadmin
./bin/sunstone-server start

在var/sunstone.log里面找到SunStone所使用的端口号(我这里看到的是9869),然后通过浏览器访问SunStone(假定管理节点的IP是192.168.1.1):

http://192.168.1.1:9869/

登录进入SunStone之后,可以查看和设置计算节点、虚拟机、网络、模板、映像、用户、群组、权限 。在缺省的情况下,OpenNebula自带的会计与统计功能没有启用,因此看不到计算节点和虚拟机的监控信息。如果要启用这个功能,需要启动oneacctd服务。

sudo gem install json sqlite3 sequel
oneacctd start

这个缺省的设置使用sqlite记录监控信息。如果需要使用MySQL记录监控信息,则需要进行如下步骤:

sudo gem install mysql

修改etc/acctd.conf中的数据库连接URI:

:DB: mysql://db_username:db_password@localhost/opennebula  (需要替换URI中的db_username和db_password)

重新启动 acctd:

oneacctd stop
oneacctd start

进一步的设置可以参考etc/acctd.conf。

[其他说明]

虚拟机的在线迁移,需要配置好所有计算节点的/etc/hosts和/etc/hostname,确保在所有在计算节点上都能够根据主机名来寻找到其他计算节点,不然的话在线迁移会失败。此外,所有节点(包括控制节点和计算节点)之间需要配置无密码SSH登录。

数据库的用户名和密码尽可能不要包含:和@字符,否则会出现数据库连接错误。

 

12 Responses to “Ubuntu 11.04 Server安装配置OpenNebula 3.0”

  1. livemoon says:

    看上去openNebula安装和配置都貌似要比openstack成熟点,请问您用下来感觉如何

  2. cyq says:

    您好:我在搭建这个的时候sunstone起来了,但是无法登陆,我做了如下
    echo “oneadmin:123456” > ~/.one/one_auth
    但是输入用户名和密码后登陆不进去

  3. Yan says:

    收益良多,希望能看到您更多的文章!!!

  4. jmc says:

    This is a wonderful artical! But when i start one i got an error saying
    ‘/srv/cloud/one/bin/one: line 104: 2721 aborted $ONED -f 2>&1 oned failed to start’
    Can you please advise for help?
    Thanks!

  5. Sunow says:

    按照文章所述安装了一下OpenNebula,有一点体会,也有些问题。
    先说说 jmc 反应的错误,我貌似遇到过,貌似是因为以oneadmin身份登录时没有使用su -l oneadmin命令而仅仅是su oneadmin导致的,加上-l之后会更改大部分的环境变量,也就是你直接在oneadmin用户下设置的一些环境变量,不知道说得对不对~
    我也遇到了cyq反应的问题,不知道清野君有何高见?在SunStone端输入用户名和密码之后,不报错,也不跳转,神马情况。

  6. Sunow says:

    PS:目测清野君比较忙,所以欢迎大家相互交流,留下我的企鹅和邮箱~
    QQ:370102768
    E-Mail: kemaswill@163.com

  7. [...] 这个帖子是为2011年11月所发布的《Ubuntu 11.04 Server安装配置OpenNebula 3.0》一文的升级版。本教程在Ubuntu 12.04 Server的32位版本和64位版本上都进行过测试。在设备匮乏的情况下,本教程也可以在一台笔记本电脑上完成。 [...]

  8. MILTON says:

    您好 我目前用的版本是12.04然後安裝ONE 3.0
    使用兩台PC 一台當管理節點一台計算節點
    目前已經可以使用MIGRATE的功能
    但是使用LIVE MIGRATE時,例如從PC.A到PC.B
    PC.B會有顯示傳過來的VM一下子然後就不見了
    想請問是哪邊出了問題
    謝謝您

  9. qyjohn says:

    MILTON,从你的描述来看应该是在线迁移失败了。是一直都失败呢还是有些时候成功有些时候失败?

  10. MILTON says:

    您好 我看了您3.8的教程,配置好所有计算节点的/etc/hosts和/etc/hostname就可以了 感謝您的回覆

  11. MILTON says:

    您好
    請問在线迁移(live migrate)跟迁移(migrate),
    在迁移時,
    分別是傳輸什麼資料給節點的呢?

  12. StudentA says:

    您好我目前成功安裝ONE3.0,並且可以經由SUNSTONE管理,一個管理節點且兩個計算節點(KVM,NFS共享),互相可以動態遷移(LIVE MIGRATION),

    目前我在節點A上的VM裡讓他下載某個檔案同時,我下(LIVE MIGRATION)指令讓他到另一個節點B上,結果發現在節點B上無法繼續下載此檔案。

    我用wireshark去看,傳送檔案那方是傳給節點A的實體IP(203.74.4.2 –>節點A IP: 140.123.107.153),到轉移過去節點B之後,就會destination unreachable。

    這樣似乎有點奇怪,比如某間公司提供了服務在這台VM上(節點A),但LIVE MIGRATION過去節點B之後,這間公司提供的服務就被中斷了。

    想請問我設定有地方出錯嗎?

Leave a Reply

Panorama Theme by Themocracy