裏ではいったいなにが起こってるのかいまいち分からないOpenstack。うまく動かないことも多々あります。いまだに突然エラーになってずっとメーターが回ってたりもしてます(笑) とりあえず困ったことを何点か書いておこうかなあと。
cinderでボリューム作成ができない。
一番つまったとこだけど、内容は基本的なことでした。まずはファイルシステムはlvmで作っていて、cinderのインストールじたいはできているものとして話を進めますと、エラーになっていた原因はmountされている物理ボリュームしかなかったことでした。論理ボリュームがあればいいと勘違いしてたのが原因。
解決策としては、イメージディスクからLinuxを起動してシェルに入って空き容量を作って、lvmの物理ボリュームを1個作る方法と、OSをインストールするときに空の物理ボリュームを作っておく方法。後者の方が断然簡単です。
後者の方をさらっと説明すると、空の物理ボリュームを作っておいて、起動後にvgcreateでcinder-volumesっていう物理ボリュームを作ればそれでOKです。
うちの環境がどんな感じかというと
[root@take ~]# vgdisplay --- Volume group --- VG Name cinder-volumes System ID Format lvm2 Metadata Areas 1 Metadata Sequence No 2 VG Access read/write VG Status resizable MAX LV 0 Cur LV 1 Open LV 1 Max PV 0 Cur PV 1 Act PV 1 VG Size 232.63 GiB PE Size 4.00 MiB Total PE 59554 Alloc PE / Size 256 / 1.00 GiB Free PE / Size 59298 / 231.63 GiB VG UUID EGcDro-fsZC-xUpm-CGts-Acel-Pvoy-smgIz1 --- Volume group --- VG Name vg_take System ID Format lvm2 Metadata Areas 1 Metadata Sequence No 3 VG Access read/write VG Status resizable MAX LV 0 Cur LV 2 Open LV 2 Max PV 0 Cur PV 1 Act PV 1 VG Size 232.63 GiB PE Size 4.00 MiB Total PE 59554 Alloc PE / Size 59554 / 232.63 GiB Free PE / Size 0 / 0 VG UUID l8MuDs-rME0-QlPn-AU04-FmRc-wZdv-H5i3k6
こんな感じになってます。
ボリュームの削除ができなくなた。
インスタンスからボリュームの削除をしたら、ずーーっとDeleteになっていて困ったことがありました。端末上でcinder listでIDを調べて、cinder deleteでも消せないなあと確認してから
[root@take ~]# cinder force-delete e0c7a730-b638-48cb-94f5-eb6975deb7f0
でOKです。強制削除なので注意。
ボリュームの削除だけでなく、たまーに、Horizonのメーターが回りっぱなしになったりしますが、そん時はもうコマンドラインから何かとやらないといけない感じですな。
まえは作成済みのインスタンスが動かなくなって、virshのコマンドの結果はshutdownで、novaのコマンド結果はrebootと一致していなくて、horizon上ではずーっとreboot中のメーターが動いてることがあったけど、そん時はスケジューラーのエラーがずっと出ている状態だったので、仕方ないのでインスタンスごと削除しちゃいました。
解決できなかったのが残念。次はやっつける！
インストールにつかうqcow2システムを作りたい。
参考サイトでCentOSとFedoraのダウンロードができますが、やっぱり自分でも作りたいですよね。
まずはWgetでイメージをダウンロードする。
[root@take ~]# wget ftp://ftp.freebsd.org/pub/FreeBSD/releases/i386/i386/ISO-IMAGES/9.2/FreeBSD-9.2-RELEASE-i386-dvd1.iso
仮想の領域を作成します。
qemu-img create -f qcow2 freebsd9.qcow2 8G
CentOSの場合はコマンドにパスが通ってないのでフルパスで指定する必要がありました。
/usr/libexec/qemu-kvm -hda freebsd9.qcow2 -cdrom FreeBSD-9.2-RELEASE-i386-dvd1.iso -boot d -m 512 -vnc :1
VNC番号は0で5900がデフォルトだったと思います。複数作るときは5900以降のポートはいくつか開けときましょう。Openstackで何が便利って一気に複数のインスタンスが作れるってとこかな。
んで、このインストール作業のプロセスをデーモンとして動かすオプションもありますが、上の場合はつけてないので実行するとプロンプトは帰ってこないので注意。逆にデーモンで動かしててインストールがおかしくなってしまったらKILLしかないのでそっちも注意。
話を戻すと、上のコマンドを実行してからVNCソフトを使ってアクセスしたらインストール画面が出てきます。あとはいつもと同じようにインストールをやります。完了したらイメージを管理しているglanceでインストール用のイメージとして取り込みします。
でふぉだと/opt/virtだと思うのでそっちにコピー。
mkdir -p /opt/virt/freebsd ; cd /opt/virt/freebsd cp -a /root/freebsd9.qcow2 /opt/virt/freebsd/
glanceで取り込む。
glance image-create --name="freebsd01" --is-public=true --disk-format=qcow2 --container-format=ovf < freebsd9.qcow2 +------------------+--------------------------------------+ | Property | Value | +------------------+--------------------------------------+ | checksum | 9090d5585c7cdb12d3361746e75a29be | | container_format | ovf | | created_at | 2013-12-15T11:14:40 | | deleted | False | | deleted_at | None | | disk_format | qcow2 | | id | 33c28732-f7bf-45fc-8b9b-d2dea51885c6 | | is_public | True | | min_disk | 0 | | min_ram | 0 | | name | freebsd01 | | owner | 059b553a542a48df957a4bc41258fd25 | | protected | False | | size | 1417871360 | | status | active | | updated_at | 2013-12-15T11:15:09 | +------------------+--------------------------------------+
これでインスタンス作成時に選択できるようになる。のですが、glanceで取り込んだときに名前が変わっているので、このまま起動するとmount失敗します。
Mounting from ufs:/dev/ada0p2 failed with error 19. Loader variables: vfs.root.mountfrom=ufs:/dev/ada0p2 vfs.root.mountfrom.options=rw Manual root filesystem specification: <fstype>:<device> [options] Mount <device> using filesystem <fstype> and with the specified (optional) option list. eg. ufs:/dev/da0s1a zfs:tank cd9660:/dev/acd0 ro (which is equivalent to: mount -t cd9660 -o ro /dev/acd0 /) ? List valid disk boot devices . Yield 1 second (for background tasks) <empty line> Abort manual input mountroot>
んでもってここで？を打つと、名前が変わったあとのディスク名が分かるのでそいつをmountします。
うちの環境の場合はこうでした。
mountroot> List of GEOM managed disk devices: gptid/708e0058-656e-11e3-9e07-525400123456 gptid/708d6be0-656e-11e3-9e07-525400123456 ufsid/52ad7ba0693fe823 gptid/708d0974-656e-11e3-9e07-525400123456 vtbd0p3 vtbd0p2 vtbd0p1 vtbd0
んで起動します。
mountroot> ufs:vtbd0p2 mountroot> Trying to mount root from
ネットワークも変わってるので
vi /etc/rc.conf ifconfig_re0 これを ifconfig_vtnet0="DHCP" こうする
んで/etc/netstartするとDHCPで割り当ててくれます。OSのインストール時にDHCPを有効にするのをお忘れなく。
VNCはしんどいおーって人はSSHを開こう。っていうか開くのがいい。
vi /etc/ssh/sshd_config Port 22 Protocol 2 PermitRootLogin no PasswordAuthentication yes PermitEmptyPasswords no
これでOpenstackのホストからつながると思います。
とりあえず今のとこはこれくらいですな。
Openstackといえど、この辺はLinux＋KVMなので、検証作業もたいして変わらんと思うのですけど実際やってみたらなんか違った結果に。
詳しくはまた次回で。
