PCFとは

Pivotalが提供する、Kubernetesやその他さまざまなサービスを導入及び管理することができる基盤です。

基本的にはOps Managerと呼ばれるものを

VMware vSphere
Microsoft Azure
Google Cloud Platform
Amazon Web Service
OpenStack

の上に構築して、そこから各種サービスを展開していく流れになります。

以下は、Ops Manager上に

PKS (Pivotal Container Service): Kubernetes管理基盤
Habor: Private docker repository

を導入した状態です。

PCF 構築の流れ

とてつもない量となってしまうため、流れをつかんでいただくものを書きます。

これを読みながらやっていくというよりは、自分の詰まった点やどのような構成にしていたのかを書いてありますので、ざっと目を通して、構成をイメージしてから取り組んでいただければと思います。

環境はこんな感じでやっています。(とても簡単な図ですみません)

Ops Managerのインストール

自分は、VMware vCenterを通して構築をいたしました。

Boshの設定

以下ような各項目を埋めていきます。
この際、管理用のnetworkとサービス用networkを準備する必要があります。

自分の場合、NAT下に作成したため、

外部通信用network
private network1(管理用)
private network2(サービス用)

の3つのネットワークを作っています。

PKS のインストール

モジュールをインストールし、先ほどのOps Managerの管理画面のIMPORT A PRODUCT というところから取り込んでいきます。

設定に関しても、複雑なものはなく容易にこなすことができます。

この際、PKS APIという箇所で、Certificateを生成するのですが、そこにrsa keyが必要となります。
NATでssh-keygenをして、id_rsaをcatしコピペして生成しました。

導入後に

# uaac target https\://PKS-API:8443 --ca-cert ROOT-CA-FILENAME

コマンドを用いて、情報を取得するのですが、ここが少し戸惑いました。。。

ここでは、自分の場合一度ops managerにログインし、

ubuntu@pivotal-ops-manager:~$ cat /var/tempest/workspaces/default/root_ca_certificate

として表示されたものを、NAT上のどこかにテキストファイル化し

# uaac target pks.mydom.local:8443 --ca-cert root_ca_certificate

Target: https://pks.mydom.local:8443
Context: admin, from client admin

という感じにしています。

Habor

ここは何もつまるところはなく、難なくいけました。

Kubernetes cluster の構築

PKSではとても簡単に、好きな構成のkubernetesをサラッと構築できます。

NATにつなぎ、ログインします。
この際、clusterは生成されてないので、何も表示されません。

# pks login -a pks.mydom.local -u pksadmin -p password --ca-cert /usr/pks/root_ca_certificate

# pks clusters list

Name  Plan Name  UUID  Status  Action

では、実際に構築します。

# pks create-cluster SampleCluster --external-hostname samplecluster.mydom.local --plan large --num-nodes 4

Name:                     SampleCluster
Plan Name:                large
UUID:                     09ffbeda-423e-4872-a7d1-73f51a8c6cce
Last Action:              CREATE
Last Action State:        in progress
Last Action Description:  Creating cluster
Kubernetes Master Host:   samplecluster.mydom.local
Kubernetes Master Port:   8443
Worker Nodes:             4
Kubernetes Master IP(s):  In Progress
Network Profile Name:

Use 'pks cluster SampleCluster' to monitor the state of your cluster

構築が始まりました。
ここは、少し時間がかかりますが、自動でやってくれていると思えばね。。。

# pks clusters list

Name           Plan Name  UUID                                  Status       Action
SampleCluster  large      09ffbeda-423e-4872-a7d1-73f51a8c6cce  in progress  CREATE

出来上がると以下のように表示されます。

# pks cluster SampleCluster

Name:                     SampleCluster
Plan Name:                large
UUID:                     98c4d605-6646-4702-beba-9f13da740d26
Last Action:              CREATE
Last Action State:        succeeded
Last Action Description:  Instance provisioning completed
Kubernetes Master Host:   samplecluster.mydom.local
Kubernetes Master Port:   8443
Worker Nodes:             4
Kubernetes Master IP(s):  172.16.1.2
Network Profile Name:


# pks clusters list

Name           Plan Name  UUID                                  Status     Action
SampleCluster  large      09ffbeda-423e-4872-a7d1-73f51a8c6cce  succeeded  CREATE

以下の二つでclusterに接続します。

# pks get-credentials SampleCluster

# kubectl config use-context SampleCluster
Switched to context "SampleCluster"

clusterの情報について確認してみましょう。

# kubectl cluster-info
Kubernetes master is running at https://samplecluster.mydom.local:8443
CoreDNS is running at https://samplecluster.mydom.local:8443/api/v1/namespaces/kube-system/services/kube-dns:dns/proxy

To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.


# kubectl get nodes -o wide
NAME                                   STATUS   ROLES    AGE   VERSION   INTERNAL-IP   EXTERNAL-IP   OS-IMAGE             KERNEL-VERSION      CONTAINER-RUNTIME
898ca1e5-f248-466b-aaf1-9208ee122aae   Ready    <none>   58m   v1.13.5   172.16.1.4    172.16.1.4    Ubuntu 16.04.6 LTS   4.15.0-46-generic   docker://18.6.3
8eda35c6-533c-43c7-9efa-dc513420cb32   Ready    <none>   56m   v1.13.5   172.16.1.5    172.16.1.5    Ubuntu 16.04.6 LTS   4.15.0-46-generic   docker://18.6.3
9c86b2be-2192-4e14-869b-ab562ad76916   Ready    <none>   53m   v1.13.5   172.16.1.6    172.16.1.6    Ubuntu 16.04.6 LTS   4.15.0-46-generic   docker://18.6.3
c24e6162-3125-49d7-bfd6-f3a4d20b2c60   Ready    <none>   61m   v1.13.5   172.16.1.3    172.16.1.3    Ubuntu 16.04.6 LTS   4.15.0-46-generic   docker://18.6.3

まとめ

すこし、PKS等の導入時に悩むこともありましたが、一度構築してしまうと、いろんなことが楽できそうですね！

皆さんもぜひ、導入してみてはいかがでしょうか。