← Back to Index

containered cloud-native (ccn) roadshow 离线部署

CCN是一个不错的演示openshift之上，ci/cd, cloud-native, istio, serverless的演示教材，教学的内容非常丰富。

第一个模块，着重讲解如何拆分单体应用，以及拆分的应用如何上云。

第二个模块，讲解如何在线debug, 如何监控上云的应用

第三个模块，应用转换到服务网格service mesh/istio架构

第四个模块，应用使用无服务架构serverless/knative架构开发

培训过程视频

安装过程视频

不过 upstream 的 CCN 是基于 rh demo system 的，必须在线，这里就做了一个离线的版本，供给客户离线使用。

离线部署架构描述

本次CCN离线，是基于ocp 4.4.7制作。一共有4个module。

做CCN的离线，主要有以下3部分工作

在实验室的部署架构如下，供参考：

可以看到，与标准的部署架构没什么区别，就是在helper节点上面，加了gogs, nexus。

安装介质下载

请到如下的链接，下载安装介质，注意，这个安装介质是基于ocp 4.4.7 制作。

由于上传的时候，安装5G大小切分，下载以后，合并使用如下的命令范例：

cat registry.?? > registry.tgz

百度盘上还会有补丁文件，比如，当有一个 agnosticd.zip 文件时, 这个就是补丁文件，上传到helper上，替换ocp4.tgz解压缩出来的同名文件即可。

教材修订

教材根据上游的项目做了修订，主要是源代码，为了应对纯离线环境，做了小的修改。如果在教学现场，发现有步骤做不下去，多半是因为离线环境的问题，请参考教学视频录像，里面会有如何绕过离线环境问题的技巧。

基础ocp4.4环境的部署细节

ccn for ocp-4.4 安装步骤

建议用独立的ocp4集群来安装ccn教材，因为ccn教材会全局的激活多个operator，这些operator也许对集群中的其他环境有影响。


        # on helper
        
        # deploy gogs
        
        export LOCAL_REG='registry.redhat.ren:5443/'
        
        # export LOCAL_REG=''
        
        # gogs_var_date='2020-07-06'
        
        podman stop gogs
        podman rm -fv gogs
        cd /data/ccn
        rm -rf /data/ccn/gogs
        podman run -d --name gogs-fs --entrypoint "tail" ${LOCAL_REG}docker.io/wangzheng422/gogs-fs:2020-07-17-1412 -f /dev/null
        podman cp gogs-fs:/gogs.tgz /data/ccn/
        tar zxf gogs.tgz
        podman rm -fv gogs-fs
        
        # change /data/ccn/gogs/resolv.conf to fit your env
        
        # change /data/ccn/gogs/gogs/conf/app.ini to fit your env
        
        # generally, tag latest works
        
        podman run -d --name=gogs -p 10022:22 -p 10080:3000 -v /data/ccn/gogs:/data:Z -v /data/ccn/gogs/resolv.conf:/etc/resolv.conf:Z ${LOCAL_REG}docker.io/gogs/gogs
        
        # for those not using provided source, try a specific tag.
        
        podman run -d --name=gogs -p 10022:22 -p 10080:3000 -v /data/ccn/gogs:/data:Z -v /data/ccn/gogs/resolv.conf:/etc/resolv.conf:Z ${LOCAL_REG}docker.io/gogs/gogs:0.12.3
        
        # restore if you need.
        
        podman stop gogs
        podman rm -fv gogs
        
        # deploy nexus
        
        mkdir -p /data/ccn/nexus
        cd /data/ccn
        rm -rf /data/ccn/nexus
        podman run -d --name nexus-fs --entrypoint "tail" ${LOCAL_REG}docker.io/wangzheng422/nexus-fs:2020-07-20-0320 -f /dev/null
        podman cp nexus-fs:/nexus.tgz /data/ccn/
        tar zxf nexus.tgz ./
        podman rm -fv nexus-fs
        
        chown -R 200:root /data/ccn/nexus
        
        # generally, tag latest works
        
        podman run -d -p 8081:8081 -it --name nexus -v /data/ccn/nexus:/nexus-data:Z ${LOCAL_REG}docker.io/sonatype/nexus3:latest
        
        # for those not using provided source, try a specific tag.
        
        podman run -d -p 8081:8081 -it --name nexus -v /data/ccn/nexus:/nexus-data:Z ${LOCAL_REG}docker.io/sonatype/nexus3:3.26.1
        
        
        # restore if you need.
        
        podman stop nexus
        podman rm -fv nexus
        
        # deploy etherpad
        
        mkdir -p /data/ccn/etherpad
        chown -R 5001 /data/ccn/etherpad
        
        podman run -d -p 9001:9001 -it --name etherpad -v /data/ccn/etherpad:/opt/etherpad-lite/var:z ${LOCAL_REG}docker.io/etherpad/etherpad:latest
        
        # restore if you need.
        
        podman stop etherpad
        podman rm -fv etherpad
        
        # agnosticd on helper
        
        mkdir -p /data/pip3
        cd /data/pip3
        podman create --name swap registry.redhat.ren:5443/docker.io/wangzheng422/base-fs:pip3-whl-2020-07-05 ls
        podman cp swap:/wheelhouse.tar.gz - > wheelhouse.tar.gz
        tar vxf wheelhouse.tar.gz
        podman rm -fv swap
        
        pip3 install --user --upgrade -r wheelhouse/requirements.txt --no-index --find-links wheelhouse
        
        # yum downgrade ansible-2.8.12-1.el7ae
        
        # 安装ccn环境的参数
        
        oc login -u kubeadmin
        
        # oc login -u system:admin
        
        # TARGET_HOST="bastion.rhte-b5c8.openshiftworkshop.com"
        
        OCP_USERNAME="system:admin"
        WORKLOAD="ocp4-workload-ccnrd"
        GUID=b5c8
        USER_COUNT=2
        MODULE_TYPE="m1;m2;m3;m4"
        SSH_KEY=~/.ssh/id_rsa
        WZH_SUBDOMIN_BASE=base.ocp4.redhat.ren
        WZH_REGISTRY_SERVER=registry.redhat.ren:5443
        WZH_GOGS_SERVER=gogs.redhat.ren:10080
        
        # create users
        
        BASE_DIR="/root/ocp4"
        mkdir -p ${BASE_DIR}
        cd ${BASE_DIR}
        /bin/rm -f ${BASE_DIR}/htpasswd
        touch ${BASE_DIR}/htpasswd
        
        for i in $(seq 1 $USER_COUNT)
        do 
            htpasswd -Bb ${BASE_DIR}/htpasswd user${i} redhat
        done
        
        oc create secret generic htpasswd --from-file=${BASE_DIR}/htpasswd -n openshift-config
        
        oc apply -f - <<EOF
        apiVersion: config.openshift.io/v1
        kind: OAuth
        metadata:
          name: cluster
        spec:
          identityProviders:
          - name: Local Password
            mappingMethod: claim
            type: HTPasswd
            htpasswd:
              fileData:
                name: htpasswd
        EOF
        
        # oc delete secret htpasswd -n openshift-config
        
        # 以下是安装步骤
        
        # a TARGET_HOST is specified in the command line, without using an inventory file
        
        cd /root/ocp4/agnosticd/ansible
        ansible-playbook -i localhost, ./configs/ocp-workloads/ocp-workload.yml \
            -e"ansible_ssh_private_key_file=${SSH_KEY}" \
            -e"ansible_user=root" \
            -e"ocp_username=${OCP_USERNAME}" \
            -e"ocp_workload=${WORKLOAD}" \
            -e"silent=False" \
            -e"guid=${GUID}" \
            -e"num_users=${USER_COUNT}" \
            -e"user_count=${USER_COUNT}" \
            -e"module_type=${MODULE_TYPE}" \
            -e"wzh_registry_server=${WZH_REGISTRY_SERVER}" \
            -e"wzh_gogs_server=${WZH_GOGS_SERVER}" \
            -e"ansible_python_interpreter=/usr/bin/python3" \
            -e"subdomain_base=${WZH_SUBDOMIN_BASE}" \
            -v \
            -e"ACTION=create"
        
        # 由于实验环境里面的演示网站，会用到一些在线的静态文件，如果客户端浏览器不能联网
        
        # 或者不能沟通"快速"上网，那么需要给这些在线资源做dns解析，解析到平台的router上来
        
        # 离线的安装介质里面，有static-html，用来提供这些静态文件服务。
        
        # at.alicdn.com
        
        # maxcdn.bootstrapcdn.com
        
        # cdnjs.cloudflare.com
        
        # ajax.googleapis.com
        
        # code.jquery.com
        
        # 以下是删除ccn的步骤，注意大部分的operator不会删除。
        
        # a TARGET_HOST is specified in the command line, without using an inventory file
        
        ansible-playbook -i localhost, ./configs/ocp-workloads/ocp-workload.yml \
            -e"ansible_ssh_private_key_file=${SSH_KEY}" \
            -e"ansible_user=root" \
            -e"ocp_username=${OCP_USERNAME}" \
            -e"ocp_workload=${WORKLOAD}" \
            -e"silent=False" \
            -e"guid=${GUID}" \
            -e"num_users=${USER_COUNT}" \
            -e"user_count=${USER_COUNT}" \
            -e"module_type=${MODULE_TYPE}" \
            -e"wzh_registry_server=${WZH_REGISTRY_SERVER}" \
            -e"wzh_gogs_server=${WZH_GOGS_SERVER}" \
            -e"ansible_python_interpreter=/usr/bin/python3" \
            -e"subdomain_base=${WZH_SUBDOMIN_BASE}" \
            -v \
            -e"ACTION=remove"

其他备忘

yum install -y wget jq
        
        # Keycloak credentials: admin / 2kBdjDwcZK94
        
        # STACK_ID: stacksq1xbet4os1uioep

manully patch image stream

tips

oc get istio-io -n opentlc-mgr-tutorial
        
        oc new-build -i openshift/redhat-openjdk18-openshift:1.5 --binary --name=inventory-quarkus -l app=inventory-quarkus
        
        npm run nodeshift --  --dockerImage=registry.redhat.ren:5443/docker.io/wangzheng422/cloudnative-workspaces-quarkus  --imageTag=nodejs-10-2020-07-16-2155

todo