A sub-system of Cloud-Barista Platform to Deploy and Manage Multi-Cloud Infrastructure.
- CB-Tumblebug Overview (Korean)
- CB-Tumblebug Features (Korean)
- CB-Tumblebug Architecture (Korean)
- CB-Tumblebug Operation Sequence
[Note] CB-Tumblebug is currently under development
CB-Tumblebug is currently under development. (not v1.0 yet)
We welcome any new suggestions, issues, opinions, and contributors !
Please note that the functionalities of Cloud-Barista are not stable and secure yet.
Be careful if you plan to use the current release in production.
If you have any difficulties in using Cloud-Barista, please let us know.
(Open an issue or Join the Cloud-Barista Slack)
[Note] Localization and Globalization of CB-Tumblebug
Since CB-Tumblebug was initiated by Korean members,
we would like to promote participation of Korean contributors during initial stage of this project.
So, CB-Tumblebug Repo will accept use of Korean language in its early stages.
On the other hand, we hope this project flourishes regardless of contributor's country eventually.
So, the maintainers recommend using English at least for the title of Issues, Pull Requests, and Commits,
while CB-Tumblebug Repo accommodates local languages in the contents of them.
CB-Tumblebug은 한국에서 시작된 오픈 소스 프로젝트로서
프로젝트의 초기 단계에는 한국 기여자들의 참여를 촉진하고자 합니다.
따라서 초기 단계의 CB-Tumblebug는 한국어 사용을 받아 들일 것입니다.
다른 한편으로, 이 프로젝트가 국가에 관계없이 번성하기를 희망합니다.
따라서 개발 히스토리 관리를 위해 이슈, 풀 요청, 커밋 등의
제목에 대해서는 영어 사용을 권장하며, 내용에 대한 한국어 사용은 수용할 것입니다.
- CB-Tumblebug 실행 및 개발 환경
- CB-Tumblebug 기여 방법
- CB-Tumblebug 실행 방법
- CB-Tumblebug 소스 빌드 및 실행 방법 상세
- CB-Tumblebug 기능 사용 방법
- Linux (추천: Ubuntu 22.04)
- Go (추천: v1.21.6)
CB-Tumblebug welcomes improvements from both new and experienced contributors!
Check out CONTRIBUTING.
- 개요
- 필요 패키지/도구 설치
- CB-Tumblebug 소스 다운로드 (Git clone CB-Tumblebug)
- CB-Tumblebug 환경 변수 설정
- CB-Tumblebug 빌드 및 실행 (
make
및make run
)
- 소스 빌드 및 실행 방법 상세
-
CB-Tumblebug 이미지 확인(https://hub.docker.com/r/cloudbaristaorg/cb-tumblebug/tags)
-
CB-Tumblebug 컨테이너 실행
./scripts/runTumblebug.sh
or
docker run -p 1323:1323 \ -v ${HOME}/go/src/github.com/cloud-barista/cb-tumblebug/meta_db:/app/meta_db \ --name cb-tumblebug \ cloudbaristaorg/cb-tumblebug:x.x.x
-
cb-operator를 통해 CB-TB를 포함한 Cloud-Barista 전체 FW를 통합 실행 가능
$ git clone https://github.com/cloud-barista/cb-operator.git $ cd cb-operator/src cb-operator/src$ make cb-operator/src$ ./operator
-
필요 패키지 또는 도구 설치
- Git, gcc, make 설치
sudo apt update sudo apt install make gcc git
- Go 설치
- https://golang.org/dl/ 를 참고하여 Go 설치 (추천 개발 환경: Go v1.21.6 이상)
- 설치 예시
- Go 다운로드 및 압축 해제
wget https://go.dev/dl/go1.21.6.linux-amd64.tar.gz; sudo rm -rf /usr/local/go && sudo tar -C /usr/local -xzf go1.21.6.linux-amd64.tar.gz
.bashrc
파일 하단에 다음을 추가echo 'export PATH=$PATH:/usr/local/go/bin:$HOME/go/bin' >> ~/.bashrc echo 'export GOPATH=$HOME/go' >> ~/.bashrc
.bashrc
변경 내용을 적용하고 설치 현황 확인source ~/.bashrc echo $GOPATH go env go version
- Go 다운로드 및 압축 해제
- Git, gcc, make 설치
-
CB-Tumblebug 소스 다운로드
-
CB-Tumblebug 저장소 클론
git clone --depth 1 https://github.com/cloud-barista/cb-tumblebug.git $HOME/go/src/github.com/cloud-barista/cb-tumblebug cd ~/go/src/github.com/cloud-barista/cb-tumblebug
--depth 1
옵션은 commit 히스토리를 제한적으로 다운로드하여 용량을 줄이므로, 기여를 위해서는 해당 옵션을 지정하지 않거나 하기 명령어로 commit 히스토리를 다시 다운로드하는 것을 권장.git fetch --unshallow
-
CB-Tumblebug 디렉토리 이동 alias 등록 (편의를 위한 선택 사항. cdtb, cbtbsrc, cdtbtest 키워드로 디렉토리 이동)
echo "alias cdtb='cd $HOME/go/src/github.com/cloud-barista/cb-tumblebug'" >> ~/.bashrc echo "alias cdtbsrc='cd $HOME/go/src/github.com/cloud-barista/cb-tumblebug/src'" >> ~/.bashrc echo "alias cdtbtest='cd $HOME/go/src/github.com/cloud-barista/cb-tumblebug/src/testclient/scripts'" >> ~/.bashrc source ~/.bashrc
-
-
빌드 실행
cd ~/go/src/github.com/cloud-barista/cb-tumblebug/src make
의존성이 있는 패키지는 자동 다운로드됨. 처음 빌드하는 경우 시간이 다소 소요되며, 이후 Go 빌드 캐시를 통해 빌드 속도가 향상됨.
-
(참고) Swagger API 문서 업데이트 필요 시
cb-tumblebug/src/
에서make swag
실행- API 문서 파일은
cb-tumblebug/src/api/rest/docs/swagger.yaml
에 생성됨 - 해당 API 문서는 http://localhost:1323/tumblebug/swagger/ 로컬에서 웹브라우저로 확인 가능 (CB-Tumblebug 구동 시 자동으로 제공)
- Swagger 기반 API 문서 업데이트 방법 상세 정보
- API 문서 파일은
-
CB-Spider 실행 CB-Tumblebug은 클라우드 제어를 위해서 CB-Spider를 활용(필수 구동)
- (추천 실행 방법) CB-TB 스크립트를 통한 CB-Spider 컨테이너 실행 (가급적 지정된 버전 사용)
Docker가 설치되어 있어야 하며 설치되어 있지 않은 경우, 아래 스크립트 활용 가능 (프로덕션용 구성은 아님)
cd ~/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/runSpider.sh
컨테이너 이외의 설치 방법은 CB-Spider 참고cd ~/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/installDocker.sh
- (추천 실행 방법) CB-TB 스크립트를 통한 CB-Spider 컨테이너 실행 (가급적 지정된 버전 사용)
-
CB-Tumblebug 실행에 필요한 환경변수 설정 (다른 탭에서)
cb-tumblebug/conf/setup.env
내용 확인 및 설정 (CB-Tumblebug 환경변수, 필요에 따라 변경)- 환경변수를 시스템에 반영
cd ~/go/src/github.com/cloud-barista/cb-tumblebug source conf/setup.env
- (참고) 필요에 따라 SELF_ENDPOINT 환경변수(외부에서 접속 가능한 주소)를 스크립트를 통해 자동으로 지정
- CB-Tumblebug을 실행하면 Swagger API Dashboard가 활성화되며, 외부에서 Dashboard에 접속 및 제어하려는 경우에 필요
cd ~/go/src/github.com/cloud-barista/cb-tumblebug source ./scripts/setPublicIP.sh
- 환경변수를 시스템에 반영
cb-tumblebug/conf
의store_conf.yaml
내용 확인 및 설정 (cb-store 환경변수, 필요에 따라 변경)- storetype 지정 (NUTSDB 또는 ETCD 지정)
- NUTSDB(local DB) 설정시 DB 데이터가 포함된 주소 지정이 필요 (기본은
cb-tumblebug/meta_db/dat
에 파일로 추가됨)
-
CB-Tumblebug 실행
cd ~/go/src/github.com/cloud-barista/cb-tumblebug/src make run
또는 CB-Tumblebug 스크립트를 통한 CB-Tumblebug 컨테이너 실행
cd ~/go/src/github.com/cloud-barista/cb-tumblebug export CBTUMBLEBUG_ROOT=$HOME/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/runTumblebug.sh
CB-Tumblebug 서버 실행 화면
██████╗██████╗ ████████╗██████╗ ██╔════╝██╔══██╗ ╚══██╔══╝██╔══██╗ ██║ ██████╔╝█████╗██║ ██████╔╝ ██║ ██╔══██╗╚════╝██║ ██╔══██╗ ╚██████╗██████╔╝ ██║ ██████╔╝ ╚═════╝╚═════╝ ╚═╝ ╚═════╝ ██████╗ ███████╗ █████╗ ██████╗ ██╗ ██╗ ██╔══██╗██╔════╝██╔══██╗██╔══██╗╚██╗ ██╔╝ ██████╔╝█████╗ ███████║██║ ██║ ╚████╔╝ ██╔══██╗██╔══╝ ██╔══██║██║ ██║ ╚██╔╝ ██║ ██║███████╗██║ ██║██████╔╝ ██║ ╚═╝ ╚═╝╚══════╝╚═╝ ╚═╝╚═════╝ ╚═╝ Multi-cloud infrastructure managemenet framework ________________________________________________ https://github.com/cloud-barista/cb-tumblebug Access to API dashboard (username: default / password: default) http://xxx.xxx.xxx.xxx:1323/tumblebug/api ⇨ http server started on [::]:1323
cb-tumblebug/conf/setup.env
기본 설정 활용시, 시스템 로그는cb-tumblebug/log/tumblebug.log
에 저장됨 (log는 zerolog를 통해 기록)
- 클라우드 credential 등록을 위한
credentials.yaml
생성 및 정보 입력- 개요
credentials.yaml
는 CB-TB가 지원하는 클라우드 타입 (AWS, GCP, AZURE, ALIBABA 등)에 대해 사용자 인증 정보를 입력 및 보관하는 파일~/.cloud-barista/
디렉토리에 위치해야 함template.credentials.yaml
를 참조하여credentials.yaml
파일 생성 및 내용 입력 필요
- 파일 생성 방법: CB-TB 스크립트를 통해
credentials.yaml
파일 자동 생성 (~/.cloud-barista/
)cd ~/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/init/genCredential.sh
- 정보 입력 방법: ``~/.cloud-barista/credentials.yaml`에 사용자 계정 정보 입력 (참고: CSP별 인증 정보 획득 방법)
### Cloud credentials for credential holders (default: admin) credentialholder: admin: alibaba: # ClientId(ClientId): client ID of the EIAM application # Example: app_mkv7rgt4d7i4u7zqtzev2mxxxx ClientId: # ClientSecret(ClientSecret): client secret of the EIAM application # Example: CSEHDcHcrUKHw1CuxkJEHPveWRXBGqVqRsxxxx ClientSecret: aws: # ClientId(aws_access_key_id) # ex: AKIASSSSSSSSSSS56DJH ClientId: # ClientSecret(aws_secret_access_key) # ex: jrcy9y0Psejjfeosifj3/yxYcgadklwihjdljMIQ0 ClientSecret: ...
- 개요
- 모든 멀티 클라우드 연결 정보 및 공통 자원 등록
- 개요
- CB-TB의 멀티클라우드 인프라를 생성하기 위해서 클라우드에 대한 연결 정보 (크리덴셜), 공통 활용 이미지 및 스펙 등의 등록이 필요
- 등록 방법: README.md for init.py를 참고하여,
init.py
스크립트 실행 (확인 메시지에 대해 'y' 입력)cd ~/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/init/init.sh
~/.cloud-barista/credentials.yaml
의 크레덴셜이 자동 등록됨 (cloudinfo.yaml
에 기록된 모든 CSP 및 리전 정보가 시스템에 자동 등록됨- 참고: 해당 파일은
update-cloudinfo.py
를 통해 최신 CSP 현황을 확인하고, 리뷰 파일을 검토하여 업데이트할 수 있음 (업데이트 기여 환영)
- 참고: 해당 파일은
assets
의cloudimage.csv
cloudspec.csv
파일에 기록된 공통 이미지 및 스펙 자동 등록됨
- 개요
-
CB-Tumblebug & CB-Spider 서버 종료
- CB-Spider:
ctrl
+c
를 통해서 서버 종료 - CB-Tumblebug:
ctrl
+c
를 통해서 서버 종료 (종료 이벤트 발생시, Graceful shutdown이 동작: 10초 내에 처리 가능한 API 요청 마무리) - 시스템 내부 오류 등 정리가 필요한 경우
- CB-Tumblebug을 통해 생성한 자원 확인 및 삭제
- CB-Tumblebug & CB-Spider 메타데이터 삭제
cd ~/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/cleanDB.sh
- CB-Spider:
-
CB-Tumblebug & CB-Spider 버전 업그레이드시 (업그레이드의 영향을 명확하게 파악하고 있는 경우 하기 정리 작업 불필요)
- CB-Tumblebug을 통해 생성한 자원 확인 및 삭제
- CB-Tumblebug & CB-Spider 메타데이터 삭제
cd ~/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/cleanDB.sh
- 업그레이드된 버전으로 재구동
- CB-MapUI 를 통해 MCIS 생성, 형상 확인 및 제어 가능
- CB-Tumblebug은 지도 형태로 MCIS 배포 형상 확인을 위해 CB-MapUI를 활용
- (추천 실행 방법) CB-TB 스크립트를 통한 CB-MapUI 컨테이너 실행
cd ~/go/src/github.com/cloud-barista/cb-tumblebug ./scripts/runMapUI.sh
- 웹브라우저에서 http://{HostIP}:1324 에 접속하여 활용
- REST API AUTH: CB-TB API는 기본 Bacis auth로 인코딩되어 있으며, 서버 실행시 입력한
Username
과Password
를 Base64로 인코딩하여 API header에 포함하여 한다. - 빠르게 MCIS 생성하는 방법
- CB-Tumblebug 멀티 클라우드 네임스페이스 관리 API를 통해서 Namespace 생성
- CB-Tumblebug 멀티 클라우드 인프라 자원(MCIR) 관리 API를 통해서 VM 생성을 위한 자원 (MCIR) 생성
- CB-Tumblebug 멀티 클라우드 인프라 서비스(MCIS) 관리 API를 통해서 MCIS 생성, 조회, 제어, 원격명령수행, 종료 및 삭제
- CB-Tumblebug 최적 배치 및 동적 프로비저닝
src/testclient/scripts/
는 복잡한 단계가 필요한 MCIS (MC-Infra) 프로비저닝 절차를 간소화 및 자동화시킨 Bash shell 기반 스크립트를 제공.
- 1 단계: 클라우드 인증 정보 및 테스트 기본 정보 입력
- 2 단계: Namespace, MCIR, MCIS 등 프로비저닝 (통합 제어 / 개별 제어 중 선택)
- 3 단계: 멀티 클라우드 인프라 유스케이스 자동 배포
src/testclient/scripts/
이동conf.env
설정- CB-Spider 및 CB-Tumblebug 서버 엔드포인트, 클라우드 리젼, 테스트용 이미지명, 테스트용 스팩명 등 테스트 기본 정보 제공
- 이미 많은 클라우드 타입에 대한 정보가 조사 및 입력되어 있으므로, 수정없이 사용 가능. (단, 지정된 Spec에 따라 과금이 발생할 수 있으므로 확인 필요)
- 테스트용 VM 이미지 수정 방식:
IMAGE_NAME[$IX,$IY]=ami-061eb2b23f9f8839c
- 테스트용 VM 스펙 수정 방식:
SPEC_NAME[$IX,$IY]=m4.4xlarge
- 테스트용 VM 이미지 수정 방식:
testSet.env
설정- MCIS 프로비저닝에 사용될, 클라우드 및 리전 구성을 파일로 설정 (기존의
testSet.env
를 변경해도 되고, 복사하여 활용도 가능) - 조합할 CSP 종류 지정
- 조합할 CSP의 리전 지정
- 각 CSP 설정 항목으로 이동
# AWS (Total: 21 Regions)
NumRegion[$IndexAWS]=2
에서 구성하고 싶은 리전의 수를 지정 (예시에서는 2로 지정)- 리전 리스트의 라인 순서를 변경하여 원하는 리전으로 셋팅 (
NumRegion[$IndexAWS]=2
인 경우 가장 위에 나열된 2개의 리전이 선택)
- 각 CSP 설정 항목으로 이동
- Be aware!
- Be aware that creating VMs on public CSPs such as AWS, GCP, Azure, etc. may be billed.
- With the default setting of
testSet.env
, TestClouds (TestCloud01
,TestCloud02
,TestCloud03
) will be used to create mock VMs. TestCloud01
,TestCloud02
,TestCloud03
are not real CSPs. It is used for testing purpose. (not support SSH into VM)- Anyway, please be aware cloud usage cost when you use public CSPs.
- MCIS 프로비저닝에 사용될, 클라우드 및 리전 구성을 파일로 설정 (기존의
- 제어하고 싶은 리소스 오브젝트에 대해, 해당 디렉토리로 이동하여 필요한 시험 수행
- 오브젝트는 서로 의존성이 있으므로, 번호를 참고하여 오름차순으로 수행하는 것이 바람직함
1.configureSpider
# 클라우드 정보 등록 관련 스크립트 모음2.configureTumblebug
# 네임스페이스 및 동적 환경 설정 관련 스크립트 모음3.vNet
# MCIR vNet 생성 관련 스크립트 모음4.securityGroup
# MCIR securityGroup 생성 관련 스크립트 모음5.sshKey
# MCIR sshKey 생성 관련 스크립트 모음6.image
# MCIR image 등록 관련 스크립트 모음7.spec
# MCIR spec 등록 관련 스크립트 모음8.mcis
# MCIS 생성 및 제어, MCIS 원격 커맨드 등 스크립트 모음9.monitoring
# CB-TB를 통해서 CB-DF 모니터링 에이전트 설치 및 모니터링 테스트 스크립트 모음10.nlb
# NLB 관련 스크립트 모음11.dataDisk
# dataDisk 관련 스크립트 모음12.customImage
# customImage 관련 스크립트 모음13.cluster
# K8s cluster 관련 스크립트 모음
- 오브젝트는 서로 의존성이 있으므로, 번호를 참고하여 오름차순으로 수행하는 것이 바람직함
src/testclient/scripts/sequentialFullTest/
에 포함된create-all.sh
및clean-all.sh
을 수행하면 전체 과정을 한번에 테스트 가능└── sequentialFullTest # Cloud 정보 등록, NS 생성, MCIR 생성, MCIS 생성까지 한번에 자동 테스트 ├── check-test-config.sh # 현재 testSet에 지정된 멀티 클라우드 인프라 구성을 확인 ├── create-all.sh # Cloud 정보 등록, NS 생성, MCIR 생성, MCIS 생성까지 한번에 자동 테스트 ├── gen-sshKey.sh # 수행이 진행된 테스트 로그 (MCIS에 접속 가능한 SSH키 파일 생성) ├── command-mcis.sh # 생성된 MCIS(다중VM)에 원격 명령 수행 ├── deploy-nginx-mcis.sh # 생성된 MCIS(다중VM)에 Nginx 자동 배포 ├── create-mcis-for-df.sh # CB-Dragonfly 호스팅을 위한 MCIS 생성 ├── deploy-dragonfly-docker.sh # MCIS에 CB-Dragonfly 자동 배포 및 환경 자동 설정 ├── clean-all.sh # 모든 오브젝트를 생성의 역순으로 삭제 ├── create-cluster-only.sh # testSet에 지정된 멀티 클라우드 인프라를 대상으로 K8s 클러스터를 생성 ├── get-cluster.sh # testSet에 지정된 멀티 클라우드 인프라를 대상으로 K8s 클러스터 정보를 얻음 ├── clean-cluster-only.sh # testSet에 지정된 멀티 클라우드 인프라를 대상으로 K8s 클러스터를 삭제 ├── force-clean-cluster-only.sh # testSet에 지정된 멀티 클라우드 인프라를 대상으로 K8s 클러스터를 강제 삭제 ├── add-nodegroup.sh # 생성된 K8s 클러스터에 신규 노드그룹을 생성 ├── remove-nodegroup.sh # 생성된 K8s 클러스터에 생성된 신규 노드그룹을 삭제 ├── set-nodegroup-autoscaling.sh # 생성된 노드그룹의 오토스케일링 설정값을 off로 변경 ├── change-nodegroup-autoscalesize.sh # 생성된 노드그룹의 오토스케일 크기를 변경 ├── deploy-weavescope-to-cluster.sh # 생성된 K8s 클러스터에 weavescope를 배포 └── executionStatus # 수행이 진행된 테스트 로그 (testAll 수행시 정보가 추가되며, cleanAll 수행시 정보가 제거됨. 진행중인 작업 확인 가능)
- 사용 방식
-
MCIS 생성 테스트
./create-all.sh -n shson -f ../testSetCustom.env
# ../testSetCustom.env 에 구성된 클라우드 조합으로 MCIS 생성 수행- ../testSetCustom.env에 구성된 MCIS 생성 형상을 확인하는 절차 자동으로 진행
- 실행 결과 예시
Table: All VMs in the MCIS : cb-shson ID Status PublicIP PrivateIP CloudType CloudRegion CreatedTime -- ------ -------- --------- --------- ----------- ----------- aws-ap-southeast-1-0 Running xx.250.xx.73 192.168.2.180 aws ap-southeast-1 2021-09-17 14:59:30 aws-ca-central-1-0 Running x.97.xx.230 192.168.4.98 aws ca-central-1 2021-09-17 14:59:58 gcp-asia-east1-0 Running xx.229.xxx.26 192.168.3.2 gcp asia-east1 2021-09-17 14:59:42 [DATE: 17/09/2021 15:00:00] [ElapsedTime: 49s (0m:49s)] [Command: ./create-mcis-only.sh all 1 shson ../testSetCustom.env 1] [Executed Command List] [MCIR:aws-ap-southeast-1(28s)] create-mcir-ns-cloud.sh (MCIR) aws 1 shson ../testSetCustom.env [MCIR:aws-ca-central-1(34s)] create-mcir-ns-cloud.sh (MCIR) aws 2 shson ../testSetCustom.env [MCIR:gcp-asia-east1(93s)] create-mcir-ns-cloud.sh (MCIR) gcp 1 shson ../testSetCustom.env [MCIS:cb-shsonvm4(19s+More)] create-mcis-only.sh (MCIS) all 1 shson ../testSetCustom.env [DATE: 17/09/2021 15:00:00] [ElapsedTime: 149s (2m:29s)] [Command: ./create-all.sh -n shson -f ../testSetCustom.env -x 1]
-
MCIS 제거 테스트 (생성에서 활용한 입력 파라미터로 삭제 필요)
./clean-all.sh -n shson -f ../testSetCustom.env
# ../testSetCustom.env 에 구성된 클라우드 조합으로 제거 수행- Be aware!
- If you created MCIS (VMs) for testing in public clouds, the VMs may be charged.
- You need to termiate MCIS by using
clean-all
to avoid unexpected billing. - Anyway, please be aware cloud usage cost when you use public CSPs.
-
MCIS SSH 접속키 생성 및 각 VM에 접속
./gen-sshKey.sh -n shson -f ../testSetCustom.env
# MCIS에 구성된 모든 VM의 접속키 리턴- 실행 결과 예시
... [GENERATED PRIVATE KEY (PEM, PPK)] [MCIS INFO: mc-shson] [VMIP]: 13.212.254.59 [MCISID]: mc-shson [VMID]: aws-ap-southeast-1-0 ./sshkey-tmp/aws-ap-southeast-1-shson.pem ./sshkey-tmp/aws-ap-southeast-1-shson.ppk ... [SSH COMMAND EXAMPLE] [VMIP]: 13.212.254.59 [MCISID]: mc-shson [VMID]: aws-ap-southeast-1-0 ssh -i ./sshkey-tmp/aws-ap-southeast-1-shson.pem [email protected] -o StrictHostKeyChecking=no ... [VMIP]: 35.182.30.37 [MCISID]: mc-shson [VMID]: aws-ca-central-1-0 ssh -i ./sshkey-tmp/aws-ca-central-1-shson.pem [email protected] -o StrictHostKeyChecking=no
-
MCIS SSH 원격 커맨드 실행을 통해 VM 통합 커맨드 확인
./command-mcis.sh -n shson -f ../testSetCustom.env
# MCIS의 모든 VM에 IP 및 Hostname 조회를 수행
-
K8s 클러스터 테스트 (WIP: CSP별 안정화 작업 진행 중)
init.sh
를 사전 실행함을 가정./create-mcir-ns-cloud.sh -n tb -f ../testSet.env
# K8s 클러스터 생성에 필요한 MCIR 생성./create-cluster-only.sh -n tb -f ../testSet.env -x 1 -z 1
# K8s 클러스터를 생성(-x 최대노드수 -z 노드그룹 및 클러스터 추가 이름)./get-cluster.sh -n tb -f ../testSet.env -z 1
# K8s 클러스터 정보 얻기./add-nodegroup.sh -n tb -f ../testSet.env -x 1 -z 1
# K8s 클러스터에 신규 노드 그룹 추가./change-nodegroup-autoscalesize.sh -n tb -f ../testSet.env -x 1 -z 1
# 신규 노드 그룹의 autoscale size를 기존+1로 변경./deploy-weavescope-to-cluster.sh -n tb -f ../testSet.env -y n
# 생성한 클러스터에 weascope를 배포./set-nodegroup-autoscaling.sh -n tb -f ../testSet.env -z 1
# 신규 노드그룹의 autosacling 설정값을 off로 변경./remove-nodegroup.sh -n tb -f ../testSet.env -z 1
# 신규 생성한 노드그룹을 삭제./clean-cluster-only.sh -n tb -f ../testSet.env -z 1
# 생성한 K8s 클러스터를 삭제./force-clean-cluster-only.sh -n tb -f ../testSet.env -z 1
# 생성한 K8s 클러스터를 삭제가 되지 않는 경우 강제 삭제./clean-mcir-ns-cloud.h -n tb -f ../testSet.env
# 생성한 MCIR 삭제
-
입출력 예시 보기
~/go/src/github.com/cloud-barista/cb-tumblebug/src/testclient/scripts/sequentialFullTest$ `./create-all.sh -n shson -f ../testSetCustom.env`
####################################################################
## Create MCIS from Zero Base
####################################################################
[Test for AWS]
####################################################################
## 0. Create Cloud Connction Config
####################################################################
[Test for AWS]
{
"ProviderName" : "AWS",
"DriverLibFileName" : "aws-driver-v1.0.so",
"DriverName" : "aws-driver01"
}
..........
"RegionName" : "aws-us-east-1"
}
{
"CredentialName" : "aws-credential01",
"RegionName" : "aws-us-east-1",
"DriverName" : "aws-driver01",
"ConfigName" : "aws-us-east-1",
"ProviderName" : "AWS"
}
####################################################################
## 0. Namespace: Create
####################################################################
{
"message" : "The namespace NS-01 already exists."
}
####################################################################
## 1. vpc: Create
####################################################################
[Test for AWS]
{
"subnetInfoList" : [
{
"IId" : {
"SystemId" : "subnet-0ab25b7090afa97b7",
"NameId" : "aws-us-east-1-shson"
},
................
"status" : "",
"name" : "aws-us-east-1-shson",
"keyValueList" : null,
"connectionName" : "aws-us-east-1",
"cspVNetId" : "vpc-0e3004f28e8a89057"
}
Dozing for 10 : 1 2 3 4 5 6 7 8 9 10 (Back to work)
####################################################################
## 2. SecurityGroup: Create
####################################################################
[Test for AWS]
{
"keyValueList" : [
{
"Value" : "aws-us-east-1-shson-delimiter-aws-us-east-1-shson",
"Key" : "GroupName"
},
{
"Key" : "VpcID",
...........
"name" : "aws-us-east-1-shson",
"description" : "test description",
"cspSecurityGroupId" : "sg-033e4b7c42671873c",
"id" : "aws-us-east-1-shson"
}
Dozing for 10 : 1 2 3 4 5 6 7 8 9 10 (Back to work)
####################################################################
## 3. sshKey: Create
####################################################################
[Test for AWS]
{
"name" : "aws-us-east-1-shson",
"fingerprint" : "d2:1a:a0:6d:b3:f7:8e:b7:44:9f:13:9c:d6:e3:a8:c3:58:8c:de:27",
..............
"id" : "aws-us-east-1-shson",
"description" : "",
"privateKey" : "-----BEGIN RSA PRIVATE KEY-----\nMIIEogIBAAKCAQ\ KEY-----",
"username" : ""
}
####################################################################
## 4. image: Register
####################################################################
[Test for AWS]
{
"keyValueList" : [
{
"Key" : "",
"Value" : ""
},
{
"Value" : "",
"Key" : ""
}
],
"description" : "Canonical, Ubuntu, 18.04 LTS, amd64 bionic",
"cspImageName" : "",
"connectionName" : "aws-us-east-1",
"status" : "",
"creationDate" : "",
"cspImageId" : "ami-085925f297f89fce1",
"name" : "aws-us-east-1-shson",
"guestOS" : "Ubuntu",
"id" : "aws-us-east-1-shson"
}
####################################################################
## 5. spec: Register
####################################################################
[Test for AWS]
{
"mem_MiB" : "1024",
"max_num_storage" : "",
........
"mem_GiB" : "1",
"id" : "aws-us-east-1-shson",
"num_core" : "",
"cspSpecName" : "t2.micro",
"storage_GiB" : "",
"ebs_bw_Mbps" : "",
"connectionName" : "aws-us-east-1",
"net_bw_Gbps" : "",
"gpu_model" : "",
"cost_per_hour" : "",
"name" : "aws-us-east-1-shson"
}
####################################################################
## 6. vm: Create MCIS
####################################################################
[Test for AWS]
{
"targetAction" : "Create",
"status" : "Running-(3/3)",
"id" : "aws-us-east-1-shson",
"name" : "aws-us-east-1-shson",
"description" : "Tumblebug Demo",
"targetStatus" : "Running",
"placementAlgo" : "",
"vm" : [
{
"vmUserId" : "",
"targetStatus" : "None",
"subnetId" : "aws-us-east-1-shson",
"location" : {
"nativeRegion" : "us-east-1",
"cloudType" : "aws",
"latitude" : "38.1300",
"briefAddr" : "Virginia",
"longitude" : "-78.4500"
},
"vm_accessId" : "",
"region" : {
"Region" : "us-east-1",
"Zone" : "us-east-1f"
},
"imageId" : "aws-us-east-1-shson",
"privateDNS" : "ip-192-168-1-108.ec2.internal",
"status" : "Running",
"security_groupIds" : [
"aws-us-east-1-shson"
],
"vm_access_passwd" : "",
.........
"VMUserId" : "",
"SecurityGroupIIds" : [
{
"SystemId" : "sg-033e4b7c42671873c",
"NameId" : "aws-us-east-1-shson"
}
],
"PrivateDNS" : "ip-192-168-1-108.ec2.internal",
"StartTime" : "2020-05-30T18:33:42Z",
"VMBlockDisk" : "/dev/sda1",
"ImageIId" : {
"SystemId" : "ami-085925f297f89fce1",
"NameId" : "ami-085925f297f89fce1"
}
},
"publicIP" : "35.173.215.4",
"name" : "aws-us-east-1-shson-01",
"id" : "aws-us-east-1-shson-01",
"vnetId" : "aws-us-east-1-shson",
"sshKeyId" : "aws-us-east-1-shson",
"privateIP" : "192.168.1.108",
"config_name" : "aws-us-east-1",
"vmBlockDisk" : "/dev/sda1",
"targetAction" : "None",
"description" : "description",
"specId" : "aws-us-east-1-shson",
"publicDNS" : "",
"vmUserPasswd" : ""
},
{
"vmBlockDisk" : "/dev/sda1",
"targetAction" : "None",
"description" : "description",
"specId" : "aws-us-east-1-shson",
"vmUserPasswd" : "",
..........
}
]
}
Dozing for 1 : 1 (Back to work)
####################################################################
## 6. VM: Status MCIS
####################################################################
[Test for AWS]
{
"targetStatus" : "None",
"id" : "aws-us-east-1-shson",
"targetAction" : "None",
"vm" : [
{
"publicIp" : "35.173.215.4",
"nativeStatus" : "Running",
"cspId" : "aws-us-east-1-shson-01",
"name" : "aws-us-east-1-shson-01",
"status" : "Running",
"targetAction" : "None",
"targetStatus" : "None",
"id" : "aws-us-east-1-shson-01"
},
{
"name" : "aws-us-east-1-shson-02",
"status" : "Running",
"targetAction" : "None",
"targetStatus" : "None",
"id" : "aws-us-east-1-shson-02",
"publicIp" : "18.206.13.233",
"cspId" : "aws-us-east-1-shson-02",
"nativeStatus" : "Running"
},
{
"targetAction" : "None",
"id" : "aws-us-east-1-shson-03",
"targetStatus" : "None",
"name" : "aws-us-east-1-shson-03",
"status" : "Running",
"cspId" : "aws-us-east-1-shson-03",
"nativeStatus" : "Running",
"publicIp" : "18.232.53.134"
}
],
"status" : "Running-(3/3)",
"name" : "aws-us-east-1-shson"
}
[Logging to notify latest command history]
[Executed Command List]
[CMD] create-all.sh gcp 1 shson
[CMD] create-all.sh alibaba 1 shson
[CMD] create-all.sh aws 1 shson
마지막의 [Executed Command List] 에는 수행한 커맨드의 히스토리가 포함됨. (cat ./executionStatus 를 통해 다시 확인 가능)
- deploy-nginx-mcis.sh # 생성된 MCIS(다중VM)에 Nginx 자동 배포
Thanks goes to these wonderful people (emoji key):