keycloak이라는 SSO solution을 이용하여 Jenkins 그리고 Spinnaker를 SAML과 OIDC 방식으로 연동하고
한번의 로그인으로 각 솔루션을 접근할수 있는 방법에 대하여 알아보도록 하겠습니다.
우선 Keycloak에 대하여 알아보도록 하겠습니다.
현대의 Application과 Service들에 대한 오픈소스 계정 및 접근 관리 솔루션으로 기존에 서비스 되고 있었거나
새로운 Application을 구현하고자할때 해당 코드의 변경없이(혹은 약간의 수정만으로) 인증과 자원보호의 기능을 제공하는 솔루션입니다.
해당 솔루션은 오픈소스로 제공되며 Community 버전의 경우 별도의 비용없이 사용이 가능하며 Red Hat Single Sign-On이라는 솔루션으로
벤더의 지원을 구매하여 사용하실수도 있습니다.
여기까지는 간단하게 Keycloak이라는 SSO에 대하여 알아보았고 이제부터 Keycloak을 Kubernetes 환경에 배포하고
배포된 Keycloak을 이용하여 Jenkins, Spinnaker에 SSO 환경을 구성하는 방법에 대하여 알아보도록 하겠습니다.
우선 간단하게 helm을 이용하여 Kubernetes환경에서 keycloak을 구성하는 방법에 대하여 알아보도록 하겠습니다.
설치시 helm을 이용할 예정이기에 values.yaml내에 아래와 같은 몇가지 설정을 변경합니다.
[root@labs-kube-infra001 keycloak]# kubectl create ns keycloak
[root@labs-kube-infra001 keycloak]# helm repo add codecentric https://codecentric.github.io/helm-charts
"codecentric" has been added to your repositories
[root@labs-kube-infra001 keycloak]# mkdir keycloak && cd keycloak
[root@labs-kube-infra001 keycloak]# helm show values codecentric/keycloak > values.yaml
[root@labs-kube-infra001 keycloak]# cat values.yaml
...
## Username for the initial Keycloak admin user
username: keycloak
## Password for the initial Keycloak admin user. Applicable only if existingSecret is not set.
## If not set, a random 10 characters password will be used
password: "Pa55w0rd$#"
...
service:
annotations: {}
# service.beta.kubernetes.io/aws-load-balancer-internal: "0.0.0.0/0"
labels: {}
# key: value
## ServiceType
## ref: https://kubernetes.io/docs/user-guide/services/#publishing-services---service-types
type: LoadBalancer
...
persistence:
# If true, the Postgres chart is deployed
deployPostgres: true
# The database vendor. Can be either "postgres", "mysql", "mariadb", or "h2"
dbVendor: "postgres"
...
postgresql:
...
persistence:
## Enable PostgreSQL persistence using Persistent Volume Claims.
##
enabled: true
...자 이제 설치를 진행해보도록 하겠습니다.
[root@labs-kube-infra001 keycloak]# helm install --name keycloak -f values.yaml codecentric/keycloak --namespace keycloak
NAME: keycloak
LAST DEPLOYED: Thu Mar 19 15:33:50 2020
NAMESPACE: keycloak
STATUS: DEPLOYED
RESOURCES:
==> v1/ConfigMap
NAME DATA AGE
keycloak-sh 1 2s
keycloak-startup 1 2s
keycloak-test 1 2s
==> v1/Pod(related)
NAME READY STATUS RESTARTS AGE
keycloak-0 0/1 Init:0/1 0 1s
keycloak-postgresql-0 0/1 Pending 0 1s
==> v1/Secret
NAME TYPE DATA AGE
keycloak-http Opaque 1 3s
keycloak-postgresql Opaque 1 3s
==> v1/Service
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE
keycloak-headless ClusterIP None <none> 80/TCP,8443/TCP 2s
keycloak-http LoadBalancer 10.233.3.82 192.168.197.141 80:32242/TCP,8443:31190/TCP 2s
keycloak-postgresql ClusterIP 10.233.7.200 <none> 5432/TCP 2s
keycloak-postgresql-headless ClusterIP None <none> 5432/TCP 2s
==> v1/StatefulSet
NAME READY AGE
keycloak 0/1 2s
keycloak-postgresql 0/1 2s
NOTES:
Keycloak can be accessed:
* Within your cluster, at the following DNS name at port 80:
keycloak-http.keycloak.svc.cluster.local
* From outside the cluster, run these commands in the same shell:
NOTE:
It may take a few minutes for the LoadBalancer IP to be available.
You can watch the status of by running 'kubectl get svc -w keycloak'
export SERVICE_IP=$(kubectl get svc --namespace keycloak keycloak -o jsonpath='{.status.loadBalancer.ingress[0].ip}')
echo http://$SERVICE_IP:80
Login with the following credentials:
Username: keycloak
To retrieve the initial user password run:
kubectl get secret --namespace keycloak keycloak-http -o jsonpath="{.data.password}" | base64 --decode; echo
[root@labs-kube-infra001 keycloak]# k get po -n keycloak
NAME READY STATUS RESTARTS AGE
keycloak-0 1/1 Running 0 6m42s
keycloak-postgresql-0 1/1 Running 0 6m42s
[root@labs-kube-infra001 keycloak]# k get svc -n keycloak
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE
keycloak-headless ClusterIP None <none> 80/TCP,8443/TCP 6m49s
keycloak-http LoadBalancer 10.233.3.82 192.168.197.141 80:32242/TCP,8443:31190/TCP 6m49s
keycloak-postgresql ClusterIP 10.233.7.200 <none> 5432/TCP 6m49s
keycloak-postgresql-headless ClusterIP None <none> 5432/TCP 6m49s
[root@labs-kube-infra001 keycloak]# k get statefulset -n keycloak
NAME READY AGE
keycloak 1/1 7m6s
keycloak-postgresql 1/1 7m6s설치가 완료되고 keycloak 서비스에 접근하게 되면 아래와 같은 관리자 화면이 출력됩니다.
로그인 계정은 앞서 helm values.yaml 파일에 설정했던 value를 사용하여 로그인을 합니다.
docker-compose를 사용할수 있는 예제도 존재하니 테스트를 해보고자 하는 경우 간단히 docker-compose 예제를 다운로드 받아
설치 및 테스트를 수행해보기를 추천드립니다.
SSO 혹은 Keycloak이 처음이라면 아래의 용어에 우선 친숙해질 필요가 있습니다.
간단하게 설명된 용어들을 읽어보고 연동을 진행해보기를 추천드립니다.
Keycloak과 Jenkins를 연결하여 인증을 Keycloak을 통해서 받을 수 있도록 해보도록 하겠습니다.
Keycloak 연동에는 다양한 방식이 있고 역할기반의 제어도 가능하나 여기서는 Jenkins의 경우
SAML을 이용한 방식의 로그인만을 연동하는 방법에 대하여 알아볼 예정입니다.
참고로 Jenkins는 jenkins.openlabs:8080 으로 접속되는 환경으로 구성이 이미 완료된 상태입니다.
앞서 설명하였던대로 Master가 기본으로 설정되어 있지만 이를 사용하지 않고 새로운 Realm을 생성합니다.
생성된 Realm의 Realm Settings로 이동하여 Endpoint를 확인합니다.
(해당 Endpoint 정보는 Jenkins 의 Keycloak 관련 SAML 설정상에서 사용될 예정입니다.)
클릭해보면 다음과 같은 XML 형태의 문서가 출력되게 됩니다.
해당 정보를 사전에 복사해둡니다.
keycloak를 사용한 인증을 위한 Jenkins Client를 생성합니다.
설정은 아래 그림에 체크되어 있는 설정을 추가하여 설정을 마무리 합니다.
위에 체크된 항목에 대해 추가를 진행한다.
만약 설정시 아래와 같은 이슈가 있다면 참고하시기 바랍니다.
이제 Keycloak SSO를 사용하기 위한 Jenkins의 설정을 추가해 보도록 하겠습니다.
Jenkins의 경우 앞서 Keycloak에서 설정했듯이 SAML을 이용할 예정입니다.
하여 SAML plugin을 먼저 설치합니다.
SAML plugin 설치후 global security 설정에서 아래와 같은 설정을 진행합니다.
위에 체크된 항목을 변경하여 설정을 완료합니다.
이제 설정은 완료되었습니다. 아래와 같이 직접 Jenkins UI로 접근을 시도해봅니다.
이제 SSO 연동을 위한 Jenkins 로그인 과정을 완료하였습니다.
SSO의 경우 한번의 로그인을 통해 다수의 서비스를 사용할수 있는 것이기에 다음 Spinnaker를 SSO와 연동하여 두개의 서비스가
한번의 로그인으로 이루어질수 있는지 추가로 알아보도록 하겠습니다.
Keycloak은 Login Page에 대한 customization을 제공하기 때문에 아래 링크를 활용하여 custom theme를 작성하고
적용하여 자신만의 login page를 구성할수 있습니다.
이번에는 Spinnaker 연동을 해보도록 하겠습니다.
앞서 이야기 드렸듯이 Keycloak 연동에는 다양한 방식이 있고 역할기반의 제어도 가능하나 여기서는 spinnaker의 경우
OIDC를 이용한 방식의 로그인만을 연동하는 방법에 대하여 알아볼 예정입니다.
참고로 spinnaker는 spinnaker.openlabs 으로 접속되는 환경으로 구성이 이미 완료된 상태입니다.
또한 spinnaker-gate.openlabs:8084로 gate가 접속 가능한 환경입니다.
이제 Keycloak에서 spinnaker를 위한 Client를 생성합니다.
이번에는 keycloak에서 권장하는 OIDC(OpenID Connect)로 설정하여 Client를 생성해보도록 하겠습니다.
Jenkins 연동시와 동일하게 Client을 생성합니다.
(Jenkins 에서 생성했던 Realm을 동일하게 사용하는 것을 가정하였습니다.)
이후 아래와 같은 설정에 매칭되는 OIDC json 파일의 내용을 확인합니다.
실제 Json 내용은 다음과 같습니다.
{
"realm": "Openlabs",
"auth-server-url": "http://keycloak.openlabs/auth/",
"ssl-required": "external",
"resource": "spinnaker",
"credentials": {
"secret": "d123150f-2879-4a99-9e22-e40fcaf02bdb"
},
"confidential-port": 0
}여기서 우리는 credentials 정보와 auth-server-url, realm 등을 사용할 예정입니다.
또한 realm 의 endpoint 정보도 확인해놓습니다.
아래와 같이 앞서 생성했던 Realm 의 Settings에서 Endpoints 내에 OpenID Endpoint Configuration을 클릭하여 확인이 가능합니다.
클릭시 아래와 같은 Json 결과가 출력될 것이고 아래 정보는 spinnaker 설정에서 사용될 예정입니다.
실제 사용될 url 정보는 다음과 같습니다.
authorization_endpoint: "http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/auth",
token_endpoint: "http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/token",
userinfo_endpoint: "http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/userinfo"이제 spinnaker에서 설정을 진행해보도록 하겠습니다.
아시다시피 spinnaker의 경우 halyard pod에 접속하여 (혹은 hal command가 가능한 서버에 접속하여) 설정 변경을 수행해야 합니다.
하여 halyard pod에 접속하여 hal command를 수행해봅니다.
jacob@jacob-laptop:~/workspace$ k get po
NAME READY STATUS RESTARTS AGE
spin-clouddriver-5d569c94b8-ffmfs 1/1 Running 0 69d
spin-deck-7754884b55-fq7r4 1/1 Running 0 69d
spin-echo-c57577776-vz8zg 1/1 Running 0 69d
spin-front50-79d4d69b45-klchv 1/1 Running 0 69d
spin-gate-75c76579c4-dxnjp 1/1 Running 0 69d
spin-igor-74d8c59858-zj4bt 1/1 Running 0 69d
spin-orca-f7b8c4676-kfbwp 1/1 Running 0 69d
spin-rosco-7d58898bd6-8h2g5 1/1 Running 0 69d
spinnaker-install-using-hal-x9vds 0/1 Completed 0 70d
spinnaker-minio-5dc587c6f-k9hsx 1/1 Running 0 70d
spinnaker-redis-master-0 1/1 Running 0 70d
spinnaker-redis-slave-0 1/1 Running 0 70d
spinnaker-redis-slave-1 1/1 Running 0 70d
spinnaker-spinnaker-halyard-0 1/1 Running 0 70d
jacob@jacob-laptop:~/workspace$ k exec -it spinnaker-spinnaker-halyard-0 /bin/bash
spinnaker@spinnaker-spinnaker-halyard-0:/workdir$실제 halyard pod에서 수행될 명령어들은 다음과 같습니다.
echo "server:
tomcat:
protocolHeader: X-Forwarded-Proto
remoteIpHeader: X-Forwarded-For
internalProxies: .*
httpsServerPort: X-Forwarded-Port
security:
oauth2:
enabled: true
client:
clientId: spinnaker
clientSecret: d123150f-2879-4a99-9e22-e40fcaf02bdb
userAuthorizationUri: http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/auth
accessTokenUri: http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/token
scope: roles,email,profile
resource:
userInfoUri: http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/userinfo
userInfoMapping:
email: email
firstName: given_name
lastName: family_name
username: preferred_username" > .hal/default/profiles/gate-local.yml
hal config security authn oauth2 edit \
--client-id spinnaker \
--client-secret d123150f-2879-4a99-9e22-e40fcaf02bdb \
--pre-established-redirect-uri http://spinnaker-api.openlabs:8084/login
hal config security authn oauth2 enable
hal config security ui edit --override-base-url http://spinnaker.openlabs:9000
hal config security api edit --override-base-url http://spinnaker-api.openlabs:8084
hal deploy apply
## 혹은 다음 명령 set 수행
hal config security authn oauth2 edit \
--client-id spinnaker \
--client-secret d123150f-2879-4a99-9e22-e40fcaf02bdb \
--pre-established-redirect-uri http://spinnaker-api.openlabs:8084/login \
--access-token-uri http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/token \
--scope read:roles,email,profile \
--user-authorization-uri http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/auth \
--user-info-mapping-email email \
--user-info-mapping-first-name given_name \
--user-info-mapping-last-name family_name \
--user-info-mapping-username preferred_username \
--user-info-uri http://keycloak.openlabs/auth/realms/Openlabs/protocol/openid-connect/userinfo
hal config security authn oauth2 enable
hal config security ui edit --override-base-url http://spinnaker.openlabs:9000
hal config security api edit --override-base-url http://spinnaker-api.openlabs:8084
hal deploy apply물론 helm chart를 이용한 업그레이드 방법도 가능합니다.
additionalProfileConfigMaps:
create: true
data:
gate-local.yml: |-
server:
tomcat:
protocolHeader: X-Forwarded-Proto
remoteIpHeader: X-Forwarded-For
internalProxies: .*
httpsServerPort: X-Forwarded-Port
security:
oauth2:
enabled: true
client:
clientId: spinnaker
clientSecret: xxxx00cc-xxxx-xxxx-xxxx-xxxx2515xxxx
userAuthorizationUri: http://keycloak.openlabs/auth/realms/openlabs/protocol/openid-connect/auth
accessTokenUri: http://keycloak.openlabs/auth/realms/openlabs/protocol/openid-connect/token
scope: roles,email,profile
resource:
userInfoUri: http://keycloak.openlabs/auth/realms/openlabs/protocol/openid-connect/userinfo
userInfoMapping:
email: email
firstName: given_name
lastName: family_name
username: preferred_username
additionalScripts:
create: true
data:
override_baseurls.sh: |-
$HAL_COMMAND config security api edit --override-base-url http://spinnaker-gate.openlabs:8084/
$HAL_COMMAND config security ui edit --override-base-url http://spinnaker.openlabs/위 명령 혹은 helm upgrade를 통한 설정 변경을 수행한 후 실제 로그인을 수행해보도록 하겠습니다.
로그인 완료후 아래와 같이 로그인 계정이 확인됩니다.
자 이제 SSO 기능 검증을 위해 두개의 Application을 로그인시도해보도록 하겠습니다.
두개의 Application을 한번의 로그인으로 사용할수 있도록 하는것을 확인할수 있습니다.
keycloak에서 권장하는 사항들