Test-Driven DevOps meissa GmbH · Michael Jerger TestDrivenDevOps_0_8 23/05/17 / Seite 1...

Michael Jergerwww.DomainDrivenArchitecture.org

TestDrivenDevOps_0_823/05/17 / Seite 1

Test-Driven DevOps

Michael Jerger

meissa GmbH



Agenda

Vorstellung

Tests für Developer

Herausforderung Operations

Ansatzpunkte für agile DevOps

Testen mit dda-pallet

meissa GmbH



Agenda

Vorstellung

Tests für Developer




meissa GmbH



meissa GmbH?

Fokus: DevOps, Maintainer von dda-pallet

Sitz Reutlingen, SW-Entwicklung Java & Uni Tübingen

Arbeiten dezentral, d.h. 80% Remote-Arbeit

Zusammenarbeit auf Augenhöhe

https://www.meissa-gmbh.de

meissa GmbH



Was ist dda-pallet?

Funktionales DevOps System

Test Driven

Schnörkellos und direkt

Linux-servers: functional – bash.

Cloud services: functional – api.

Adressiert den kompletten LifeCycle, OpenSource, cloud zentriert, ...

meissa GmbH



… pallet ...

... ist ein clojure DevOps Framework von Hugo Duncan.

… wir komponieren pallet zu einem DevOps System.

meissa GmbH



… dda ...DomainDrivenArchitecture DDD Prinzipien in der funktionalen Welt:

„Separate Domain from Infrastructure“

„enable Domain Language“

Bash & cloud Abstraktion = Infrastruktur.

Domain Language bestehend aus

Architektur Konventionen

Netzwerk-Layouts oder

Applikations Stacks

meissa GmbH



Agenda

Vorstellung

Testing für Developer




meissa GmbH



Testarten für Dev

meissa GmbH



Agenda

Vorstellung

Tests in der Softwareentwicklung



Testen in dda-pallet

meissa GmbH



naiv?

Naiv landen wir komplett in Infrastruktur Integration!meissa GmbH



Ops = viel State

Installierte Betriebssystem

System-Konfiguration

Update-Zustand

Installierte Applikationen und deren Zustand

Logfiles und deren Nutzungmeissa GmbH



State – was tun?

State isolieren

Container

State explizieren

facts

Dockerhost

ZabbixServer

Maria DB

(defn collect-netstat-fact [] (collect-fact fact-id-netstat '("netstat" "-tulpen") :transform-fn parse-netstat))

meissa GmbH



Ops = Heterogene Technik

Unix / Windows/ *sh / Powershell

Perl / PHP / C / Java / Python / Ruby / GO / Lisp / JavaScript

Make / ant / mvn / gradle / lein / grunt

Config von HW Firewall / Router / VPN

Config von Applikationen

meissa GmbH



Heterogenität – was tun?

Heterogenität kapseln , (dünner) Anti Corruption Layer

Data-API Bash-Interaktion

meissa GmbH



Heterogenität – was tun?

Komplexität in übergreifendes Tool verschiebenDomain: Infrastruktur:

meissa GmbH



Ops = Infrastructure

Netzwerk, Firewall, Routing, Cloud

Integration in Ops Services

Repositories: Linux-Packages, Software-Artefakte, Web-Downloads

Security: Krypto-Keys & Credentialsmeissa GmbH



Infrastructure – was tun?

Infrastruktur Artefaktecontinous & getestetemeissa GmbH



Agenda

Vorstellung





meissa GmbH



Soll/Ist-Abgleich testen

meissa GmbH



Fkt. Integration testen

meissa GmbH



Integrationstest

Whitebox, controll & execute on target

meissa GmbH



Integrationstest

Whitebox controlled remote, executed on target

meissa GmbH



Integrationstest

Whitebox collect facts on target

meissa GmbH



Integrationstest

Blackbox

meissa GmbH



ServerTest-ServerSpec-Goss

describe port(80) do it { should be_listening }end

{:netstat {:apache2 {:port "80"}}

port: tcp:80: listening: true

meissa GmbH



Agenda

Vorstellung





meissa GmbH



Recap: Test Kontext

meissa GmbH



Infrastruktur: UnitTest File

=> (vhost/vhostconfdefaultredirecttohttpsonly :domainname "meissagmbh.de" :serveradminemail "admin@meissagmbh.de")["<VirtualHost *:80>" " ServerName meissagmbh.de" " ServerAdmin admin@meissagmbh.de" " " " ErrorLog \"/var/log/apache2/error.log\"" " LogLevel warn" " CustomLog \"/var/log/apache2/access.log\" combined" " " " RewriteEngine on" " RewriteCond %{HTTPS} !on" " RewriteRule ^/(.*)$ https://%{SERVER_NAME}/$1 [R=301,L]" " " "</VirtualHost>"]

REPL

meissa GmbH



Recap: Plan

meissa GmbH

Infrastruktur: UnitTest Plan

meissa GmbH

https://github.com/DomainDrivenArchitecture/dda-init-crate/blob/credentials/integration/org/domaindrivenarchitecture/pallet/crate/instantiate_aws_init.clj



Integration Test

apply & test

(def default-vhost-config {:domain-name "localhost.localdomain" :listening-port "443" :server-admin-email "admin@localdomain" ... })

{:netstat {:apache2 {:port "443"}}

meissa GmbH



Integration Testdda-servertest-crate

meissa GmbH



Resource on target

Proto RecvQ SendQ Local Address Foreign Address State User Inode PID/Program nametcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN 0 9807 1001/sshd tcp6 0 0 :::80 :::* LISTEN 0 44161 4135/apache2 tcp6 0 0 :::4369 :::* LISTEN 108 33687 27416/epmd

(defn collect-netstat-fact [] (collect-fact fact-id-netstat '("netstat" "-tulpen") :transform-fn parse-netstat))meissa GmbH



Recap: Test Kontext

meissa GmbH



Domain: Generate Config

(def archivaconfig {:fqdn "artifacts.meissagmbh.de" :smtpmailhost "mailserver" :smtpmailuser "mailaccount" :smtpmailpassword "mailpwd"})

=> (sut/archivahttpdconfig archivaconfig){:limits {:serverlimit 150, :maxclients 150}, :jkconfiguration {:jkStripSession "On", :jkWatchdogInterval 120}, :vhosts {:default {:domainname "artifacts.meissagmbh.de", :listeningport "443", :serveradminemail "[email protected]gmbh.de", :maintainancepagecontent ["<h1>Webserver Maintainance Mode</h1>"], :modjk {:port "8009", :host "127.0.0.1", :worker "mod_jk_www", :maintaintimoutsec 90, :socketconnecttimeoutms 62000}, :certletsencrypt {:letsencryptmail "[email protected]gmbh.de"}}}}

REPLmeissa GmbH



Domain: Unit Test

REPL

(deftest testhttpdvhost [] (testing "httpd vhost domain test" (is (= {:limits ..., :vhosts {:default {:domainname "artifacts.meissagmbh.de", ...}, :certletsencrypt {:letsencryptmail "[email protected]gmbh.de"}}}} (sut/archivahttpdconfig archivaconfig) )) ))

=> (runtests)

Testing de.meissagmbh.pallet.crate.archiva.apptest

Ran 1 tests containing 1 assertions.0 failures, 0 errors.{:test 1, :pass 1, :fail 0, :error 0, :type :summary}

(runtests)meissa GmbH



Boundaries with Validation

meissa GmbH



Recap: Test Kontext

meissa GmbH



Fkt. Integration testen

meissa GmbH



Smoke-Test Image / Instance

meissa GmbH



Fazit

Respekt vor den Unterschieden

Von der Softwareentwicklung lernen

Effizientes DevOps Testen möglich!meissa GmbH



Kontakt

Kennenlernen - meetup

https://www.meetup.com/de-DE/dda-pallet-DevOps-Hacking-with-Clojure

Ausprobieren & Unterstüzung - GitHub

https://github.com/DomainDrivenArchitecture/dda-pallet-masterbuild

Informiert bleiben - Blog:

https://DomainDrivenArchitecture.org

meissa GmbH

Test-Driven DevOps meissa GmbH · Michael Jerger TestDrivenDevOps_0_8 23/05/17 / Seite 1...

Documents

Transcript of Test-Driven DevOps meissa GmbH · Michael Jerger TestDrivenDevOps_0_8 23/05/17 / Seite 1...