Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in...

Preview:

Citation preview

|

Testing in

ScrumAgile bij KPN

|

Testing in Scrum Agile bij KPN

Reindrich Geerman amp Dinant van der Starre Test Expert Sogeti Scrum MasterAgile Coach

Utrecht 06 Oktober 2016

2 Testing in ScrumAgile bij KPN

|

Reindrich Geerman amp Dinant van der Starre

3 Testing in ScrumAgile bij KPN

Test Lead Central Identity KPN Sogeti Test Expert Coach Agile Scrum DevOps CICD

Scrum Master KPN Central Identity Scrum Master KPN Mobile Apps Agile Coach KPN Digital

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Testing in Scrum Agile bij KPN

Reindrich Geerman amp Dinant van der Starre Test Expert Sogeti Scrum MasterAgile Coach

Utrecht 06 Oktober 2016

2 Testing in ScrumAgile bij KPN

|

Reindrich Geerman amp Dinant van der Starre

3 Testing in ScrumAgile bij KPN

Test Lead Central Identity KPN Sogeti Test Expert Coach Agile Scrum DevOps CICD

Scrum Master KPN Central Identity Scrum Master KPN Mobile Apps Agile Coach KPN Digital

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Reindrich Geerman amp Dinant van der Starre

3 Testing in ScrumAgile bij KPN

Test Lead Central Identity KPN Sogeti Test Expert Coach Agile Scrum DevOps CICD

Scrum Master KPN Central Identity Scrum Master KPN Mobile Apps Agile Coach KPN Digital

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Recommended