+ All Categories
Home > Documents > Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in...

Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in...

Date post: 14-Jul-2020
Category:
Upload: others
View: 1 times
Download: 0 times
Share this document with a friend
33
| Testing in Scrum/Agile bij KPN
Transcript
Page 1: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Testing in

ScrumAgile bij KPN

|

Testing in Scrum Agile bij KPN

Reindrich Geerman amp Dinant van der Starre Test Expert Sogeti Scrum MasterAgile Coach

Utrecht 06 Oktober 2016

2 Testing in ScrumAgile bij KPN

|

Reindrich Geerman amp Dinant van der Starre

3 Testing in ScrumAgile bij KPN

Test Lead Central Identity KPN Sogeti Test Expert Coach Agile Scrum DevOps CICD

Scrum Master KPN Central Identity Scrum Master KPN Mobile Apps Agile Coach KPN Digital

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 2: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Testing in Scrum Agile bij KPN

Reindrich Geerman amp Dinant van der Starre Test Expert Sogeti Scrum MasterAgile Coach

Utrecht 06 Oktober 2016

2 Testing in ScrumAgile bij KPN

|

Reindrich Geerman amp Dinant van der Starre

3 Testing in ScrumAgile bij KPN

Test Lead Central Identity KPN Sogeti Test Expert Coach Agile Scrum DevOps CICD

Scrum Master KPN Central Identity Scrum Master KPN Mobile Apps Agile Coach KPN Digital

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 3: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Reindrich Geerman amp Dinant van der Starre

3 Testing in ScrumAgile bij KPN

Test Lead Central Identity KPN Sogeti Test Expert Coach Agile Scrum DevOps CICD

Scrum Master KPN Central Identity Scrum Master KPN Mobile Apps Agile Coach KPN Digital

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 4: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Inhoud

bull Scrum Team evolutie

bull Technische evolutie

4 Testing in ScrumAgile bij KPN

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 5: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

KPN SampI Digital

KPNcom Selfcare MijnKPN App

Shop Call Center Digital Engine (API) Customer

Master and Central Identity BI (reporting) 280 Medewerkers 35 Scrum Teams

5 Testing in ScrumAgile bij KPN

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 6: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 6 Testing in ScrumAgile bij KPN

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 7: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 7 Testing in ScrumAgile bij KPN

bull Een eigen doel

bull Gemeenschappelijke activiteiten

bull Visualiseer

bull Open communicatie

bull Vier samen je successen

bull Neem respectvol afscheid

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 8: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 8 Testing in ScrumAgile bij KPN

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 9: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 9

Feb 2017

dart-event

Testing in ScrumAgile bij KPN

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 10: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 10 Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 11: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| Testing in ScrumAgile bij KPN

11

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 12: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 12

bull Geen verborgen agendarsquos

bull Transparantie

bull Kwetsbaarheid

bull Externe hulp

Testing in ScrumAgile bij KPN

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 13: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| Testing in ScrumAgile bij KPN

13

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 14: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| Testing in ScrumAgile bij KPN

14

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 15: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 15 Testing in ScrumAgile bij KPN

bull Resourcing ldquoTeam Fitrdquo over Stability

bull Colocation over non-Colocation

bull Innovatie en creativiteit

bull Budget onvoorziene externe inhuur

bull Geen limiet op licenties etc

bull Do it now ask for forgiveness later

bull Direct klantcontact

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 16: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 16 Testing in ScrumAgile bij KPN

Dev

Dev

testrol

Velocity

(Avg)

Afwijking

(+-)

Productie

deployments

per sprint

Q3 2014 - Jan 2015 6 1 26 35 13maand Forming

Jan 2015 - Mei 2015 8 2-3 28 41 1maand Forming

Mei 2015 - Jan 2016 9 2 37 31 1 per 3 weken Storming

Jan 2016 -Jun 2016 7 2 48 15 elke week Norming

Jun 2016 - heden 6 6 55 17 elke dag Performing

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 17: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Technische Evolutie

17 Testing in ScrumAgile bij KPN

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 18: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

| 18 Testing in ScrumAgile bij KPN

Geautomatiseerd Testen

Fail Fast Fail Often Fail Early

Handmatig Testen

Regressie test duurde 3 weken

NFR Multi Browser Support (14+

browsers)

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 19: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Unit Test vs Integratie test

19 Testing in ScrumAgile bij KPN

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 20: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Geautomatiseerd Testen

20 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

JENKINS

BUILD

SYSTEM

RUN TEST

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 21: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Geautomatiseerd Testen

21 Testing in ScrumAgile bij KPN

Robot Framework

Open Source

Keyword driven TDD BDD

Python

Integratie met Multi Browser

Platforms

Libraries (hergebruiken)

Parallel Testen

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 22: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Geautomatiseerd Testen

22 Testing in ScrumAgile bij KPN

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 23: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Geautomatiseerde Releases

23 Testing in ScrumAgile bij KPN

DEV

TEST

ACC

PROD

SOURCE

CONTROL

lt gt

bull Unit

bull Functional

bull Multibrowser

bull Performance

bull Security Testing

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 24: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Continues Monitoring

24 Testing in ScrumAgile bij KPN

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 25: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Continuous customer journey Monitoring

25 Testing in ScrumAgile bij KPN

PROD

RUN TEST

Rerun Failed Test

1x

Wait X min

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 26: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Functioneel Monitoring

26 Testing in ScrumAgile bij KPN

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 27: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Customer Experience Monitoring

27 Testing in ScrumAgile bij KPN

Social Studio Usabilla

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 28: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Technical Monitoring

28 Testing in ScrumAgile bij KPN

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 29: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

DevOps Toolshellip Predictive Alerting

29 Testing in ScrumAgile bij KPN

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 30: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Onze Tips

30 Testing in ScrumAgile bij KPN

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 31: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Reindrich Geerman

m 0652327534

e reindrichgeermansogeticom

in reindrichgeerman

Dinant van der Starre

m 0652327534

e dinantvanderstarrekpncom

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 32: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

32 Sogeti PowerPoint Referentie 2014

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN

Page 33: Testing in Scrum/Agile bij KPN - Sogeti · Reindrich Geerman & Dinant van der Starre Testing in Scrum/Agile bij KPN 3 Test Lead, Central Identity KPN Sogeti, Test Expert, Coach: Agile,

|

Aanpassing in WOW

Aanpassen van de DOR en DOD

Van twee Jira Boards naar eacuteeacuten Jira Board

Release zodra een feature ldquoDonerdquo is (Feature Flags)

Het Team is End-To-End verantwoordelijk voor zijn feature

33 Testing in ScrumAgile bij KPN


Recommended