View
22
Download
0
Category
Preview:
Citation preview
TRENDSTUDIE
IoT verändert das Application-Testing
Wie Unternehmen sich der Heraus-forderung stellen, ein zuverlässiges Testing in dynamischen IoT-Umge-bungen zu gewährleisten. Eine Trendstudie von PAC und Accenture
Joachim Hackmann Principal Analyst
Oktober 2017
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 2
INHALTSVERZEICHNIS
Einleitung ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3
Die wichtigsten Ergebnisse ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4
IoT-Status und -Strategie ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5Wo stehen Unternehmen in der Region DACH? .... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .5TK-Provider gehen vorweg, Spediteure hinken hinterher .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .7Investi tionen in IoT-Projekte ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9
IoT-Testing-Strategien ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .10Gibt es bereits eine IoT-Testing-Strategie? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11Wer verantwortet die IoT-Testing-Strategie? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12Welche Ziele soll das IoT-Testing erfüllen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13Was s ind die grössten Herausforderungen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14Wie erfolgt das IoT-Testing in der Praxis? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15
Investitionsvorhaben ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .16Wie hoch ist das IoT-Testing-Budget? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17Wie verändert sich das IoT-Testing-Budget? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 18Welche Anpassungen sind geplant? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19Welche Tools oder Hi lfsmittel kommen zum Einsatz? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20
Methodik .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .22Über Accenture ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 23Über PAC .... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24Haftungsausschluss, Nutzungsrechte, Unabhängigkeit und Datenschutz .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 25
ABBILDUNGSVERZEICHNIS
Abb. 1: Welche der folgenden Optionen beschreibt den derzeit igen Status Ihrer IoT-Strategie am besten? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .6
Abb. 2: Welche der folgenden Aspekte beschreiben die Hauptziele Ihrer IoT-Ini tiativen am besten? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .8
Abb. 3: Was erwarten Sie: Werden die Investi tionen in IoT-Aktivitäten in den nächsten drei Jahren abnehmen, gleich bleiben oder ansteigen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9
Abb. 4: Welche der folgenden Aussagen beschreibt am besten Ihren aktuellen Stand bzgl. Ihrer IoT-Testing-Strategie? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11
Abb. 5: Hat Ihr Unternehmen einen Verantwortlichen, der die IoT-Testing-Strategie über verschiedene Unternehmenseinheiten hinweg vorantreibt, oder plant Ihr Unternehmen die Einrichtung einer solchen Posit ion? Falls ja, wer ist dies?.... . . . . . . . . . . . . . . . . . . . . . . 12
Abb. 6: Was s ind bzw. werden die Hauptziele Ihrer IoT-Testing-Strategie sein? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13Abb. 7: Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforderung? ... . . . . . . . . . . . . . . . . . . . . . 14Abb. 8: Welche Aussage würde Ihr Vorgehen bzw. Ihr beabsichtigtes Vorgehen beim IoT-
Testing am besten beschreiben? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15Abb. 9: Wie hoch ist der Antei l Ihres IoT-Budgets, den Sie derzeit in Testing und
Quali tätssicherung investieren? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17Abb. 10: Was erwarten Sie: Werden die Kosten für das IoT-Testing in den nächsten drei Jahren
s inken, gleich bleiben oder steigen?.... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 18Abb. 11: Wie werden Sie Ihre Testing-Strategie anpassen, wenn die IoT-Projektvolumina
steigen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19Abb. 12: Welche Arten von Testautomatisierungs-Tools setzen Sie derzeit a ls Tei l Ihrer IoT-
Testing-Aktivi täten ein?.... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 3
IoT verändert das Application-Testing
EINLEITUNG
Das Internet der Dinge beziehungsweise Internet of Things (IoT) hat die Vorstandsetagen deutscher Unternehmen erreicht. Fast überall wi rd das Geschäftspotential von IoT-Anwendungen eruiert, vielerorts wurden schon konkrete Testinstallationen und Umsetzungsprojekte gestartet. In der Fertigung, im Einzelhandel, in der Energieversorgung und im Ge-sundheitswesen verspricht man sich viel von der Analyse von Daten, die von mobi len Geräten und Sensoren geliefert werden. Das Spektrum der Erwartungen erstreckt s ich von internen Effizienzverbesserungen über neue Wege im Kundenservice bis hin zu innovativen Geschäftsmodel-len. Branchenspezi fi sche IoT-Ausprägungen wie das Connected Car und Industr ie 4.0 zeigen erste Erfolge dieser Bemühungen.
Große Herausforderungen ziehen diese Veränderungen aber auch im Bereich Testing und Quali tätss icherung nach sich, denn sobald IoT in aller Konsequenz eingeführt wi rd, dr ingen Techniken und Applikationen in kri tische und anspruchsvolle Geschäftsabläufe vor. IoT-Lösungen müssen daher hohen Ansprüchen an Sicherheit, Skalierbarkeit und Qua-li tät genügen. Dafür s ind spezielle Prüfverfahren erforderlich, die – ver-glichen mit dem traditionellen Software-Testing – einige Besonderheiten aufweisen: So müssen die Tester mit Einflüssen vieler vernetzter Devices umgehen und die Interoperabi li tät vielfält iger und kaum standardisier-ter Protokolle und Techniken bewerten.
Der vorliegende Report analysiert den Status und die P läne von Anwen-derunternehmen rund um das IoT-Testing. Basis dieses Berichts sind die Aussagen von über 100 IT-, IoT- und Testing-Verantwortlichen in Deutschland, Österreich und der Schweiz zum Thema IoT-Testing. Die telefonischen Interviews wurden in der Zeit von August bis September 2017 durchgeführt. Die Ergebnisse der Erhebung wurden, wo sinnvoll, mit den Resultaten einer internationalen Befragung verglichen, die wir Anfang 2017 mit mehr als 200 Verantwortlichen in Asien, Amerika und Europa zum gleichen Thema durchgeführt haben. Beide Erhebungen wurden im Auftrag von Accenture betrieben.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 4
DIE WICHTIGSTEN ERGEBNISSE
Die IoT-Aktiv itäten der befragten Unternehmen befinden s ich überwiegend in einer frühen Phase: 73% der Fi rmen planen noch oder haben Pi lotprojekte gestartet. 16% können bereits auf Ergebnisse verweisen.
In der Hälfte der Unternehmen ist die Verantwortung für das IoT-Testing ungeklärt: Oft verant-wortet der IoT-Leiter das IoT-Testing, häufig auch der CIO. Doch in den meisten Fällen ist die Rolle unbesetzt.
• Das IoT-Testing-Budget is t sehr schmal: 62% der befragten Unternehmen geben weniger als 5%ihres IoT-Budgets für Testing aus. Immerhin: Die Mittel sollen in den kommenden Jahren kräftigansteigen.
• Respekt vor hohen Sicherheitsanforderungen und fehlender Interoperabili tät: Die größten Her-ausforderungen sehen die Unternehmen im Securi ty-Testing (70%) und mangelnder Interopera-bi li tät (63%), etwa mit Altsystemen.
Unternehmen wollen sich stärker auf ihre Kernkompetenzen konzentr ieren: Um den zu erwar-tenden Mehraufwand im IoT-Umfeld zu bewältigen, bauen Unternehmen vermehrt auf externeHi lfe und Automatisierung.
Unternehmen der DACH-Region hinken gegenüber der internationalen Konkurrenz hinterher:Der Vergleich zur weltweiten IoT-Testing-Studie weist in fast allen Belangen auf Defizi te derDACH-Unternehmen hin.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 5
IOT-STATUS UND -STRATEGIE
Die einzelnen Bausteine für das Internet der Dinge sind seit Jahren ver-fügbar. Geändert haben sich die Leistungsfähigkeit und Verfügbarkeit von Netzen, Sensoren, Speichersystemen, sicheren Cloud-Umgebungen und Anwendungen. Diese Entwicklungen haben zu einem schnell an-steigenden Interesse an IoT-Anwendungen in vielen Bereichen und Branchen geführt.
Die vorliegende Erhebung konzentriert sich darauf, die IoT-Umsetzungs-szenarien insbesondere im Testing-Umfeld näher zu beleuchten. Dabei wurden nur solche Unternehmen befragt, die zumindest schon in die IoT-P lanungsphase eingetreten sind. Ziel der Analyse war es hierbei nicht, einen repräsentativen Blick auf die IoT-Entwicklungen zu werfen, sondern den Umgang der Unternehmen mit den Besonderheiten im IoT-Testing zu ergründen. Tei lnehmer ohne aktuelle IoT-Umsetzungspläne wurden daher bereits zu Beginn der telefonischen Interviews herausge-fi ltert.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 6
WO STEHEN UNTERNEHMEN IN DER REGION DACH?
Die Analyse der Daten zeigt, dass sich sehr v iele Unternehmen in Deutschland, Österreich und der Schweiz aktuell noch in einer sehr frü-hen Phase der IoT-Nutzung befinden. Insgesamt 73% der befragten Fi r-men experimentieren oder planen noch und ihr Erfahrungsschatz be-schränkt sich maximal auf abgeschlos-sene Pi lotprojekte. Dennoch sind auch ihre Einschätzungen zum Thema wichtig, l iefern sie doch wichtige Hinweise auf den Umgang mit dem IoT-Testing, etwa wenn es um die frühzeit ige Integration von Prüf-verfahren und um Zuständigkeiten geht.
27% der befragten Unternehmen in der Re-gion DACH sind IoT-erfahren. Sie können auf erste Geschäftserfolge, auf eine un-ternehmensweite IoT-Strategie oder auf konsistente Methoden und Architekturen verweisen. Im internationalen Vergleich ist das ein eher dürftiger Wert (s iehe neben-stehenden Textkasten).
Abb. 1: Welche der folgenden Optionen beschreibt den derzeitigen Status Ih-rer IoT-Strategie am besten?
11%
16%
38%
35%
Fortgeschrittene Phase: Wir haben bereits eine organisationsweite
IoT-Strategie, basierend auf einer einheitlichen Architektur und
definierten Methoden.
Mittlere Phase: Unsere IoT-Initiativen zeigen erste Geschäftserfolge oder
-veränderungen.
Frühphase: Wir haben schon erste Pilotprojekte umgesetzt.
Planung: Wir befinden uns noch in der Planungs- und
Evaluierungsphase.
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
Internationaler Vergleich: IoT-Status
Die weltweite PAC-Studie weist hier 43% an Unternehmen aus, die bereits in die mittlere und fortgeschrittene Phase ihrer IoT-Pläne eingetreten sind. Geantwortet hatten damals 200 IT- oder IoT-Verantwortliche aus Amerika, Europa und Asien. Die Diskrepanz zwischen dem Erfahrungspotenzial hiesiger und internationaler Unternehmen geht über ein Maß hinaus, das sich mit typisch deutscher Zurückhaltung bei der Selbstauskunft erklären ließe. Fakt ist, dass die deutschen Unternehmen das Thema IoT im internationalen Vergleich deutlich vorsichtiger angehen.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 7
TK-PROVIDER GEHEN VORWEG, SPEDITEURE HINKEN HINTERHER
Die Detai lauswertung nach Branchenzugehörigkeit der Tei lnehmer weist die Telekommunikationsunternehmen a ls Vorreiter im IoT-Segment aus: Fast die Hälfte der Befragten aus diesem Segment sehen bereits erste Geschäftserfolge
und haben eine organisationsweite IoT-Strategie implementiert. Sie ha-ben sich also in der obigen Grafik der mitt leren oder der fortgeschri t-tenen Phase zugeordnet. Ihr besonderes Engagement ist nachvollzieh-bar, profi tieren doch die TK-Provider ganz besonders vom steigenden Datenverkehr infolge des IoT-Trends. Zum anderen sind die Produktions-anlagen per se vernetzt, der Schri tt zu intensiveren Nutzung von Senso-ren und Analytics ist da nicht mehr weit.
Auch im Einzelhandel gibt es laut vorliegender Erhebung einige fortgeschri ttene Anwender von IoT-Lösungen. Die breite Masse der Befragten aus dem Einzelhandel befindet s ich jedoch noch in der Start- und Frühphase – was s ich auch mit PACs Brancheneinschätzung deckt, die wiederum
aus vielen Gesprächen mit Anwendern und IT-Providern gewonnen wurde. IoT-Anwendungen zielen in vielen Fällen darauf ab, mit Hi lfe von RFID-Tags die Lieferkette zu optimieren.
Die für die deutsche Wirtschaft besonders bedeutsame Fer-t igungsindustrie setzt große Hoffnungen in IoT beziehungs-weise Industrie 4.0. In diesem vertikalen Marktsegment gibt es sehr viele Aktivi täten zur Vernetzung von Maschinen und
Produktionsanlagen. Der große Durchbruch mit funktionierenden neuen Geschäftsmodellen ist aber noch nicht geschafft. Laut vorliegender Er-hebung steckt die Masse der Befragten noch in der P lanungs- und Frühphase ihrer IoT-Bemühungen.
Überdurchschnitt lich häufig haben sich Unternehmen der Transportbranche a ls Einsteiger in das IoT-Thema zu erken-nen gegeben. Das Potential in diesem Marktsegment ist groß, denn IoT-Techniken können die Abläufe noch trans-
parenter und schlanker gestalten. Die ersten Speditionen haben bereits entsprechende Projekte gestartet (etwa Deutsche Post DHL, Kühne + Nagel). Insgesamt jedoch reagiert die Transportbranche noch verhal-ten auf das IoT-Angebot – so das Ergebnis der vorliegenden Erhebung, die sich im Übrigen mit PACs genereller Brancheneinschätzung deckt.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 8
WIE INTENSIV NUTZEN DIE UNTERNEHMEN IOT-LÖSUN-GEN?
Die Reife von IoT-Ini tiativen lässt sich aus den Zielen ablesen, die Un-ternehmen mit den Projekten verfolgen. Typischerweise bewegen sich die Unternehmen in der ersten Phase ihrer IoT-Bemühungen in den bekannten Bahnen, s ie streben Kos-teneinsparungen und optimierte Services an. Dabei geht es in der Regel um inkrementelle Verbesse-rungen mit Hi lfe neuer Technolo-gien. Daten aus smarten, vernetz-ten Sensoren können helfen, Opti -mierungspotentiale mit Hi lfe ausge-fei lter Analyseverfahren aufzuspü-ren, um anschließend an bekannten Stellschrauben zu drehen, oder auch neue Lösungen zu entwickeln, um etwa die Produktion zu flexibi-l i sieren.
E ine höhere Reife kann man solchen Unternehmen attestieren, die über die üblichen Effizienzziele hinaus neue Geschäftsmodelle oder Kunden-services anstreben. Das Connected Car i st ein gutes Beispiel hierfür: Intell igente Sensoren liefern Informationen über Standort, Status, Leis-tung und Fahrerverhalten. Die Daten nutzen Autohersteller, um neue Serviceangebote zu kreieren, etwa für nutzungsabhängige Versiche-rungsangebote, für die vorbeugende Wartung oder für kundenindiv i-duelle Unterhaltungsangebote. Vergleichbares streben Fertigungsun-ternehmen mit Predictive-Maintenance-Services in Industrie-4.0-Szena-r ien an.
Das Ergebnis der aktuellen Erhebung ist eindeutig: Aktuell streben die Unternehmen vornehmlich Kosteneinsparungen und eine erhöhte Be-triebseffizienz an (81%). Weitere 70% wollen Kundenservice und -bezie-hung verbessern. Aber immerhin jedes zweite Unternehmen wi ll völlig neue Produkte und Dienstleistungen auf IoT-Basis anbieten, lässt sich also der innovativen Gruppe zuordnen.
Abb. 2: Welche der folgenden Aspekte beschreiben die Hauptziele Ihrer IoT-
Initiativen am besten?
32%
52%
70%
81%
Steigerung des Einnahmenpotenzials.
Angebot neuer Produkte/Dienstleistungen.
Verbesserung von Kundenservice und -beziehungen.
Kosteneinsparungen und Erhöhung der Betriebseffizienz.
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
Internationaler Vergleich: IoT-Status
Auch in der internationalen Studie stehen Kosteneinspa-rungen ganz oben auf der Agenda der befragten Unternehmen. Viel häufiger streben sie aber auch eine Steigerung ihres Einnahmenpotenzials an (80% versus 32%). Sie wollen IoT-Möglichkeiten offenbar sehr viel intensiver für neue Geschäftsmodelle erschließen.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 9
INVESTITIONEN IN IOT-PROJEKTE
Das Thema IoT ist bei der überwiegenden Zahl der befragten Unterneh-men mit hohen Erwartungen behaftet. Sie verfolgen k lare Ziele etwa in Hinblick auf neue Services und Geschäftsmodelle oder Effizienzverbes-serungen. Folgerichtig wollen die meisten Unternehmen ihre IoT-Bud-gets künftig aufstocken, fast die Hälfte sogar um zweistell ige Zuwachs-raten.
Aber es gibt auch ein erkennbares Zögern unter den befragten Firmen: Wenn 31% der Unternehmen sagen, dass s ie die Investi tionen weder erhöhen noch reduzieren werden, zeugt das von einer unbestimmten Haltung gegenüber der künftigen Bedeutung von IoT: Man schließt eine wachsende Rolle nicht aus, hat aber noch keine konkrete Vorstellung, was mit IoT machbar ist. Daher belässt man die IoT-Investitionen auf dem aktuellen Niveau. Hier i st offenbar noch Aufk lärungsarbeit erfor-derlich.
Abb. 3: Was erwarten Sie: Werden die Investitionen in IoT-Aktivitäten in den
nächsten drei Jahren abnehmen, gleich bleiben oder ansteigen?
1%
31%
19%
32%
13%
2%
2%
Die Investitionen werden abnehmen.
Sie werden gleich bleiben.
Anstieg um bis zu 10%
Anstieg zwischen 11% und 25%
Anstieg zwischen 26% und 50%
Anstieg zwischen 51% und 100%
Anstieg um mehr als 100% N=102
© PAC - a CXP Group Company, 2017
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 10
IOT-TESTING-STRATEGIEN
Der eigentliche Gegenstand dieser Erhebung ist das IoT-Testing. Wäh-rend die vorherigen Ergebnisse s ich auf Einschätzungen zu IoT im Allge-meinen fokussierten, sollen im Folgenden die IoT-Testing-Aktivi täten ge-nauer analysiert werden.
Dazu haben wir die Unternehmen sowohl nach ihrer IoT-Testing-Strate-gie als auch nach der Verantwortlichkeit für das Thema befragt. Erfah-rungsgemäß werden Projekte dann ernsthaft und dauerhaft vorange-trieben, wenn s ie einer Strategie folgen können, also ein definiertes Z iel haben, und wenn es einen Fürsprecher beziehungsweise Verantwortli -chen im Unternehmen gibt, der das Thema, im Falle dieser Studie das IoT-Testing, mit konkreten Vorstellungen konsequent vorantreibt.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 11
GIBT ES BEREITS EINE IOT-TESTING-STRATE-GIE?
Angesichts des insgesamt begrenzten Erfahrungsschatzes der Fi rmen der Region DACH verwundert es kaum, dass nur wenige Unternehmen schon eine definierte IoT-Testing-Strategie haben und s ie auch in der praktischen Umsetzung ver-folgen. Das i st derzeit bei ledig-lich 12% der Befragten der Fall.
Allerdings ist eine konsistente Blaupause für Quali tätssicherung und Testing in IoT-Umgebungen auch schwer zu formulieren. Vor-dergründig unterscheiden sich IoT- und traditionelle Testing-Ver-fahren kaum, im Detai l jedoch zeigen sich die Besonderheiten. Etwa wenn es um Fragen geht, wie s ich Sicherheit und Skalierbarkeit gewährleisten lassen und wie die Interoperabi li tät geprüft werden kann. Um all das richtig bewerten zu können und dann noch in eine unternehmensweite Strategie einfließen zu lassen, sind eine genaue Kenntnis der Materie und besonderes IoT-Wissen erforderlich, das vielerorts noch fehlt.
Vor diesem Hintergrund ist es ermutigend, dass deutlich über zwei Dri t-tel immerhin die Notwendigkeit einer IoT-Testing-Strategie bejahen: Ne-ben den oben erwähnten 12% der Befragten mit implementierter Stra-tegie gibt es weitere 41%, die gerade eine entsprechende Leit linie für das IoT-Testing entwerfen. Weitere 16% stehen vor der Umsetzung.
Abb. 4: Welche der folgenden Aussagen beschreibt am besten Ihren aktuellen Stand bzgl. Ihrer IoT-Testing-Strategie?
31%
41%
16%
12%
Derzeit haben wir keine Strategie.
Wir entwickeln derzeit eine Strategie, die innerhalb der
nächsten 12 Monate etabliert sein wird.
Wir haben eine Strategie etabliert, haben aber noch
nicht begonnen, diese umzusetzen.
Wir haben unsere digitale Testing-Strategie bereits
umgesetzt.
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
Internationaler Vergleich: IoT-Testing
Auch im Bereich IoT-Testing attestiert die vorliegende Erhebung den befragten DACH-Unternehmen ein Defizit im internationalen Vergleich. Während 31% der hiesigen Firmen noch keine IoT-Testing-Strategie formuliert haben, ist das in der internationalen Vergleichsgruppe nur bei 6% der Fall. Zu den fortgeschrittenen Anwendern (also „Strategie etabliert“ oder „Strategie umgesetzt“ in der untenstehenden Grafik) zählen im DACH-Raum 28% der Unternehmen und 62% der international befragten Firmen.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 12
WER VERANTWORTET DIE IOT-TESTING-STRA-TEGIE?
Um eine konsistente und unternehmensweite IoT-Testing-Strategie durchsetzen und implementieren zu können, braucht es einen Mentor beziehungsweise einen Verantwortlichen, der qua seiner Posi tion die Umsetzung forciert. Gibt es diese zentrale Posi tion der Verantwortlich-keit nicht, so droht eine definierte IoT-Testing-Strategie zu einem Papier-t iger zu verkümmern. Genau dieses Risiko besteht in gut jedem zweiten Unternehmen: Erstaunliche 51% der Befragten konnten keine Posi tion o-der Verantwortlichen benennen. Hier sollten viele Unternehmen nach-bessern.
Unter den Tei lnehmern, in deren Unternehmen die Verantwortung k lar geregelt ist, gibt es eine breite Streuung der genannten Posi tion. Keine Überraschung ist die häufige Wahl des CIOs beziehungsweise IT-Leiters (34%). Diesen Weg verfolgen insbesondere die eher kleineren Unter-nehmen mit bis zu 1.000 Mitarbeitern, da sie seltener als größere Unter-nehmen dedizierte IoT-Leiter beziehungsweise Leiter der Digitalabtei-lung haben.
Abb. 5: Hat Ihr Unternehmen einen Verantwortlichen, der die IoT-Testing-Strate-gie über verschiedene Unternehmenseinheiten hinweg vorantreibt, oder plant Ihr Unternehmen die Einrichtung einer solchen Position? Falls ja, wer ist dies?
51%
49%
Nein
Ja
N=102
34%
14% 14%
10%
8%
20% CIO/IT-Leiter
Der IoT-Leiter
Ein dedizierter Leiter für IoT-Testing
Der Leiter der Digitalabteilung
Leiter Software-Entwicklung
Andere IoT-Testing-Verantwortlichkeit
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 13
WELCHE ZIELE SOLL DAS IOT-TESTING ERFÜL-LEN?
Das IoT-Testing soll eine Vielzahl von Anforderungen und Zielen erfüllen. Auffallend ist zum einen die breite Streuung der Antworten und die deutlichen Unterschiede zwischen den Tei lnehmern aus der DACH-Re-gion und der internationalen Ver-gleichsgruppe (siehe nebenstehen-den Textkasten).
Befragt nach den Zielen, die man mit einer IoT-Testing-Strategie verfolge, fanden Aspekte wie Quali tätsverbes-serung (81%), Gewährleistung der Si -cherheit (74%) und Effizienzverbesse-rung (72%) die höchsten Zustimmungs-werte. Insgesamt haben die hiesigen Befragten fast alle Auswahlkri terien recht hoch bewertet, was die enorme Bedeutung einer IoT-Testing-Strategie einmal mehr betont.
Abb. 6: Was sind bzw. werden die Hauptziele Ihrer IoT-Testing-Strategie sein?
Bemerkenswerte Ergebnisse ergibt die Detai lanalyse je nach Posi tion, die die IoT-Testing-Strategie verantwortet: Die befragten IoT-Leiter ha-ben fast allen Kr iterien überdurchschnitt l ich hohe Priorität eingeräumt, s icher auch deshalb, wei l sie qua ihrer Posit ion um die hohe Bedeutung der Themen wissen. Die befragten Produktionslei ter wiesen hingegen der Sicherheit die höchste Priorität zu, erstaunlicherweise jedoch nicht der Effizienzverbesserung. Eine mögliche Erk lärung liefern frühere Be-fragungen im Produktionsumfeld: Im Allgemeinen haben die Produkti -onsleiter eigener Einschätzung zufolge bereits ein sehr hohes Effizienz-niveau in der Fertigung erreicht und sind skeptisch, ob s ich mit IoT-Mit-teln noch große Verbesserungssprünge erzielen lassen.
30%
61%
68%
72%
74%
81%
Integration neuer Testing-Szenarien
Verbesserung der Anwenderzufriedenheit
Gewährleistung der Einhaltung von Standards
Effizienzverbesserung
Gewährleistung der Sicherheit
Qualitätsverbesserung
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
Internationaler Vergleich: die Ziele des IoT-Testing
In der internationalen Umfrage ergibt sich in diesem Punkt eine nahezu identische Reihenfolge, nur auf insgesamt niedrigerem Niveau. Qualitätsverbesserung und Sicherheit wurden am häufigsten genannt (jeweils 63% der Befragten), gefolgt von Effizienzverbesserung und Einhaltung von Standards (53% beziehungsweise 46%). Das zeigt, dass die Erwartungen unter den internationalen Studienteilnehmern nicht ganz so hoch sind. Dies erleichtert möglicherweise den Projektstart, weil Vorhaben nicht mit hohen Vorgaben und Zielen überfrachtet sind.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 14
WAS SIND DIE GRÖSSTEN HERAUSFORDERUN-GEN?
Großen Respekt scheinen die Unternehmen aus der Region DACH vor dem Securi ty-Testing sowie vor unvorhersehbaren Problemen zu haben, die infolge mangelnder Interoperabi li tät und unausgereifter Standards auftreten können. Das ergab die Auswertung der Frage nach den be-deutendsten Herausforderungen. Die Bedenken sind verständlich, las-sen sich aber nicht ohne Weiteres ausräumen, da das IoT-Umfeld sehr dynamisch ist und ständig neue Entwicklungen und Techniken hervor-bringt.
E ine Besonderheit des IoT-Testing stellt s icherlich das Verhalten im Feld dar, wei l eine Vielzahl von Sensoren, Geräten, Knoten und intelligenten Geräten ausgebracht werden muss, um das Internet der Dinge zur Re-alität zu machen. Das Testing ist schwierig, wei l die späteren Einsatzum-gebungen simuliert werden müssen. Wenn Unternehmen Sensoren etwa für das Smart Farming ausrollen, sollten sie diese in einer vergleichba-ren k limatischen Umgebung testen können, da Ausfälle und Reparatu-ren später erhebliche Kosten nach sich ziehen würden.
Abb. 7: Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforde-rung?
22%
33%
38%
41%
42%
44%
52%
52%
58%
63%
70%
Modellieren des physischen Verhaltens
Leistung und Skalierbarkeit
Physisches Testing von Geräten
Connectivity Testing
Interpretation der Ergebnisse bzw. des Verhaltens im Feld
Verfügbarkeit
Benutzererfahrung/User Experience
Verhalten im Feld
Unausgereifte Standards
Interoperabilität
Security Testing
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 15
WIE ERFOLGT DAS IOT-TESTING IN DER PRA-XIS?
Zumeist nähern sich die Unternehmen dem Testing-Szenario in pragma-tischer Weise und integrieren das Testing in die Projektarbeit. Das i st vor dem Hintergrund, dass IoT-Projekte in der Regel sehr schnell und agi l entwickelt werden, auch absolut s innvoll. 61% der befrag-ten Unternehmen folgen diesem Modell, das mit dem DevOps-Konzept im Übrigen bereits als Methodologie definiert wurde.
Nichtsdestotrotz verfolgt ein be-achtlicher Tei l der Unternehmen einen anderen Weg: 27% der Be-fragten haben das IoT-Testing über verschiedene Abtei lungen hinweg vertei lt, was möglicherweise dem Vorhaben zuwiderläuft, ein unternehmensweit einheitliches Vorgehen zu etablieren. Weitere 12% unterhalten ein eigenes Testlabor, das sicher über v ielfältiges Testing-Fachwissen verfügt, dem aber möglicherweise die Nähe zu den fachli-chen Anforderungen fehlt.
Abb. 8: Welche Aussage würde Ihr Vorgehen bzw. Ihr beabsichtigtes Vorgehen beim IoT-Testing am besten beschreiben?
61%
27%
12%
Es wird im Rahmen von Projekten angetrieben.
Es wird von Teams in verschiedenen Bereichen
unseres Unternehmens betrieben.
Wir haben ein zentrales Testing-Labor bzw. Kompetenzzentrum,
das alle IoT-Tests verantwortet. N=102 ©
PA
C -
a C
XP
Gro
up
Co
mp
an
y, 2
017
Internationaler Vergleich: IoT-Testing in der Praxis
Bei der tatsächlichen Umsetzung des IoT-Testing verfolgen die Unternehmen aus dem DACH-Raum in der Regel den besseren Weg, indem sie das Testen in die Projektarbeit integrieren (61%) und weniger häufig den typischen Silostrukturen eines Unternehmens unterwerfen. Die Befragung der international Peer-Group ergab ein umgekehrtes Bild: Das IoT-Testing ist hier zumeist in verteilten Unternehmensbereichen verankert (42%) und weniger häufig in die Projektarbeit integriert (35%).
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 16
INVESTITIONSVORHABEN
Letzten Endes lässt sich die Bedeutung eines Themas auch immer an der Höhe seines Budgets erkennen. Aus diesem Grund haben wir die Umfragetei lnehmer nach ihren IoT-Testing-Budgets sowie nach den In-vestitionsplänen in den Bereich Plattformen und externer Support be-fragt.
Dabei zeigt sich – so viel sei vorweggenommen – ein ernüchterndes Bi ld, was die aktuelle Ausstattung des IoT-Testing mit finanziellen Mitteln betri fft. Das kann jedoch nur eine Momentaufnahme sein, denn wenn IoT tatsächlich die Bedeutung erlangt, die dem Thema im Allgemeinen zugesprochen wird, dann müssen auch Testszenarien finanziell besser ausgestattet werden.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 17
WIE HOCH IST DAS IOT-TESTING-BUDGET?
Testing ist immer ein wesentlicher Bestandtei l der Quali tätssicherung. Das ist hinlänglich bekannt und in der k lass ischen Softwareentwicklung werden diversen Erhebungen zufolge bis zu 40% der Projektbudgets in das Testing und die Quali tätssicherung investiert. Legt man diese Zahl zugrunde, i st das aktuell für das IoT-Testing bereitgestellte Budget ver-schwindend gering. Die große Masse der Befragten geben we-niger als 5% ihres IoT-Budgets für das Testing aus. Zweistellige An-tei le erreichen lediglich 10% der Befragten.
Diese sehr dürft ige finanzielle Ausstattung lässt sich nur mit der allgemein fehlenden Reife von IoT-Projekten in den Unterneh-men der DACH-Region erk lären. Viele Vorhaben stecken noch in der Pi lotphase, IoT-Strategien sind noch nicht implementiert und dem IoT-Testing fehlt in jedem zweiten Unternehmen ein starker Mentor (siehe Grafik 6). Insgesamt verfügen viele Unternehmen offenbar noch nicht über die Strukturen, um das IoT-Testing professionell und nachhal-t ig in ihre IoT-Projektarbeit zu integrieren. All das mag dazu führen, dass die Unternehmen im DACH-Raum mit IoT-Testing-Budgets äußerst zu-rückhaltend verfahren. Im internationalen Vergleich sind hiesige IoT-Testing-Teams zumindest mit sehr mageren finanziellen Mitteln ausge-stattet.
Abb. 9: Wie hoch ist der Anteil Ihres IoT-Budgets, den Sie derzeit in Testing und
Qualitätssicherung investieren?
11%
6%
4%
18%
62%
Weiß nicht/keine Angabe
16% und mehr
11%-15%
6%-10%
0-5%
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
Internationaler Vergleich: Das IoT-Testing-Budget
Der Unterschied in der Budgetfrage ist frappierend. Während in der Region DACH 7% der Befragten mehr als 10% vom IoT-Budget ins Testing investieren, beläuft sich der Anteil in der weltweiten Studie auf 71%. Lediglich 8% gaben an, weniger als 5% vom IoT-Budget für das Testing auszugeben. Unter den DACH-Befragten sind es 61%. Der Vergleich ist ein Indiz mehr, dass hiesige Unternehmen in IoT-Fragen erheblichen Nachholbedarf haben.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 18
WIE VERÄNDERT SICH DAS IOT-TESTING-BUDGET?
Vielen Unternehmen ist offenbar k lar, dass heutige IoT-Testing-Budgets zu schmal sind. Zwei Dri ttel der Befragten planen mit steigenden Aus-gaben, mehr als jeder Dri tte sogar im zweistell igen Bereich. Allerdings legt auch die globale Konkurrenz in diesem Bereich mächtig zu: PACs internationaler Erhebung zufolge wollen 45% der Befragten ihr IoT-Tes-t ing-Budget um zweistell ige Zuwachsraten erhöhen. Besonders investi-t ionsfreudig in der Region DACH sind Unternehmen aus der Ver- und Entsorgungsbranche. Hier stehen mit dem seit Anfang 2017 begonne-nen flächendeckenden Rollout der Smart Meter große Veränderungen an, so dass die betroffenen Unternehmen ihre IoT-Testing-Budgets er-heblich ausweiten werden.
Abb. 10: Was erwarten Sie: Werden die Kosten für das IoT-Testing in den nächs-ten drei Jahren sinken, gleich bleiben oder steigen?
6%
27%
32%
23%
10%
1%
1%
Budget wird sinken.
Budget wird gleich bleiben.
Anstieg um bis zu 10%
Anstieg zwischen 11% und 25%
Anstieg zwischen 26% und 50%
Anstieg zwischen 51% und 100%
Anstieg um mehr als 100% N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 19
WELCHE ANPASSUNGEN SIND GEPLANT?
Eine besondere Herausforderung im IoT-Umfeld ist die rasend schnelle Vermehrung von Datenquellen. Die Zahl der M2M-Verbindungen (Ma-chine to Machine) soll s ich von 4,9 Mi lliarden im Jahr 2014 auf 12,2 Mi l-l iarden im Jahr 2020 vervielfachen und von dem damit einhergehen-den explosionsartigen Anstieg der Datenmengen sind alle Branchen mehr oder weniger betroffen.
Auf die Wucht der bevorstehenden Entwicklung müssen s ich die Unter-nehmen vorbereiten. 70% der Studientei lnehmer werden die eigenen Aufgaben im IoT-Umfeld reduzieren und sich auf ihre Kernkompetenzen konzentr ieren. Das bedeutet nicht, dass sämtliche Arbeiten außerhalb des Kerngeschäfts aufgegeben werden, vieles wird an externe Provider vergeben: Die Hälfte der befragten Unternehmen gab an, dass man vermehrt Hi lfe von außen hinzuziehen werde. Aber auch der Ausbau technischer Hi lfsmittel in Form von Automatisierungs-Tools ist ein häufig genannter Weg, um mit den kommenden Herausforderungen umzuge-hen (61%).
Die Analyse des branchenbezogenen Antwortverhaltens zeigt übri -gens, dass insbesondere Unternehmen aus der TK-Branche bei steigen-der Belastung externe Ressourcen zur Unterstützung anfordern werden, wohingegen die Ver- und Entsorger vor allem ihre interne Organisation stärken wollen.
Abb. 11: Wie werden Sie Ihre Testing-Strategie anpassen, wenn die IoT-Projektvo-lumina steigen?
50%
51%
55%
61%
70%
Zusätzlicher Bezug manueller Testing-Ressourcen von externen
Partnern.
Vergrößerung der internen Testing-Organisation.
Anpassung der internen Testing-Organisationsstruktur zur
Verbesserung der Skalierbarkeit.
Erweiterter Einsatz von Testautomatisierungs-Tools.
Konzentration auf die wichtigen Kernkompetenzen.
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 20
WELCHE TOOLS ODER HILFSMITTEL KOMMEN ZUM EINSATZ?
Der Hang der Unternehmen in der Region DACH, v iele Aufgaben im eigenen Haus zu er ledigen, spiegelt s ich auch in der Wahl der Tools für das IoT-Testing wieder. Nur jedes zehnte Unternehmen nutzt Crowdsour-cing-Plattformen, auf denen man den eigenen Code zum Testing frei -gegen kann. Die meisten Firmen greifen auf bewährte oder selbst ent-wickelte Werkzeuge zurück (30% bzw. 69%).
Ob dieser Weg auf Dauer zielführend sein wird, ist zumindest fraglich. Im Zuge der agi len Softwareentwicklung, die wiederum im IoT-Umfeld gang und gäbe ist, werden die Unternehmen mehr und mehr auf die Testautomatisierung zurückgreifen müssen, andernfalls i st die Vielzahl der Software-Neuerungen nicht zu bewältigen. 50% der befragten Un-ternehmen haben diese Richtung bereits eingeschlagen. Zum Ver-gleich: In der internationalen Umfrage gaben 68% der Firmen an, Au-tomatisierungs-Tools im IoT-Testing zu nutzen.
Abb. 12: Welche Arten von Testautomatisierungs-Tools setzen Sie derzeit als Teil
Ihrer IoT-Testing-Aktivitäten ein?
30%
10%
30%
52%
69%
Weiß nicht/keine Angabe
Crowdsourcing-Plattformen
Bewährte Testautomatisierungs-Suiten
Open-Source-Testautomatisierungs-Tools
Intern entwickelte Tools
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 21
Die Ergebnisse der vorliegenden Erhebung s ind ernüchternd. Die meisten der befragten Unternehmen stehen noch am Anfang der IoT-Entwicklung, sie befinden sich entweder in der P lanungsphase oder in der Pi lotierung.
Dabei muss an dieser Stelle erwähnt werden, dass Unternehmen ohne jegliche IoT-Erfahrung in der Umfrage gar nicht erst berücksichtigt wurden. Ernüchternd ist das Ergebnis vor allem im Vergleich mit der internationalen Erhebung, in der k lar erkenn-bar wird, dass die weltweite Konkurrenz in Sachen IoT zügig vorweg schreitet. Laut PACs globaler Umfrage zum IoT-Testing ist die globale Vergleichsgruppe sowohl deutlich weiter in ihren IoT-Projekten als auch sehr viel investi tionsfreudiger, wenn es um den Ausbau des künftigen IoT-Budgets geht. Der schon heute erkennbare Vorsprung gegenüber Unternehmen im DACH-Raum könnte s ich demnach in Zukunft sogar noch vergrößern.
Erstaunlich s ind auch die DACH-Ergebnisse mit Blick auf das IoT-Testing. Wenn mehr als die Hälfte der Unternehmen keinen Verantwortlichen für das IoT-Testing benennen kann, darf man durchaus die organisatori -sche Reife diesbezüglich in Frage stellen. Auch die Angaben zum IoT-Testing-Budget offenbaren Nachholbedarf. Das Gros der Unternehmen gibt weniger als 5% ihres IoT-Budgets für die Quali tätssicherung aus. Das spricht nicht gerade für ernsthafte Zukunftspläne im IoT-Markt.
Insofern gibt es in den Unternehmen viel zu tun, wenn man den An-schluss an die IoT-Entwicklung nicht verpassen wi ll. Wichtig ist, dass IoT-Projekte gestartet werden und einer unternehmensweiten IoT-Strategie folgen. Dazu sind ausreichende IoT-Budgets erforderlich, die auch eine verläss liche und hochwertige Quali tätssicherung ermöglichen. Denn k lar i st, dass IoT-Innovationen dynamisch, zunehmend häufig und agi l entwickelt werden und daher ein ebenso dynamisches, agi les und au-tomatisiertes Testing benötigen.
Ermutigend ist immerhin, dass die DACH-Unternehmen die Qualitätssi -cherung auch im IoT-Umfeld durchaus wertschätzen (solange man die Budget-Frage ausk lammert) und Aspekten wie Sicherheit und Effizienz-steuerung einen hohen Stellenwert einräumen. Weiterhin sind sie auch bereit, Arbeiten abzugeben oder zu automatisieren, um sich intensiver auf Kernaufgaben konzentrieren zu können. Um jedoch im weltweiten Wettbewerb auch in Zukunft eine ernstzunehmende Rolle zu spielen, sollten sie auch ihre finanziellen Mittel rund um IoT und das IoT-Testing aufstocken.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 22
METHODIK
PAC hat im Auftrag von Accenture 102 telefonische Interviews durch-geführt. Alle Tei lnehmer sind in verantwortlicher Posi tion entscheidungs-befugt und haben IoT-Erfahrung wenigstens im Rahmen von Evaluie-rungsprojekten gesammelt. Die Erhebung fand im August und Septem-ber 2017 statt.
75%
17%
9%
Deutschland
Österreich
Schweiz
51% 49%
250 - 1.000 Mitarbeiter
Mehr als 1.000 Mitarbeiter
6%
12%
43%
5%
11%
8%
16%
Geschäftsführung/ Unternehmensentwicklung
Leiter IoT/Digitalisierung (CDO)
CIO/IT-Leiter
Application/Testing Manager
Leiter Engineering/Produktion
Leiter Forschung & Entwicklung
Andere Position mit IoT-, M2M- oder Testing-Verantwortung
32%
22%
20%
14%
13%
Fertigung/verarbeitendes Gewerbe
Transport
Einzelhandel
Ver- und Entsorgung
Telekommunikation
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 23
ÜBER ACCENTURE
Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Services und Lösungen in den Bereichen Stra-tegie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender Erfahrung und spezialis ierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg – gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und Technologie, um Kunden dabei zu un-terstützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kunden in über 120 Ländern tätig sind, treibt Accenture Inno-vationen voran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbessern.
Besuchen Sie uns unter www.accenture.de/testing.
Kontakt : Inti F lorez-Brandel Senior Manager Testing Service +49 175 576 09 09 inti . florez-brandel@accenture.com www.accenture.de
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 24
ÜBER PAC
Die CXP Group ist das führende unabhängige, europäische Marktana-lyse- und Beratungsunternehmen für den Software- und IT-Dienstleis-tungsmarkt sowie digitale Transformation.
Wir bieten unseren Kunden umfassende Support-Serv ices in der Bewer-tung, Auswahl und Optimierung ihrer Softwarelösungen und begleiten s ie bei ihrer digitalen Transformation. Unsere Expertise deckt ein breites Themenspektrum ab, wie z.B. BI, Content Management, ERP, Finanzwe-sen, Personalinformationssysteme (PIS), CRM, BPM, IT-Management o-der Cyber Securi ty.
Darüber hinaus unterstützt die CXP Group IKT-Entscheidungsträger bei der Bewertung und Auswahl von IT-Dienstleistern und begleitet sie bei der Optimierung ihrer Sourcing- und Investi tionsstrategien.
Schließlich steht die CXP Group Software- und IT-Dienstleistungsanbie-tern mit quanti tativen und quali tativen Analysen sowie strategischer und operativer Beratung bei der Optimierung ihres Go-to-Market-Ansat-zes zur Seite. Auch öffentliche Einrichtungen vertrauen bei der Entwick-lung ihrer IT-Richtlinien auf unsere Studien.
Mit 40 Jahren Markterfahrung, 17 Niederlassungen in weltweit acht Län-dern und 150 Mitarbeitern unterstützt die CXP Group jährlich mehr als 1.500 IKT-Entscheidungsträger und die operativen Unternehmensberei-che sowohl großer als auch mittelständischer Unternehmen und deren Provider. Die CXP Group besteht aus drei Gesellschaften: Le CXP, BARC (Business Application Research Center) und PAC (Pierre Audoin Consul-tants).
Weitere Informationen unter www.pac-online.com.
PACs News: www.pac-online.com/blog
PAC GmbH Holzst r. 26 80469 München +49 (0)89 23 23 68 0 info-germany@pac-online.com www.pac-onl ine.com
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 25
HAFTUNGSAUSSCHLUSS, NUTZUNGSRECHTE, UNABHÄNGIGKEIT UND DATENSCHUTZ
Diese Studie wurde im Auftrag von Accenture erstellt.
Haftungsausschluss
Die Inhalte dieser Studie wurden mit der größtmöglichen Sorgfalt zu-
sammengestellt, eine Gewähr für ihre Richtigkeit kann jedoch nicht
übernommen werden. Einschätzungen und Beurtei lungen spiegeln un-
seren gegenwärtigen Wissensstand im Oktober 2017 wider und können
s ich jederzeit ändern. Das gi lt insbesondere, aber nicht ausschließlich,
für zukunftsgerichtete Aussagen. In dieser Studie vorkommende Namen
und Bezeichnungen s ind möglicherweise eingetragene Warenzeichen.
Nutzungsrechte
Diese Studie ist urheberrechtlich geschützt. Jegliche Vervielfältigung
oder Weitergabe an Dri tte, auch auszugsweise, bedarf der vorherigen
explizi ten Einwi lligung. Auch die Veröffentlichung oder Weitergabe von
Tabellen, Grafiken etc. in anderen Publikationen bedarf der vorherigen
Genehmigung.
Unabhängigkeit und Datenschutz
Diese Studie wurde allein von Pierre Audoin Consultants (PAC) erstellt.
Der Auftraggeber hatte keinen Einfluss auf die Auswertung der Daten
und die Erstellung der Studie.
Den Befragungstei lnehmern an der Studie wurde Vertraulichkeit ihrer
Angaben zugesichert. Keine Aussage lässt Rückschlüsse auf individu-
elle Unternehmen zu, und keine individuellen Befragungsdaten wurden
an den Auftraggeber oder Dri tte weitergegeben. Alle Tei lnehmer wur-
den zufällig ausgewählt. Es besteht kein Bezug zwischen der Studiener-
stellung und einer etwaigen Kundenbeziehung zwischen den Befragten
und dem Auftraggeber dieser Studie.
I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 26
Das IoT-Testing hält neue Herausforderungen bereit
Joachim Hackmann Principal Consultant
Februar 2018
In Kooperation mit
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 2
INHALT
Einleitung ........................................................................................................................................... 3 Die Testing-Strategie: Fokus auf die Kernkompetenz ......................................................................... 4
PAC-Kommentar: Auf Skalierbarkeit achten .......................................................................................... 4 Die Herausforderungen: Security und Interoperabilität ...................................................................... 5
PAC-Kommentar: Problemfall Feldverhalten ......................................................................................... 5 Best Practices: Was machen die erfahrenen Nutzer? ......................................................................... 6
PAC-Kommentar: Es gibt wenige, aber wertvolle Erfahrungswerte..................................................... 6 Charakteristika: Erfahrene vs. unerfahrene Nutzer ............................................................................. 7 Methodik ........................................................................................................................................... 8
Methodik der IoT-Testing-Studie .............................................................................................................. 8 Kreuzauswertung für die Spotlight-Analyse ............................................................................................ 9 Über Accenture ...................................................................................................................................... 10 Über PAC ................................................................................................................................................. 11
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 3
EINLEITUNG
Bei der Realisierung neuer digitaler Geschäftsmodelle, Services und Produk-te konzentrieren sich die Unternehmen derzeit sehr stark auf die Software-entwicklung. Um die notwendige Schnelligkeit und Beweglichkeit zu ge-währleisten, werden in der Regel agile Methoden wie etwa Scrum oder DevOps im Testing und in der Inbetriebnahme favorisiert. Eines der wichtigs-ten Elemente in der schnellen Entwicklung ist die Testautomation. Sie bewirkt eine enorme Beschleunigung des gesamten Prozesses – soweit es die reine Softwareentwicklung betrifft.
IoT beziehungsweise das Internet der Dinge besteht aber aus einer wesentli-chen physischen Komponente, also etwa Sensoren, Aktoren, Produkte und Anlagen. IoT schlägt demnach eine Brücke zwischen der physischen (oft analogen) und der virtuellen (immer digitalen) Welt. Und an dieser Schnitt-stelle stoßen herkömmliche Testing-Anordnungen oft an ihre Grenzen, weil sie auf die Belange der Softwareentwicklung ausgerichtet sind. Viele IoT-spezifische Fragen können klassische IT-Testing-Ansätze, die in den vergan-genen Jahren in den Unternehmen etabliert wurden, daher nicht beantwor-ten:
• Wie lassen sich Sensoren und Devices unter realen Bedingungen testen?
• Wie lassen sich Aktion und Reaktion in einer Testumgebung realis-tisch herbeiführen?
• Wie kann man das Feldverhalten smarter Produkte simulieren?
• Wie wirken sich Temperaturschwankungen, Erschütterungen oder Vibrationen auf die IoT-Devices aus?
• Wie sind Risiken, die durch den IoT-Einsatz entstehen, abschätzbar und zu bewerten?
• Oder ganz allgemein: Braucht man völlig neue Umgebungen für das Testing von IoT-Lösungen?
Weil das IoT-Testing eine sehr junge Disziplin mit wenigen Erfahrungswerten ist und um etwas genauere Einblicke in die besonderen Herausforderungen, Wünsche und Einschätzungen der Anwender zu bekommen, hat PAC in Kooperation mit Accenture im Sommer 2017 eine Umfrage unter 102 Unter-nehmen durchgeführt. Die vorliegende Spotlight-Analyse wertet die Antwor-ten gezielt unter dem Aspekt des unterschiedlichen Antwortverhaltens von erfahrenen und unerfahrenen Nutzern aus. Ziel war es, aus den Erkenntnissen der erfahrenen Firmen Empfehlungen für Neueinsteiger zu gewinnen. Zu den erfahrenen Nutzern zählen all jene Unternehmen, die mindestens ein IoT-Projekt erfolgreich abgeschlossen haben. Als unerfahren wurden Unterneh-men gewertet, die sich bereits intensiv mit dem IoT-Testing befasst und sich schon eine Meinung gebildet haben, aber noch kein Projekt abschließen konnten (siehe dazu auch das Kapitel „Methodik“).
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 4
DIE TESTING-STRATEGIE: FOKUS AUF DIE KERNKOMPETENZ
Oberste Prämisse aller Befragten ist die Fokussierung auf die Kernkompeten-
zen. Das gilt auch dann, wenn in Zeiten zunehmender Betriebsamkeit mit
einem steigenden IoT-Projektvolumen zu rechnen ist. Um die wachsenden
Aufgaben bewältigen zu können, wollen deutlich über 60 Prozent der Be-
fragten die Testautomation ausbauen, um so Ressourcen für anspruchsvolle
Aufgaben freizumachen.
Beide Befragungs-
gruppen wollen zu-
dem ihre interne Or-
ganisation so aufstel-
len, dass bei wach-
senden Arbeitsauf-
kommen eine bessere
Skalierung möglich ist.
Im Klartext bedeutet
dies, dass sich leichter
und schneller externe
Serviceleistungen im
IoT-Testing einbinden
lassen. Bei den weni-
ger erfahrenen Nut-
zern geht es ver-
gleichsweise häufiger darum, zunächst einmal interne Ressource auszubau-
en und manuelle Testing-Ressourcen einzubinden. Die erfahrenen Firmen
haben diesbezüglich weniger Nachholbedarf.
PAC-KOMMENTAR: AUF SKALIERBARKEIT ACHTEN
Neue IoT-Produkte und -Services entstehen heute häufig im Rahmen von
individuellen Entwicklungsprojekten. Das liegt zum einen an der Tatsache,
dass sie oft Kernbereiche des Unternehmens betreffen, zum anderen aber
auch daran, dass es noch keine geeigneten Blaupausen, Produkte und
Standardlösungen gibt. Damit ist aber auch klar, dass enorm viele interne
Ressourcen gebunden sind und eine weitere personelle Aufstockung in Zei-
ten des Fachkräftemangels schwerfallen wird. Die erfahrenen Nutzer haben
daraus offenbar die Lehre gezogen, nicht zwingend die eigene, interne IoT-
Test-Mannschaft aufzustocken. Sie wollen stattdessen die eigene Organisa-
tion so aufstellen, dass bedarfsweise schnell externe Ressourcen eingebun-
den werden können. Kombiniert mit einer weiteren Automatisierung ließen
sich so auch die erwartbaren Mehrarbeiten auffangen. Dieses Vorgehen ist
auch für die unerfahrenen Nutzer ein gangbarer Weg.
56%
61%
58%
72%
52%
36%
64%
48%
64%
44%
Vergrößerung der internen Testing-Organisation
Erweiterter Einsatz von Testautomatisierungs-Tools
Anpassung der internen Testing-Organisationsstruktur zur
Verbesserung der Skalierbarkeit
Konzentration auf die wichtigen Kernkompetenzen
Zusätzlicher Bezug manueller Testing-Ressourcen von
externen Partnern
Wie werden Sie Ihre Testing-Strategie anpassen, wenn die IoT-Projektvolumina steigen?
Erfahrene Unerfahrene
N=102
© P
AC
-a
CX
P G
roup
Com
pany
, 20
17
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 5
DIE HERAUSFORDERUNGEN: SECU-RITY UND INTEROPERABILITÄT
Auf die Frage nach den Herausforderungen im IoT-Testing zeigt die Analyse
der Antworten große Übereinstimmungen in vielen Bereichen: Das Security-
Testing, die Sorge um Interoperabilität sowie der Umgang mit unausgereiften
Standards empfinden jeweils Mehrheiten in beiden Gruppen als eine beson-
dere Aufgabe.
Doch in einigen
anderen wesentli-
chen Punkten sind
durchaus markante
Abweichungen er-
kennbar (siehe Gra-
fik). Was die uner-
fahrenen Nutzer
stärker umtreibt als
die erfahrenen Nut-
zer, sind die Themen
„Physisches Testen
von Produkten“ und
„Modellieren des
physischen Verhal-
tens“. Bei allen an-
deren hier dargestellten Themen sind es die erfahrenen Nutzer, die größere
Herausforderungen sehen. Besonders ausgeprägt sind die Unterschiede bei
den Antwortoptionen „Verhalten im Feld“ und „User Experience“, wo die
Abweichungen 14 Prozentpunkte umfassen.
PAC-KOMMENTAR: PROBLEMFALL FELDVERHAL-TEN
Verbucht man das Testing von „User Experience“ ebenfalls unter der Rubrik
„Feldverhalten“, so lässt die Umfrage darauf schließen, dass Testverfahren
für einen späteren Betrieb von IoT-Devices und Lösungen offenbar schwer
umsetzbar sind. Das zeigen die Antworten erfahrener Nutzer, die mehrheit-
lich eben diese Punkte als besondere Herausforderungen klassifiziert haben.
Ganz offensichtlich gibt es für das Testing im Feld noch keine einfachen
Lösungen.
Organisationen, die erst jetzt mit der Umsetzung von IoT-Projekten beginnen,
haben offenbar schon ein gutes Gespür für die Besonderheiten, die das IoT-
Testing mit sich bringt, da sie das Testing physischer Eigenschaften als her-
ausfordernd betrachten. Die Erkenntnisse der erfahrenen Nutzer geben Hin-
weise auf die Schwierigkeiten, die im Verlauf von IoT-Projekten noch auf sie
zukommen werden. Daher sollten Unternehmen rechtzeitig den Test des
Feldverhaltens von IoT-Devices und -Anwendungen im Auge behalten.
24%
41%
30%
38%
48%
48%
15%
31%
42%
50%
62%
62%
Modellieren des physischen Verhaltens
Physisches Testing von Geräten
Leistung und Skalierbarkeit
Connectivity Testing
Benutzererfahrung/User Experience
Verhalten im Feld
Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforderung?
Erfahrene Unerfahrene
N=102
© P
AC
-a
CX
P G
roup
Com
pany
, 20
17
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 6
BEST PRACTICES: WAS MACHEN DIE ERFAHRENEN NUTZER?
Die Erfahrungen von Nutzern mit abgeschlossenen IoT-Testing-Projekten
lassen sich zu einer Art Best Practices für solche Anwenderorganisationen
herausarbeiten, die erst am Anfang ihrer IoT-Projekte und IoT-Testing-
Verfahren stehen.
Demnach haben erfahrene Unternehmen mehrheitlich eine IoT-Testing-
Strategie formuliert und unternehmensweit umgesetzt. Über ihre Einhaltung
wacht in der Regel der CIO. Die IoT-Testing-Budgets sind nicht üppig und
viele Teilnehmer der Umfrage halten sie für zu klein, sie sollen aber steigen.
In technischer Hinsicht erachtet man vor allem die mangelnde Interoperabi-
lität und das Security-Testing als besondere Herausforderung. Erschwerend
kommt der anhaltende Fachkräftemangel hinzu. Bei steigenden Anforde-
rungen will man sich vor allem auf die Kernkompetenzen konzentrieren.
Außerdem soll die Automatisierung intensiviert werden, um den steigenden
Berg an Arbeit zu bewältigen. Aber auch Hilfe von externen Anbietern soll in
Zukunft vermehrt angefragt werden. Sie wird vor allem in der Umsetzung der
IoT-Testing-Aufgaben benötigt und um Qualitätsansprüche zu erfüllen bezie-
hungsweise zu halten. Dazu soll die interne Organisation so angepasst wer-
den, dass sich externe Ressourcen schnell einbinden und managen lassen.
Die bevorzugten Adressaten für Hilfe von außen sind IT-Dienstleister und
Hersteller von Automatisierung-Tools.
PAC-KOMMENTAR: ES GIBT WENIGE, ABER WERT-VOLLE ERFAHRUNGSWERTE
Die Erfahrungen sowie die Datenlage rund um das IoT-Testing sind derzeit
noch dünn. Die Erfahrungen der Nutzer, die sich an der PAC-Umfrage betei-
ligt haben, sind hilfreich und wertvoll, können aber allenfalls Denkanstöße
sein. Zurzeit sind alle IoT-Projekte in höchstem Maße unternehmensspezifisch
– und genauso individuell sind auch die IoT-Testing-Strategien und -Projekte.
Insofern muss jedes Unternehmen seinen eigenen Weg finden.
Dennoch sollte man den kleinen, aber vorhandenen Erfahrungsschatz nicht
ignorieren. Die Erkenntnisse der Unternehmen mit laufenden und abge-
schlossenen IoT-Projekten zeigen, dass das IoT-Testing (neben den Dauer-
brennern Security, mangelnde Interoperabilität und Standardisierung) vor
allem bei den physischen Tests, beim Feldverhalten und beim Testing der
User Experience besondere Herausforderungen bereithält. Gleichzeitig ha-
ben alle Befragten erkannt, dass auf Dauer nur die Automatisierung einen
Beitrag liefern kann, um neue IoT-Lösungen zügig und mit hoher Qualität auf
den Markt bringen zu können. Insofern sind alle Beteiligten gefragt, auch in
den besonderen Disziplinen des IoT-Testings an Verfahren zu arbeiten, die
eine schnelle, automatisierte Prüfung aller Einflussfaktoren auf die Funktions-
fähigkeit und Zuverlässigkeit im späteren Betrieb möglich machen.
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 7
CHARAKTERISTIKA: ERFAHRENE VS. UNERFAHRENE NUTZER
Die unterschiedlichen Ergebnisse der Antworten von erfahrenen und uner-
fahrenen Nutzern lassen sich in Sachen IoT-Testing folgendermaßen darstel-
len:
Erfahrene Nutzer Unerfahrene Nutzer
IoT-Strategie Ist formuliert und umge-
setzt
Nicht vorhanden
IoT-Testing-
Budget Tendenziell höher als bei
den unerfahrenen Nutzern,
wachsend
Tendenziell niedriger als bei
den erfahrenen Nutzern,
aber schneller wachsend
Ziele des IoT-
Testings Effizienz und Sicherheit Qualitätsverbesserung,
Sicherheit
Herausfor-
derungen Fachkräftemangel, Securi-
ty-Testing, Interoperabilität
Mangelnde Veränderungs-
bereitschaft, Fachkräfte-
mangel, Interoperabilität,
Security-Testing
Defizite End-to-end-Testing für User
Experience, Feldverhalten,
IoT-Geräte-Testing
Geräte-Sicherung, End-to-
End-Testing für User Experi-
ence, Feldverhalten
Strategie bei
wachsenden
Volumina
Konzentration auf Kern-
kompetenz, Testautomati-
sierung, interne Organisa-
tion an bessere Skalierung
anpassen
Konzentration auf Kernkom-
petenz, Testautomatisie-
rung, interne Organisation
ausbauen und an bessere
Skalierung anpassen
Externer
Support IT-Dienstleister, Anbieter
von Automatisierungs-Tools
Anbieter von IoT-
Plattformen
Gewünschte
externe Un-
terstützung
Bereitstellung von Kapazi-
täten für die Umsetzung
Beratung in der Planungs-
phase, Qualitätsverbesse-
rung
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 8
METHODIK
METHODIK DER IOT-TESTING-STUDIE
PAC hat im Auftrag von Accenture 102 telefonische Interviews mit IT-Entscheidern in Unternehmen verschiedener Branchen in der DACH-Region durchgeführt. Alle Teilnehmer sind in verantwortlicher Position entschei-dungsbefugt und haben IoT-Erfahrung wenigstens im Rahmen von Evaluie-rungsprojekten gesammelt. Die Erhebung fand im August und September 2017 statt.
Auftei lung nach Posi tion
Auftei lung nach Branchen
75%
17%
9%
Deutschland
Österreich
Schweiz
51% 49%
250 - 1.000 Mitarbeiter
Mehr als 1.000 Mitarbeiter
6%
12%
43%
5%
11%
8%
16%
Geschäftsführung/ Unternehmensentwicklung
Leiter IoT/Digitalisierung (CDO)
CIO/IT-Leiter
Application/Testing Manager
Leiter Engineering/Produktion
Leiter Forschung & Entwicklung
Andere Position mit IoT-, M2M- oder Testing-Verantwortung
32%
22%
20%
14%
13%
Fertigung/verarbeitendes Gewerbe
Transport
Einzelhandel
Ver- und Entsorgung
Telekommunikation
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 9
KREUZAUSWERTUNG FÜR DIE SPOTLIGHT-ANALYSE
Für die vorliegende Spotlight-Analyse wurde das Antwortverhalten der erfahrenen Nutzer dem der unerfahrenen Nutzer gegenübergestellt. Basis für die Eintei lung waren die Angaben zur folgenden Frage:
Welche der folgenden Optionen beschreibt den derzeitigen Status Ihrer IoT-Strategie am besten?
Unternehmen der P lanungs- und Frühphase (siehe untenstehende Grafik) wurden der Gruppe der unerfahrenen Nutzer zugeordnet. Die Gruppe der erfahrenen Nutzer wird von den Unternehmen gebi ldet, die sich der mitt leren und fortgeschri ttenen Phase zugeordnet haben.
11%
16%
38%
35%
Fortgeschrittene Phase: Wir haben bereits eine organisationsweite
IoT-Strategie, basierend auf einer einheitlichen Architektur und
definierten Methoden.
Mittlere Phase: Unsere IoT-Initiativen zeigen erste Geschäftserfolge oder
-veränderungen.
Frühphase: Wir haben schon erste Pilotprojekte umgesetzt.
Planung: Wir befinden uns noch in der Planungs- und
Evaluierungsphase.
N=102
© P
AC
- a
CX
P G
rou
p C
om
pa
ny,
201
7
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 10
ÜBER ACCENTURE
Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Services und Lösungen in den Bereichen Stra-tegie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender Erfahrung und spezialis ierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg – gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und Technologie, um Kunden dabei zu un-terstützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kunden in über 120 Ländern tätig sind, treibt Accenture Inno-vationen voran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbessern.
Besuchen Sie uns unter www.accenture.de/testing.
Kontakt : Inti F lorez-Brandel Senior Manager Testing Service +49 175 576 09 09 inti . florez-brandel@accenture.com www.accenture.de
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 11
ÜBER PAC
Pierre Audoin Consultants (PAC) wurde 1976 gegründet und gehört seit Juni
2014 zur CXP Group, dem führenden unabhängigen europäischen Markt-
analyse- und Beratungsunternehmen für die Software- und IT-
Dienstleistungsindustrie sowie für Themen rund um die digitale Transformati-
on.
Wir bieten unseren Kunden umfassende Support-Services in der Bewertung,
Auswahl und Optimierung ihrer Softwarelösungen sowie bei der Bewertung
und Auswahl von IT-Dienstleistern und begleiten sie bei der Optimierung ihrer
Sourcing- und Investitionsstrategien. Die CXP Group begleitet IKT-
Entscheidungsträger bei ihrer digitalen Transformation.
Schließlich steht die CXP Group Software- und IT-Dienstleistungsanbietern mit
quantitativen und qualitativen Analysen sowie strategischer und operativer
Beratung bei der Optimierung ihres Go-to-Market-Ansatzes zur Seite. Auch
öffentliche Einrichtungen vertrauen bei der Entwicklung ihrer IT-Richtlinien
auf unsere Studien.
Mit 40 Jahren Markterfahrung, 17 Niederlassungen in weltweit 8 Ländern und
140 Mitarbeitern unterstützt die CXP Group jährlich mehr als 1.500 IKT-
Entscheidungsträger und die operativen Unternehmensbereiche sowohl
großer als auch mittelständischer Unternehmen und deren Provider. Die CXP
Group besteht aus drei Gesellschaften: Le CXP, BARC (Business Application
Research Center) und Pierre Audoin Consultants (PAC).
Weitere Informationen unter www.pac-online.com.
PACs News: www.pac-online.com/blog
Folgen Sie uns auf Twitter: @CXPgroup_DE
PAC GmbH Holzst r. 26 80469 München +49 (0)89 23 23 68 0 info-germany@pac-online.com www.pac-onl ine.com
Das IoT -Test ing hält neue Her ausfor der ungen ber eit 12
PAC Q&A
„Integrales IoT-Testing ist essenziell für nachhaltige Erfolge von IoT-Produkten“
PAC im Gespräch mit Inti Florez-Brandel, Testarchitekt und Berater bei Accenture Technology
Mai 2018
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 2
Hintergrund
Das Internet of Things (IoT) i st in den Unternehmen angekommen – viel-
leicht noch nicht als konkretes Projekt oder betriebsbereite Lösung,
doch auf jeden Fall a ls eine interessante Technologie für weitere Effi -
z ienzverbesserungen, für neue Kundenservices oder gar für disruptive
Geschäftsmodelle. Die Softwareentwicklung wird dabei als wichtiger
Baustein akzeptiert, denn ohne neue Applikationen, moderne Kunden-
schnittstellen und leistungsstarke Analyseprogramme lässt sich das IoT
kaum gewinnbringend einsetzen. Dementsprechend fließen viele In-
vestitionen und Anstrengungen in die indiv iduelle Entwicklung von Soft-
ware.
Abb. 1: Welche der folgenden Aussagen beschreibt am besten Ihren aktuellen Stand
bzgl. Ihrer IoT-Testing-Strategie?
Dagegen wird das IoT-Testing häufig vernachläss igt. Das geht aus einer
Umfrage hervor, die PAC in Kooperation mit Accenture im vergange-
nen Jahr durchgeführt hat. Nur 12 % von über 100 befragten Unterneh-
men mit IoT-Erfahrungen haben eine unternehmensweite digitale Tes-
t ing-Strategie definiert und umgesetzt. PAC sprach mit Inti F lorez-
Brandel, Testarchitekt und Berater bei Accenture Technology, darüber,
warum Unternehmen das Testing unbedingt in IoT-Vorhaben integrieren
sollten und wie sie dabei vorgehen sollten.
31%
41%
16%
12%
Derzeit haben wir keine Strategie.
Wir entwickeln derzeit eine Strategie,die innerhalb der nächsten 12
Monate etabliert sein wird.
Wir haben eine Strategie etabliert,haben aber noch nicht begonnen,
diese umzusetzen.
Wir haben unsere digitale Testing-Strategie bereits umgesetzt.
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 3
Die Umfrage von PAC und Accenture unter deutschen Unternehmen zum
IoT-Testing hat gezeigt, dass der Großteil der Befragten in ihren IoT-Projek-ten, aber vor allem auch beim IoT-Testing noch ganz am Anfang der Ent-wicklung stehen. Hat Sie das Ergebnis überrascht?
Zum Teil ja, es besteht offensichtlich noch eine Lücke zwischen Wunsch
und Realität beim Thema IoT. Auch wenn es einzelne gute Beispiele für IoT-
Anwendungsfälle gibt, ist der große Durchbruch für IoT-Lösungen noch
nicht erfolgt. Da das Testing-Thema traditionell eher nachgelagert be-
trachtet wird, ist klar, dass bei diesem Entwicklungsstand Testing noch kein
Top-Agendapunkt ist. Gleichzeitig wird jedoch verkannt, wie essenziell
wichtig es ist, schon in einer frühen Phase die effiziente Validierung von
Qualitätseigenschaften in der Produktenwicklung zu berücksichtigen.
Was ist das Besondere am IoT-Testing?
Das IoT-Testing unterscheidet sich stark von den
klassischen Testansätzen und dies nicht nur im
Hinblick auf besondere Testherausforderungen,
die mit der technischen Integration der physi-
schen und logischen Welt einhergehen, wie zum
Beispiel bei der Simulation physischer Umge-
bungsparameter. IoT-Testing ist essenziell, da
der Erfolg von IoT-Produkten stark davon ab-
hängt, wie gut die Qualitätsherausforderungen
im Produktdesign adressiert wurden und wie ef-
fizient diese in frühen Entwicklungsphasen an-
gegangen werden können. Schnelle Entwick-
lungs- und Feedbackzyklen sind Voraussetzun-
gen für einen erfolgreichen und nachhaltigen
Marktauftritt. Folglich wird im Zusammenhang
mit dem IoT zumeist von „Quality Engineering“ und nicht vom Testen ge-
sprochen. Ein nachträgliches „Herein-Testen“ von Qualität funktioniert im
IoT-Umfeld nicht, angesichts der besonders hohen Herausforderungen an
Schnelligkeit und Agilität.
Testing-Prozesse sind in jedem Unternehmen, das Produkte und Software entwickelt, anerkannt und etabliert. Dennoch zeigt die Erhebung Unsi-cherheit bei vielen Befragten beim IoT-Testing von Hardware und Software,
insbesondere wenn es um das Verhalten im Feld geht. Haben Sie eine Er-klärung für diese Unsicherheit?
Der Zusammenschluss und die Integration von Information Technology und
Operational Technology und das Design neuer Produkte mit Hilfe neuer
Technologien stellen eine neue Domäne dar, für die es auch im Testing
nur wenig Erfahrung gibt. Viele Karrieren haben ihren Schwerpunkt in der
einen oder anderen Welt, und weniger im Zusammenschluss der beiden
Welten, in deren Wirken häufig nun auch noch neue Anwendungsfälle und
Geschäftsfelder zu erschließen sind. Diese Gemengelage stellt Firmen vor
Inti Florez-Brandel ist Testarchitekt und Berater bei Accenture Technology mit einer langjährigen Expertise in der Realisie-rung und der Umsetzung von anspruchsvollen und innovati-ven Qualitäts- und Testprojekten für komplexe Infrastruktur- und Applikationssysteme. Schwerpunkt seiner Arbeit ist die Adaption und Reorganisa-tion von klassischen Testvorgehensweisen im Kontext großer digitaler Transformationsprojekte, sowie das Aufsetzen und die Realisierung anspruchsvoller Testvorhaben für neue Tech-nologien. Hierzu gehören auch IoT Quality Engineering und die Testadaption für DevOps und Scaled Agile Framework (SAFe) im Enterprise-Umfeld. Seine Testexpertise erlangte Inti Florez-Brandel in mehr als 30 Projekten verschiedener Branchen, in forschungsnahen Projekten, sowie der Anwendung und Umsetzung vielfältiger Methoden und Werkzeuge.
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 4
besondere Herausforderungen, und häufig fehlt es hier an Fachwissen für
die eine oder andere Seite. Die Verlagerung vom klassischen Testing zu
Quality Engineering ist ein konkretes Beispiel, welches über die Prozessan-
passung hinausgeht und eine strukturelle und organisatorische Anpassung
im Unternehmensumfeld erforderlich macht, um wirken zu können.
Die Umfrage hat auch ergeben, dass die Budgets im IoT-Testing-Bereich
recht schmal sind. Reflexartig würde wahrscheinlich jeder angesichts der Bedeutung des Themas dazu raten, die Mittel zu erhöhen. Sehen Sie ab-gesehen davon andere Wege, das IoT-Testing in den Unternehmen auf ein
höheres Niveau zu bringen?
Abb. 2: Wie hoch ist der Anteil Ihres IoT-Budgets, den Sie derzeit in Testing und Quali-
tätssicherung investieren?
Das bloße Investment in IoT-Testing als alleinige Maßnahme ist nicht ziel-
führend. Sinnvoller ist es, das Bewusstsein für Qualität tiefer in der Unter-
nehmenskultur zu verankern und den Stellenwert klarer herauszuarbeiten.
Qualität ist hierbei nicht nur im Sinne einer reibungslosen Funktionalität zu
verstehen, sondern als Strategie für das Unternehmen und deren Produkte
beziehungsweise deren Eignung für die IoT-Nutzung, die ja völlig neuen
Gesichtspunkten unterliegt.
Nutzernahe Qualitätseigenschaften sind also nicht nur als Kür, sondern als
Pflicht für einen nachhaltigen Produkterfolg zu verstehen. Wenn es gelingt,
hierfür das erforderliche Bewusstsein im Engineering zu verankern, ist eine
gute Voraussetzung für ein effizienteres Testing geschaffen. Mit dieser Basis
können spezifische Testherausforderungen besser gemeistert werden.
11%
6%
4%
18%
62%
Weiß nicht/keine Angabe
16% und mehr
11%-15%
6%-10%
0-5%
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 5
Gibt es bestimmte Methoden, Tools oder Technologien, die Sie beim IoT-
Testing empfehlen würden?
Als Beispiel seien hier gerade die Tools und Technologien erwähnt, die auf
Qualitätsaspekte abzielen, die im nicht-funktionalen Bereich zu finden
sind. Zum Beispiel hat die häufig verminderte Netzgüte in der Interaktion
von „Dingen“ und Systemen einen größeren Einfluss auf Funktionalität und
Qualität als zunächst angenommen. Das Verhalten kann hier mithilfe von
Impairment-Simulatoren unter Einsatz von ungünstigen Netzbedingungen
näher untersucht werden.
Insgesamt kann aber festgehalten werden, dass
es „das“ IoT-Testing als eine Disziplin kaum gibt.
Dafür sind die Vielfalt und Anforderungen der
darunter zu verstehenden Lösungen zu hetero-
gen. Was den Lösungen häufig gemein ist und
wo sich ähnliche Testherausforderungen fest-
stellen lassen, ist das Wechselspiel zwischen dis-
kreter, also logischer, und physischer, kontinuier-
l icher Welt bei gleichzeitiger Offenheit und Fle-
xibilität. Im Idealfall können im gewählten De-
sign- und Testansatz die richtigen Designantwor-
ten bereits frühzeitig im Entwicklungspfad vali-
diert werden. Hierzu ist eine genaue Kenntnis
der spezifischen Anforderungen unabdingbar.
Was sind aus Ihrer Projekterfahrung heraus die größten Schwierigkeiten,
wenn es um die Einführung und die Durchführung von IoT-Testing geht?
Das Fehlen einer abgestimmten Teststrategie und das Aufbauen eines ge-
meinsamen Verständnisses für den Testzweck und die Testinhalte führen
häufig zu vermeidbaren Mehraufwänden und zu einer erhöhten Unzufrie-
denheit beziehungsweise zu einer geringeren Akzeptanz für das Testing.
Gleichzeitig verpasst man ohne abgestimmtes Vorgehen die Chance ei-
ner kontinuierlichen Verbesserung.
Insbesondere im Bereich des IoT-Testing sind lückenhaftes Methodenwis-
sen und fehlende Tool-Kenntnisse besonders ausschlaggebend für eine er-
folgreiche Einführung sowie Durchführung von Testing-Projekten. Aufgrund
der Silo-übergreifenden Anforderungen im IoT-Testing sind oft spezielle
Kenntnisse nicht ad hoc verfügbar, wenn es etwa um den Einfluss physi-
scher Gegebenheiten, um den Einsatz von Simulatoren, um die Hardware-
und Software-Integration, sowie um Netzprotokolle geht. Vielen Testern
fällt es schwer, die richtigen Testansätze zu formulieren, da es übergrei-
fende Kenntnisse für bisher eher abgegrenzte Gebiete erforderlich macht.
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 6
Gibt es einen Königsweg oder ein bewährtes Vorgehen, um Schwierigkei-
ten zu lösen? Welche Erfahrungen haben Sie in ihren Kundenprojekten diesbezüglich gemacht?
Das Vorgehen hängt immer von den Gegebenheiten ab beziehungsweise
muss entsprechend adaptiert werden. Am effizientesten ist es häufig, agile
Arbeitsweisen zu adaptieren und gemischte, interdisziplinäre Teams zu bil-
den, um gemeinsam das Bewusstsein für test- und qualitätsbezogene
Probleme zu schärfen und diese kollaborativ zu lösen. Gleichzeitig ist ein
schnelles Lernen erforderlich, da das IoT in vielen Fällen ein eher uner-
forschtes Gebiet ist und Kenntnisse fehlen.
Hilfreich ist es, bekannte Herangehensweisen zu verfolgen, sich auf Kern-
aspekte zu fokussieren und den Nutzerwert herauszustellen, um gezielt,
möglichst nahe am Kundenwunsch die richtigen Schlüsse für das Produkt-
design ziehen zu können. Diese Fokussierung sollte sich auch im Testansatz
manifestieren, indem zum Beispiel alle Produktrisiken, etwa im Bereich Usa-
bility und Security, von Beginn an im Testansatz methodisch mit integriert
und angewendet werden.
Abb. 3: Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforderung?
22%
33%
38%
41%
42%
44%
52%
52%
58%
63%
70%
Modellieren des physischen Verhaltens
Leistung und Skalierbarkeit
Physisches Testing von Geräten
Connectivity Testing
Interpretation der Ergebnisse bzw. desVerhaltens im Feld
Verfügbarkeit
Benutzererfahrung/User Experience
Verhalten im Feld
Unausgereifte Standards
Interoperabilität
Security Testing
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 7
Es ist unstrittig, dass IoT in vielen Branchen und vielen Unternehmen an
Bedeutung gewinnen wird. Welche künftigen Entwicklungen sehen Sie im IoT-Testing, um dem steigenden Bedarf und den wachsenden Anforderun-gen Herr zu werden? Wie wird das IoT-Testing der Zukunft aussehen?
Ganz klar steht die Verlagerung vom klassischen Testing zum Quality Engi-
neering im Fokus der Entwicklungen. Quality Engineering trägt den beson-
deren IoT-Herausforderungen insofern Rechnung, da es als integraler Teil
der gesamten Entwicklungskette sehr frühes Feedback und damit kontinu-
ierliche Verbesserungen gewährleistet. Qualität rückt somit in den Mittel-
punkt. Die hohen IoT-Herausforderungen, etwa
Stabilität, Interoperabilität und Sicherheit, werden
früh im Entwicklungsprozess berücksichtigt.
Gleichzeitig unterstützt Quality Engineering die
Entwicklung der richtigen T-Shaped Skill-Profile,
die gleichermaßen vertikales und horizontales
Fachwissen haben. Diese sind erforderlich, um die
richtigen Sichtweisen und stark konkurrierenden
Anforderungen in Einklang zu bringen.
Ein ebenso wichtiger Teilaspekt ist, dass ein erfolg-
reiches Quality Engineering ohne einen hohen Au-
tomatisierungsgrad beziehungsweise den Einsatz
von integrierten Simulatoren nicht möglich ist. Au-
ßerdem wird die allgegenwärtige Herausforde-
rung des Security-Testings von IoT-Projekten einen
immer größeren Stellenwert einnehmen.
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 8
Über Accenture
Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Serv ices und Lösungen in den Bereichen Stra-tegie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender Erfahrung und speziali sierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg – gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und Technologie, um Kunden dabei zu unter-stützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kun-den in über 120 Ländern tätig sind, treibt Accenture Innovationen vo-ran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbes-sern.
Besuchen Sie uns unter www.accenture.de/testing.
19
1 2 3Advisory &
MobilizationAssessment &
TrainingManagementto Execution
SAP Enterprise
System
Custom Development
Systems
Digital/Mobile
Internetof ThingsTesting
Quality Engineering
AgileTesting
Test Automation
Artificial Intelligence
driven systems
Über accenture
Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Services und
Lösungen in den Bereichen Strategie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender
Erfahrung und spezialisierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg –
gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und
Technologie, um Kunden dabei zu unterstützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert
für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kunden in über 120 Ländern tätig sind,
treibt Accenture Innovationen voran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbessern.
Besuchen Sie uns unter www.accenture.de/testing.
Experience New High Quality Testing
THROUGH
FOR
Contact us!
www.accenture.de
Kontakt : Inti F lorez-Brandel Senior Manager Testing Service +49 175 576 09 09 inti . florez-brandel@accenture.com www.accenture.de
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 9
Über PAC
Pierre Audoin Consultants (PAC) wurde 1976 gegründet und gehört seit
Juni 2014 zur CXP Group, dem führenden unabhängigen europäischen
Marktanalyse- und Beratungsunternehmen für die Software- und IT-
Dienstleistungsindustrie sowie für Themen rund um die digitale Transfor-
mation.
Wir bieten unseren Kunden umfassende Support-Services in der Bewer-
tung, Auswahl und Optimierung ihrer Softwarelösungen sowie bei der
Bewertung und Auswahl von IT-Dienstleistern und begleiten sie bei der
Optimierung ihrer Sourcing- und Investi tionsstrategien. Die CXP Group
begleitet IKT-Entscheidungsträger bei ihrer digitalen Transformation.
Schließlich steht die CXP Group Software- und IT-Dienstleistungsanbie-
tern mit quanti tativen und quali tativen Analysen sowie strategischer
und operativer Beratung bei der Optimierung ihres Go-to-Market-An-
satzes zur Seite. Auch öffentliche Einr ichtungen vertrauen bei der Ent-
wicklung ihrer IT-Richtlinien auf unsere Studien.
Mit mehr als 40 Jahren Markterfahrung, 17 Niederlassungen in weltweit
8 Ländern und 150 Mitarbeitern unterstützt die CXP Group jährlich mehr
als 1.500 IKT-Entscheidungsträger und die operativen Unternehmens-
bereiche sowohl großer als auch mittelständischer Unternehmen und
deren Provider. Die CXP Group besteht aus drei Gesellschaften: Le
CXP, BARC (Business Application Research Center) und Pierre Audoin
Consultants (PAC).
Weitere Informationen unter www.pac-online.com.
PACs News: www.pac-online.com/blog
Folgen Sie uns auf Twitter: @CXPgroup_DE
PAC GmbH Holzstr. 26 80469 München +49 (0)89 23 23 68 0 info-germany@pac-online.com www.pac-online.com
„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 10
Recommended