By the Reader, for the Reader: The Wall Street Journal's - - PDF document

¡ ¡ ¡ ¡ ¡ W13 ¡

Test ¡Transformation ¡ 2019-­‑05-­‑01 ¡14:45 ¡ ¡ ¡ ¡ ¡ ¡ ¡

By ¡the ¡Reader, ¡for ¡the ¡Reader: ¡The ¡Wall ¡ Street ¡Journal's ¡Secrets ¡to ¡Customer-­‑ Centric ¡Experiences ¡ ¡

Presented ¡by: ¡ ¡ ¡

Sumeet ¡Mandloi ¡

Dow ¡Jones ¡ ‘ ¡ ¡ ¡

Brought ¡to ¡you ¡by: ¡ ¡ ¡ ¡

¡

¡

¡ ¡

888-­‑-­‑-­‑268-­‑-­‑-­‑8770 ¡·√·√ ¡904-­‑-­‑-­‑278-­‑-­‑-­‑0524 ¡-­‑ ¡info@techwell.com ¡-­‑ ¡http://www.stareast.techwell.com ¡

¡ ¡

¡

Sumeet ¡Mandloi ¡ ¡

Sumeet ¡Mandloi ¡is ¡an ¡experienced ¡professional ¡with ¡a ¡career ¡spanning ¡nearly ¡20 ¡years ¡ in ¡quality ¡assurance, ¡test ¡automation, ¡and ¡product ¡and ¡release ¡management ¡with ¡ leading ¡companies ¡like ¡UBS, ¡Citibank, ¡and ¡TD ¡Ameritrade. ¡Sumeet ¡currently ¡serves ¡as ¡ engineering ¡director ¡at ¡Dow ¡Jones, ¡where ¡he ¡supports ¡faster ¡releases, ¡improves ¡quality, ¡ and ¡creates ¡brand ¡value ¡for ¡world-­‑renowned ¡products ¡like ¡The ¡Wall ¡Street ¡Journal, ¡ Marketwatch, ¡Barrons, ¡etc. ¡In ¡his ¡role, ¡Sumeet ¡built ¡effective ¡and ¡efficient ¡Engineering ¡

• rganizations ¡which ¡focus ¡on ¡product ¡quality ¡and ¡close ¡collaboration ¡between ¡Product, ¡

Engineering, ¡and ¡Design ¡teams. ¡He ¡is ¡an ¡avid ¡speaker ¡at ¡multiple ¡conferences ¡and ¡was ¡ instrumental ¡in ¡driving ¡a ¡team ¡of ¡engineers ¡to ¡build ¡a ¡Behavior ¡Driven ¡Test ¡Harness ¡ using ¡open-­‑source ¡technologies, ¡which ¡helped ¡recognize ¡Dow ¡Jones ¡as ¡a ¡finalist ¡two ¡ years ¡in ¡a ¡row ¡at ¡the ¡European ¡Testing ¡Awards ¡in ¡the ¡category ¡of ¡Quality ¡Engineering. ¡

4/23/19 ¡ 1 ¡

By the Reader, For the Reader

The Wall Street Journal’s Secrets to Customer-Centric Experiences

Sume meet Mand ndlo loi Engineering Director | Dow Jones Peter B Basile le Vice President of Marketing | Applause

4/23/19 ¡ 2 ¡

DIGIT DIGITAL T AL TRANS RANSFORMA ORMATION INIT ION INITIA IATIVE IVE

Digital experiences must match the quality and reliability that readers of The Wall Street Journal are accustomed to in print form Quality Assurance vs Quality Engineering

• Quality teams partner with business users

and product managers

• Problems are caught as products are being

built – not after the fact

• Boosts agility and efficiency
• Essential in the mission to deliver customer-

centric software

4/23/19 ¡ 3 ¡

1 1 2 2 3 3 4 4 5 5 Tr True partnering with the business Def Defect tracki ect tracking t ng to cust

• customer e
• mer experi

xperience ence Spe Speed u up d p develo lopme pment nt a and nd t test pr process Pre Prevent, no nt, not ju t just d st detect d ct defects cts Mi Mini nimi mize ze co costs sts

The test matrix is too big for internal Quality Engineering teams and release cycles are getting shorter to meet business demands.

Test Matrix Has Exploded

Sc Screen n Re Resolutions Operati Operating ng Sys Systems ms De Devi vices ces Re Responsive Desi Design gn We Web Br Browsers

4/23/19 ¡ 4 ¡

Building a “PDE” Framework

• Product, Design, and Engineering teams

working as a cohesive unit

• The road to quality engineering starts with

building the right culture

• Cross-collaboration is the backbone of quality

engineering

Customer-Centric Focus

• Wall Street Journal readers expect digital experiences to

match the quality of print editions

• Must design digital properties with the audience in mind
• Testing with real readers ensures all use cases and real-

world bugs are identified and fixed

• Testing specific demographics and locations to really focus
• n customers needs on apps and websites

4/23/19 ¡ 5 ¡

1. Customer-centric experiences help us remain credible to readers 2. Any design flaws, usability issues, or software bugs impact our image in the eyes of readers and advertisers 3. The cost of switching is essentially zero and there is a lot of competition for readers’ attention 4. Everything from other news organizations to social media sites is competing for the attention

• f customers

Why We Focus on Customers

Real Example: Redesigned Customer Center

4/23/19 ¡ 6 ¡

The Wall Street Journal: AR & VR

Applause as a Complementary Function

• Expand testing capabilities into real-world scenarios
• Short notice and around the clock testing provides early

feedback

• Use case testing through targeted demographics and

geographies

• Ability to quickly scale up and down

4/23/19 ¡ 7 ¡

Real Examples

Usability UI/UX feedback for redesigned customer center Provide competitive edge by supporting innovation center Internal SMEs continually test iOS and Android apps

The Results

Raised app rating from 3.2 to 4.5 stars Won Webby award for best news app Rolling out new features to 100%

• f users in 3 days instead of 10

4/23/19 ¡ 8 ¡

Q&A Q&A

Join t n the he c conversation o n on T n Twitter @MandloiSumeet @pbasilebasile

Visit us at Booth 2 h 29 for more information on how Applause can help your organization