5.2 Mælikvarðar á upptöku og notkun eiginleika

Yfirlit og tilgangur

Upptaka eiginleika mælir hvort fólkið sem eiginleiki var smíðaður fyrir notar hann í raun, á hvaða hraða, og hvort sú notkun helst yfir tíma. Hún er, í mjög beinum skilningi, raunveruleikaprófið á allt sem 2. til 4. hluti þessarar bókar mæla: skipulagsheild getur afhent títt, viðhaldið framúrskarandi þróunarupplifun og sent frá sér óaðfinnanlega prófaðan kóða, og samt verið að smíða hluti sem enginn vill. Upptökugögn eru þar sem verkfræðiskipulagsheild kemst að því hvort afurð hennar tengdist nokkurri raunverulegri niðurstöðu yfirleitt, sem er einmitt inntaks-afurða-niðurstöðu greinarmunurinn úr viðfangsefni 1.3 beittur á áþreifanlegasta tilvik þessarar bókar: tiltekinn, afhentan eiginleika.

Meginefni þessa viðfangsefnis er að upptökugögn, meira en nær allar aðrar mælikvarðafjölskyldur þessarar bókar, er auðvelt að mæla á hátt sem flatterar frekar en upplýsir. Eiginleiki getur sýnt áhrifamikla upphafsupptöku eingöngu af forvitni eða þvinguðu aðgengi (sprettigluggi sem birtist hvort sem notandi vill eða ekki) meðan sannarlegt, viðvarandi virðisframlag, mælt með því hvort fólk heldur áfram að nota hann þegar nýjabrumið fölnar, segir allt aðra sögu. Að greina raunverulega upptöku frá tímabundnum toppi er kjarnatækniáskorun þessa viðfangsefnis, og að fá það rangt leiðir reglulega til þess að skipulagsheildir fagna eiginleikum sem hljóðlega mistakast og yfirgefa þá sem voru rétt að byrja að finna áheyrendur sína.

Fyrir stór teymi eru upptökugögn það sem gerir vegvísaforgangsröðun sönnunarbyggða frekar en knúna af þeim sem talar sannfærandi fyrir vinnu eigin teymis. Stórfyrirtæki sem stýra stórum vörusöfnum þurfa upptökugögn til að greina hvaða fjárfestingar vinna fyrir sér; opinberar skipulagsheildir sem smíða stafræna þjónustu fyrir borgara þurfa þau til að sýna fram á að opinber fjárfesting framleiddi þjónustu sem fólk notar í raun, ekki bara þjónustu sem er tæknilega til.

Lykilmeginreglur

Upphafsupptaka og viðvarandi upptaka eru ólík merki. Toppur af forvitni eða þvinguðu aðgengi er ekki sama og sannarlegt, varanlegt virðisframlag.
Mæla ætti upptöku gegn áheyrendunum sem eiginleikinn var smíðaður fyrir, ekki gegn öllum notendahópnum án aðgreiningar.
Eiginleiki með litla upptöku er ekki sjálfkrafa mistök. Hann gæti verið illa uppgötvaður, illa miðaður eða einfaldlega nýr; rannsakaðu áður en þú ályktar.
Varðveisla notkunar skiptir meira máli en ein upptökumynd. Raktu hvort fólk sem prófaði eiginleika kemur aftur að honum.
Upptökugögn eru útsett fyrir leik gegnum þvingað aðgengi eða blekkingarhönnun. Tala sem er blásin upp með því að gera eiginleika erfiðan að forðast er ekki sannarlegt merki.

Ráðleggingar

Aðgreindu upphafsprófun frá viðvarandi varðveislu

Raktu tvær aðskildar tölur: hundraðshlutann af markáheyrendum þínum sem prófa eiginleika að minnsta kosti einu sinni (upphafsupptaka), og hundraðshlutann sem notar hann enn eftir marktækt tímabil, svo sem fjórar eða átta vikur (varðveitt upptaka). Eiginleiki með mikla upphafsprófun og litla varðveislu bendir til þess að auðfinnanleiki hafi virkað en eiginleikinn sjálfur hafi ekki skilað nógu miklu virði til að halda fólki við efnið, mjög ólík greining, og mjög ólík lagfæring, en lítil upphafsprófun með mikilli varðveislu, sem bendir til sannarlega verðmæts eiginleika sem ekki nógu margir vita um.

Skilgreindu markáheyrendur nákvæmlega áður en þú mælir upptöku

Upptaka mæld gegn öllum notendahópnum þínum getur verið villandi ef eiginleiki var aðeins ætlaður tilteknum hluta: eiginleiki fyrir kerfisstjóra fyrirtækja mældur gegn aðallega einstaklingsnotendahópi mun alltaf líta út eins og hann hafi hræðilega upptöku, óháð því hve vel hann þjónar í raun fólkinu sem hann var smíðaður fyrir. Skilgreindu ætlaða áheyrendur skýrt fyrir kynningu og mældu upptöku gegn þeim tiltekna nefnara, ekki heildarnotendafjölda þínum.

Rannsakaðu litla upptöku áður en þú ályktar að eiginleiki hafi mistekist

Lág upptökutala hefur nokkrar mögulegar orsakir sem kalla á mjög ólík viðbrögð: eiginleikinn er sannarlega ekki verðmætur, eiginleikinn er verðmætur en illa auðfinnanlegur (notendur vita ekki að hann er til), eiginleikinn er verðmætur en illa útskýrður (notendur sjá hann en skilja ekki tilgang hans), eða mælingarglugginn er einfaldlega of stuttur til að hægar-tekinn eiginleiki hafi enn fundið áheyrendur sína. Rannsakaðu hver þessara á við áður en þú ákveður að fjárfesta frekar, endurhanna eða leggja niður.

Gættu að upptöku sem er blásin upp með þvinguðu aðgengi eða blekkingarhönnun

Upptökutala knúin af því að eiginleiki er erfiður að forðast, uppáþrengjandi kynningarflæði, sprettigluggi sem notandi verður að loka, sjálfgefin stilling sem erfitt er að breyta, mælir ekki sannarlegt virðisframlag, og að fagna henni eins og hún gerði það endurtekur staðgengilsleikmynstur viðfangsefnis 1.2 í vörumynd. Paraðu hráar upptökutölur við ánægju- eða Net Promoter-líkt merki fyrir tiltekna eiginleikann þar sem mögulegt er, svo þvingað aðgengi sem þýðist ekki í sannarlega ánægju sé gripið frekar en fagnað.

Tengdu upptökuþróun aftur við sértækar vöru- og verkfræðiákvarðanir

Þegar upptaka hækkar eða fellur óvænt, raktu breytinguna aftur til sértækrar ákvörðunar, viðmótsbreytingar, breytingar á sjálfgefnum stillingum, markaðsátaks, frammistöðubótar eða -afturfarar, frekar en að meðhöndla hreyfinguna sem óútskýrða ráðgátu. Þetta tengir upptökugögn við framkvæmanlegt vöru- og verkfræðinám, og lokar lykkjunni milli sértækrar breytingar og mældra áhrifa hennar á raunverulega notkun.

Málamiðlanir: kostir og gallar

Nálgun	Kostir	Gallar
Mæling gegn heildarnotendahópi	Einföld, einn nefnari	Villandi fyrir eiginleika ætlaða tilteknum hluta
Mæling gegn skilgreindum markáheyrendum	Sanngjörn, nákvæm endurspeglun ætlaðs umfangs	Krefst vísvitandi áheyrendaskilgreiningar fyrir kynningu
Aðeins upphafsprófun	Hratt merki, tiltækt fljótt eftir kynningu	Missir af því hvort eiginleikinn skilar varanlegu virði
Upphafsprófun auk varðveislu	Aðgreinir forvitni frá raunverulegu virði	Krefst þess að bíða lengur (vikur) áður en full mynd birtist

Aðalspennan er hraði á móti heiðarleika. Upphafsprófunargögn eru tiltæk nær strax eftir kynningu og fullnægja skipulagsþrýstingi um að skýra frá snemmum niðurstöðum, en þau geta ekki ein og sér aðgreint forvitni eða þvingað aðgengi frá sannarlegu, varanlegu virði. Leystu spennuna með því að skýra frá upphafsprófunargögnum snemma og skýrt merktum sem bráðabirgða, meðan opinberlega er skuldbundið sig til eftirfylgniaflestrar á varðveislu á föstu, fyrirfram ákveðnu millibili, svo snemmbúin hrifning storkni ekki í órannsakaða velgengnisögu áður en raunverulega merkið hefur haft tíma til að birtast.

Spurningar til að ræða með teyminu

Fyrir nýlegasta afhenta eiginleika okkar, vitum við upphafsprófun og varðveitta notkun sérstaklega, eða aðeins eina sameinaða tölu? Ef aðeins sameinuð tala er til felur það bil einmitt forvitni-á-móti-virði greinarmuninn sem þetta viðfangsefni meðhöndlar sem miðlægan.
Var markáheyrendahópur þessa eiginleika skilgreindur skýrt fyrir kynningu, og mælum við upptöku gegn þeim tiltekna hópi? Athugið hvort núverandi upptökunefnari ykkar passar við þá sem eiginleikinn var í raun smíðaður fyrir, eða hvort hann er þynntur með því að mæla gegn óviðkomandi víðari hópi.
Fyrir eiginleika með litla upptöku, höfum við rannsakað hver hinna nokkurra mögulegu orsaka, lítið virði, léleg auðfinnanleiki, léleg útskýring, ónógur tími, á í raun við? Gangið í gegnum þennan sértæka greiningarlista fyrir raunverulegan, núverandi litla-upptöku eiginleika frekar en að hníga að „hann hlýtur að vera ekki verðmætur“.
Er einhver hluti skýrðrar upptökutölu okkar blásinn upp með þvinguðu aðgengi, uppáþrengjandi sjálfgefinni stillingu eða sprettiglugga sem krefst lokunar, frekar en sannarlegri, sjálfviljugri notkun? Verið heiðarleg hér; þetta er algengt og auðvelt mynstur að falla í, einkum undir þrýstingi að sýna snemma jákvæðar niðurstöður.
Þegar upptaka eiginleika hreyfðist verulega, gátum við rakið þá hreyfingu aftur til tiltekinnar breytingar sem við gerðum? Ef svarið er yfirleitt „við erum ekki viss“ takmarkar það bil hve mikið skipulagsheild ykkar getur í raun lært af eigin upptökugögnum yfir tíma.
Paraðum við upptökutölur við nokkurt ánægjumerki fyrir sama eiginleika, eða rekjum við aðeins hráa notkun? Há upptökutala pöruð við litla ánægju er viðvörunarmerki sem hrá notkun ein myndi algerlega missa af.

Geirasjónarhorn

Sprotafyrirtæki. Upptaka eiginleika er oft mikilvægasta einstaka merkið sem ungt fyrirtæki hefur, náið tengt vöru-markaðspassun sjálfri. Raktu varðveislu sérstaklega, ekki bara upphafsprófun, frá fyrstu eiginleikakynningu, því að greina raunverulegt virði frá snemmi forvitni er mikilvægt þegar lífsafkoma fyrirtækisins kann að velta á að fá þessa greiningu rétta.

Lítil fyrirtæki. Flestir greiningarvettvangar skýra grunnnotkunargögn með lágmarksuppsetningu; meginagi er að skilgreina markáheyrendur þína skýrt áður en þú mælir, frekar en að skýra frá upptöku gegn öllum viðskiptavinahópnum þínum óháð því hverjum tiltekinn eiginleiki var í raun smíðaður fyrir.

Stórfyrirtæki. Upptökugögn í þessum mæli eru nauðsynleg fyrir sanngjarna, sönnunarbyggða vegvísaforgangsröðun yfir stórt vörusafn, og agi þess að greina upphafsprófun frá viðvarandi varðveislu skiptir enn meira máli hér, því nógu stór notendahópur getur framleitt áhrifamikinn útlítandi upphafstopp fyrir næstum hverja kynningu óháð raunverulegu virði.

Hið opinbera. Upptaka stafrænnar þjónustu fyrir borgara er bein, áþreifanleg mæling á hvort opinber fjárfesting þýddist í raunverulegan almennan ávinning, og hún er oft langtum sannfærandi mælikvarði fyrir eftirlitsaðila en afhendingar- eða virknitalning. Mældu upptöku gegn þýðinu sem þjónustan var í raun smíðuð til að þjóna, og vertu heiðarlegur um hindranir (stafrænt læsi, aðgengi, vitund) sem kunna að útskýra litla upptöku umfram eigin hönnun þjónustunnar.

Dæmi

Stórfyrirtæki. Verkefnastjórnunarhugbúnaðarfyrirtæki kynnti nýjan samvinnuritunareiginleika og fagnaði áhrifamikilli 60% upphafsprófun á fyrstu tveimur vikum. Eftirfylgniaflestur á varðveislu eftir átta vikur sýndi aðeins 8% þessara upphafsprófenda enn nota eiginleikann reglulega, sem leiddi í ljós að hátt prófunarhlutfall hafði verið knúið nær alfarið af áberandi, erfiðum-að-loka kynningarábendingu frekar en sannarlegum, viðvarandi áhuga. Rannsókn á eigindlegri endurgjöf frá snemmprófendum sem höfðu hætt að nota eiginleikann leiddi í ljós sértækan, lagfæranlegan nothæfisvanda, óinnsæjan samskiptahátt, sem markviss endurhönnun tók á, og varðveitt notkun næstum þrefaldaðist eftir lagfæringuna, þótt hún næði aldrei villandi háu upphafsprófunartölunni.

Hið opinbera. Landsvinnumiðlun kynnti nýtt netstarfaparunartól, og skýrði í fyrstu frá upptöku gegn öllum skráða notendahópi stofnunarinnar, sem framleiddi letjandi lágt hlutfall sem ógnaði áframhaldandi fjármögnun áætlunarinnar. Endurskoðuð greining, sem mældi upptöku sérstaklega gegn undirmengi skráðra notenda sem leituðu virkt að vinnu í markgreinum tólsins, raunverulegum ætluðum áheyrendum, sýndi talsvert hærra og nákvæmara upptökuhlutfall. Ásamt markvissu kynningarátaki sérstaklega að þeim skilgreinda áheyrendahópi, og síðari varðveisluaflestri sem sýndi sterka viðvarandi notkun meðal notenda, tryggði áætlunin áframhaldandi fjármögnun byggða á leiðréttum, heiðarlega miðuðum mælikvarðanum frekar en villandi þynntu upprunalegu tölunni.

Viðskiptarök: hvatar, ávöxtun fjárfestingar og heildareignarkostnaður

Ávöxtun af ströngri mælingu á upptöku eiginleika er sönnunarbyggð vegvísafjárfesting: skipulagsheild sem getur greint raunverulegt, varðveitt virði frá forvitnidrifinni upphafsprófun getur fjárfest af öryggi frekar í eiginleikum sem virka sannarlega og beint fyrirhöfn frá þeim sem gera það ekki, frekar en að elta villandi upphafstopp eða yfirgefa ótímabært sannarlega verðmætan en hægt-uppgötvanlegan eiginleika.

Heildareignarkostnaður er aðallega greiningartækjavæðing, yfirleitt þegar tiltæk í flestum nútíma vörugreiningarvettvöngum, auk agans að skilgreina markáheyrendur skýrt og skuldbinda sig til eftirfylgniaflestra á varðveislu frekar en að stoppa við snemmt, ófullkomið merki. Sá agi kostar lítið og kemur í veg fyrir langtum dýrari mistökin að mislesa annaðhvort falska velgengni eða falska bilun.

Andmynstur og gildrur

Að skýra aðeins frá upphafsprófun, aldrei varðveislu: getur ekki greint forvitni eða þvingað aðgengi frá sannarlegu, varanlegu virði.
Að mæla upptöku gegn röngum nefnara: þynnir eða blæs upp merkið fyrir eiginleika ætlaða tilteknum áheyrendahluta.
Að álykta að eiginleiki hafi mistekist án þess að rannsaka sértæku orsök lítillar upptöku: hættir á að yfirgefa sannarlega verðmætan en illa uppgötvaðan eða illa tímasettan eiginleika.
Að fagna upptöku sem er blásin upp af þvinguðu aðgengi eða blekkingarhönnun: vörutengt tilvik staðgengilsleiks viðfangsefnis 1.2.
Að rekja upptökuhreyfingu aldrei aftur til sértækra ákvarðana: takmarkar skipulagsnám af eigin gögnum skipulagsheildarinnar.
Að rekja notkun án nokkurs paraðs ánægjumerkis: missir af tilvikinu þar sem mikil notkun lifir samhliða litlu raunverulegu virði eða ánægju.

Þroskalíkan

Stig 1, Upphaf: Upptaka er ekki mæld, eða aðeins ein, snemm, óvarðveitt prófunartala er skýrð.
Stig 2, Þróun: Einhver upptökurakning er til, en markáheyrendur eru ekki skilgreindir nákvæmlega og varðveisla er ósamkvæmt mæld.
Stig 3, Stöðlun: Upphafsprófun og varðveitt upptaka eru bæði rakin samkvæmt gegn nákvæmlega skilgreindum markáheyrendum fyrir hvern stóran eiginleika.
Stig 4, Stjórnun: Eiginleikar með litla upptöku eru kerfisbundið rannsakaðir fyrir sértæka rótarorsök áður en ákvörðun um endurhönnun eða niðurlagningu er tekin; upptaka er pöruð við ánægjugögn.
Stig 5, Samhæfing: Upptökugögn upplýsa beint og reglulega vegvísaforgangsröðun og fjárfestingarákvarðanir, og skipulagsheildin getur rakið tilteknar upptökuhreyfingar aftur til sértækra vöru- og verkfræðiákvarðana af öryggi.

Hugmyndir til umræðu

Hver er nýlegur eiginleiki þar sem upphafsprófun og varðveitt upptaka sögðu mjög ólíkar sögur?
Var markáheyrendahópur síðasta eiginleika okkar skilgreindur nákvæmlega fyrir kynningu, eða aðeins eftir?
Hvaða eiginleiki með litla upptöku verðskuldar heiðarlega rótarorsakarannsókn áður en við ákveðum örlög hans?
Er einhver hluti núverandi upptökuskýrslugjafar okkar blásinn upp af þvinguðu aðgengi?
Hvað myndi það að para upptökugögn við ánægjugögn leiða í ljós um mest notaða eiginleika okkar?

Helstu atriði til að muna

Aðgreindu upphafsprófun frá viðvarandi varðveislu; toppur af forvitni eða þvinguðu aðgengi er ekki sannarlegt, varanlegt virði.
Mældu upptöku gegn nákvæmlega skilgreindum markáheyrendum, ekki óviðkomandi víðari notendahópi.
Rannsakaðu sértæku orsök lítillar upptöku áður en þú ályktar að eiginleiki hafi mistekist; nokkrar mjög ólíkar orsakir kalla á mjög ólík viðbrögð.
Gættu að upptöku sem er blásin upp af þvinguðu aðgengi eða blekkingarhönnun, og paraðu upptöku við ánægjumerki til að grípa þetta.
Raktu upptökuhreyfingu aftur til sértækra ákvarðana til að breyta gögnunum í sannarlegt skipulagsnám.

Heimildir og frekara lesefni

Lean Analytics, eftir Alistair Croll og Benjamin Yoskovitz (framkvæmanlegir á móti hégómamælikvörðum beitt á vörunotkunargögn).
Continuous Discovery Habits, eftir Teresa Torres (að tengja vöruákvarðanir við niðurstöðusönnunargögn viðskiptavina, þar með upptökugögn).
Hooked: How to Build Habit-Forming Products, eftir Nir Eyal (varðveisla og venjumyndun, og siðferðilega línan milli raunverulegs virðis og blekkingarhönnunar).
Measure What Matters, eftir John Doerr (niðurstöðumiðuð markmiðasetning sem á við um upptökumarkasetningu).