presentation dataskup, oslo 18 okt 2014

100
Om att driva stora datajournalistiska projekt Data-SKUP, Oslo 18 oktober 2014 Kristofer Sjöholm @KristoferSjhlm SVT Pejl @svtpejl svt.se/pejl

Upload: kristofer-sjoeholm

Post on 02-Jul-2015

461 views

Category:

Data & Analytics


6 download

DESCRIPTION

Om att driva stora datajournalistiska projekt

TRANSCRIPT

Page 1: Presentation DataSKUP, Oslo 18 okt 2014

Om att driva stora datajournalistiska projekt

Data-SKUP, Oslo 18 oktober 2014

Kristofer Sjöholm @KristoferSjhlmSVT Pejl @svtpejl

svt.se/pejl

Page 2: Presentation DataSKUP, Oslo 18 okt 2014

Bakgrund

Högskolan i Kalmar, 1992-1995

Musiksajten och den ideella musikföreningen Benno, 1995-2001

Bulk Produktion, internet, video och TV-produktionsbolag, 1996-2002

svt.se, projektledare, journalist, webbansvarig och webbutvecklare, 2002-2009

SVT Pejl, projektledare, 2010-2014

Page 3: Presentation DataSKUP, Oslo 18 okt 2014

Upplägg på föreläsningen

Några stora datajournalistiska jobb vi gjort

Valet 2014

Att tänka på när man jobbar med stora projekt

Page 4: Presentation DataSKUP, Oslo 18 okt 2014

Upplägg på föreläsningen

Några stora datajournalistiska jobb vi gjort

Valet 2014

Att tänka på när man jobbar med stora projekt

Page 5: Presentation DataSKUP, Oslo 18 okt 2014

“Think about the data as a journalist, rather

than an analyst. What’s interesting about

these numbers? What’s new? What would

happen if I mashed it up with something

else? Answering those questions is more

important than anything else.”

Simon Rogers

Page 6: Presentation DataSKUP, Oslo 18 okt 2014
Page 7: Presentation DataSKUP, Oslo 18 okt 2014

Valpejl 2010 var projektet som gjorde att vi kunde starta SVT Pejl

Page 8: Presentation DataSKUP, Oslo 18 okt 2014

FAS 3SVT Pejls första projekt

Page 9: Presentation DataSKUP, Oslo 18 okt 2014
Page 10: Presentation DataSKUP, Oslo 18 okt 2014
Page 11: Presentation DataSKUP, Oslo 18 okt 2014
Page 12: Presentation DataSKUP, Oslo 18 okt 2014
Page 13: Presentation DataSKUP, Oslo 18 okt 2014

Tio-i-topp privata anordnare (maj 2011):Plats, anordnare, juridisk form, antal Fas 3-placerade:1. Blatteförmedlingen AB/Jobbfabriken, Aktiebolag: 630 st2. ABF, Studieförbund: 390 st3. Medborgarskolan: Studieförbund, 390 st4. Folkuniversitetet: Studieförbund, 330 st5. Prio 1, Ekonomisk förening: 230 st6. Mediacopy AB, Aktiebolag: 220 st7. Myrorna, Trossamfund: 2168. Röda Korset, Ideell Förening: 200 st9. Erikshjälpen, Ideell Förening: 100 st10. Virtuella historiska modeller: Ekonomisk Förening, 100 st

Page 15: Presentation DataSKUP, Oslo 18 okt 2014

Vad var SVT Pejl närvi startade?

- Nyhetsblogg med artiklar, nyhetsinslag ochvisualiseringar av data och statistik.

- Journalistiska medborgartjänster somkombinerar offentlig data med enkäter och somär nedbrytbara geografiskt.

Tjänsterna skall ha ett "nytta för besökarnafokus".

Page 16: Presentation DataSKUP, Oslo 18 okt 2014
Page 17: Presentation DataSKUP, Oslo 18 okt 2014
Page 18: Presentation DataSKUP, Oslo 18 okt 2014

Helena - Databasredaktör

Fredrik - Huvudutvecklare

Anton - Backend-utvecklare

Linnea - Databasresearcher

Susan – Reporter, webbredaktör

Johan – Grafiker, webbredaktör

AD, ID, Frontendutveckling.

Kristofer - Projektledare

Page 19: Presentation DataSKUP, Oslo 18 okt 2014

Våra tjänster

BrottspejlSkolpejlMiljöpejl

Page 20: Presentation DataSKUP, Oslo 18 okt 2014

Brottspejl

Page 21: Presentation DataSKUP, Oslo 18 okt 2014
Page 22: Presentation DataSKUP, Oslo 18 okt 2014
Page 23: Presentation DataSKUP, Oslo 18 okt 2014
Page 24: Presentation DataSKUP, Oslo 18 okt 2014
Page 25: Presentation DataSKUP, Oslo 18 okt 2014

Crowdsourcing

Page 26: Presentation DataSKUP, Oslo 18 okt 2014
Page 28: Presentation DataSKUP, Oslo 18 okt 2014

Datavisualiseringar

Page 33: Presentation DataSKUP, Oslo 18 okt 2014
Page 34: Presentation DataSKUP, Oslo 18 okt 2014
Page 35: Presentation DataSKUP, Oslo 18 okt 2014
Page 36: Presentation DataSKUP, Oslo 18 okt 2014

Designa och utveckla för mobilen först

Page 38: Presentation DataSKUP, Oslo 18 okt 2014
Page 39: Presentation DataSKUP, Oslo 18 okt 2014
Page 40: Presentation DataSKUP, Oslo 18 okt 2014

Valkompassen för Riksdagsvalet10 partier2025 kandidater45 kompassfrågor25 personliga frågor till kandidaterna1,7 miljoner gjorda kompasser22% av alla svenskar över 18 år gjorde den*47% av alla unga mellan 18-21 år*

* Novus eftervalsundersökning september 2014

Page 41: Presentation DataSKUP, Oslo 18 okt 2014

54% av de unga väljarna ansåg att resultatet i valkompasserna påverkade hur de röstade.

Påverkade valkompassernas resultat dig i ditt val av parti i EU-valet?

18-29 år

Novus juni 2014

Page 42: Presentation DataSKUP, Oslo 18 okt 2014

SlutsatsDet är av mycket viktigt att vi tar utveckling och framtagande av underhållande och lätt-tillgängliga valkompasser på högsta allvar.

Page 43: Presentation DataSKUP, Oslo 18 okt 2014

Statistiska paneltester för urval av frågor

Page 44: Presentation DataSKUP, Oslo 18 okt 2014

Olika parameter mättes:- Partiskiljande frågor- Andel ingen åsikt- Balans i svaren- Åsiktsintensitet

Page 45: Presentation DataSKUP, Oslo 18 okt 2014

Sedan rankades alla parametrar och slogs ihop till en totalranking

Denna användes sedan vid gallringen av kompassfrågor

Page 46: Presentation DataSKUP, Oslo 18 okt 2014

Skräddarsytt system för insamling av kandidatsvar

Page 47: Presentation DataSKUP, Oslo 18 okt 2014

Att dela med sig av vår data gav cred , uppmärksamhet och ökade transparensen

Page 49: Presentation DataSKUP, Oslo 18 okt 2014
Page 52: Presentation DataSKUP, Oslo 18 okt 2014

Interaktions-designer

Formgivare

TestareGränsnittsutvecklare

Gränsnittsutvecklare

Systemutvecklare

Systemutvecklare

Konceptutvecklare

ProjektledareValteamet 2014

Page 53: Presentation DataSKUP, Oslo 18 okt 2014

#dinröst och Pejl isamarbete under

valbevakningen 2014

Page 54: Presentation DataSKUP, Oslo 18 okt 2014

Väljarnas viktigaste frågor

Page 55: Presentation DataSKUP, Oslo 18 okt 2014

Undersökning med öppna svar utgjorde grunden för vilka ämnen vi granskande och gjorde journalistik på

Page 56: Presentation DataSKUP, Oslo 18 okt 2014
Page 57: Presentation DataSKUP, Oslo 18 okt 2014

Väljarnas viktigaste frågor

Page 58: Presentation DataSKUP, Oslo 18 okt 2014
Page 59: Presentation DataSKUP, Oslo 18 okt 2014

Vad tycker partierna?Delbart och spridbart tack vare

direktlänkar

Page 62: Presentation DataSKUP, Oslo 18 okt 2014

Valresultat redovisat ner på distriktsnivå i alla tre val

Page 63: Presentation DataSKUP, Oslo 18 okt 2014

Interaktiv val-grafik på svt.se och i TV under under

valkvällen

Page 64: Presentation DataSKUP, Oslo 18 okt 2014

Så här har det sett ut tidigare på svt.se

OBS: dummy-data

Page 65: Presentation DataSKUP, Oslo 18 okt 2014

och så här…

OBS: dummy-data

Page 66: Presentation DataSKUP, Oslo 18 okt 2014

Målsättning- Snabb uppdatering på svt.se

- Tillgängliggöra unik data visar hur svenskarna röstat

- Interaktiv grafik för alla skärmstorlekar

- Möjlighet för besökarna att kunna utforska data själv

- Göra alla vyer delbar och spridbara med unika URL:er

- Kunna visa snygg rörlig webbgrafik i TV-rutan

Page 68: Presentation DataSKUP, Oslo 18 okt 2014

Fler väljare anser sig ligga till vänster

Page 69: Presentation DataSKUP, Oslo 18 okt 2014
Page 70: Presentation DataSKUP, Oslo 18 okt 2014

Hur gjorde vi det?

- Såg till att få loss rådata så snabbt som möjligt

- Hämtade hem historisk data för att se hur den såg ut

- Byggde alla visualiseringar baserade på tidigare val

- Mobilt först: skalbart webb, börja på minsta skärmen

- Planerade och repeterade – alla visste sin roll

Page 71: Presentation DataSKUP, Oslo 18 okt 2014
Page 72: Presentation DataSKUP, Oslo 18 okt 2014

Robin – JavaScript-programmerare och datajournalist

Linnea – databasresearcher och kvalitetssäkrare

Helena –databasredaktör

Hedvig – webbreporter och sociala medie-redaktör

Kristofer – projektledare och konceptutvecklare

Valredaktion 2014

Page 73: Presentation DataSKUP, Oslo 18 okt 2014

Byggde upp visualiseringarna i JavaScript på data från 2010

Page 74: Presentation DataSKUP, Oslo 18 okt 2014

Förberedde en tom databas i Access där alla variabler fanns med

Page 75: Presentation DataSKUP, Oslo 18 okt 2014

När vi fick rådatan på 13.000 rader körde vi de klara frågorna

Page 76: Presentation DataSKUP, Oslo 18 okt 2014

Sedan kopierade vi över resultatet från Access till Excel

Page 77: Presentation DataSKUP, Oslo 18 okt 2014

I Excel gjordes alla beräkningarna i ett förberett blad

Page 78: Presentation DataSKUP, Oslo 18 okt 2014

Siffrorna matades efter det in manuellt i en JSON-fil

Page 79: Presentation DataSKUP, Oslo 18 okt 2014

Alla väljarströmmar dubbelkollades lokalt innan release

Page 82: Presentation DataSKUP, Oslo 18 okt 2014

Att tänka på när man ska leda datajournalistiska projekt

Page 83: Presentation DataSKUP, Oslo 18 okt 2014
Page 84: Presentation DataSKUP, Oslo 18 okt 2014

”Man tager vad man haver”

Page 85: Presentation DataSKUP, Oslo 18 okt 2014

”Man tager vad man haver”

Det spelar ingen roll hur mycket eller lite

resurser eller kompetens ni har, det

absolut viktigaste är att vara pragmatiska

och utgå från det man kan göra med det

man faktiskt har.

Page 86: Presentation DataSKUP, Oslo 18 okt 2014

1. En tydlig projektledare med

mandat

2. Datajournalist

3. Reporter

4. Webbutvecklare

5. Interaktionsdesigner/formgivare

6. Testare

Exempel på vilka kompetenser som behövs

Page 87: Presentation DataSKUP, Oslo 18 okt 2014

Projektets hjärta: planeringstavlan

Page 88: Presentation DataSKUP, Oslo 18 okt 2014

1. Många olika kompetenser och personligheter behövs

2. 4-8 st i teamet, fler blir inte alltid bättre

3. Få folk att brinna för projektet, frihet under ansvar

4. Agil arbetsprocess: White-board, post-it, ståmöte, utvärderingar

5. Användartester löpande

6. Snabba beslutsvägar och eget mandat, vad är det viktigaste?

7. Fira framgångarna, få alla att känna sig delaktiga

7 framgångsfaktorer för teamarbete

Page 89: Presentation DataSKUP, Oslo 18 okt 2014

Prioriteringar för utveckling: Vilka två väljer du?

TidKvalité

Funktionalitet

Page 90: Presentation DataSKUP, Oslo 18 okt 2014

1. Gör precis som du säger

2. Inte talar om vad hen jobbar med

3. Som säger att allt är omöjligt

4. Som säger att allt är möjligt

Lita inte på en utvecklare som…

Page 91: Presentation DataSKUP, Oslo 18 okt 2014

Journalister VS utvecklare

Ni ska jobba ihop och inte emot varandra.Det kräver ömsesidig respekt och förståelseför varandras kunskap och arbetskultur.

Kulturkrockar och högljudda diskussionerär oundvikliga men bra för slutresultatet.

Page 92: Presentation DataSKUP, Oslo 18 okt 2014

Journalister VS utvecklare

Ni ska jobba ihop och inte emot varandra.Det kräver ömsesidig respekt och förståelseför varandras kunskap och arbetskultur.

Kulturkrockar och högljudda diskussionerär oundvikliga men bra för slutresultatet.

Page 93: Presentation DataSKUP, Oslo 18 okt 2014

1. En bra idé och någon som brinner för den

2. Fixa resurser genom att sälja in något som låter bra

3. Definiera varför denna satsning görs, vem är den till för?

4. Testa idén på användare, löpande

5. Bygg för mobilen först och skala sedan upp

10 tips för hur man driver framgångsrika dataprojekt

Page 94: Presentation DataSKUP, Oslo 18 okt 2014

10 tips för hur man driver framgångsrika dataprojekt 6. Skapa team med kompletterande kunskaper

7. Dagliga korta stå-upp möten, utvärdera hur ni jobbar

8. Förankra rätt saker vid rätt tidpunkt

9. Smyglansera tekniskt, sprid ut lanseringen publikt

10. Förädla sajten/tjänsten tillsammans med besökarna

Page 95: Presentation DataSKUP, Oslo 18 okt 2014

Fallgropar1. Fastna inte i att presentera all data

2. Förankring till döds

3. Underhåll av tjänster äter resurser

4. Missa inte att utvärdera vad ni gjort

5. Fastna inte i teknikträsket, hitta alternativa lösningar

6. Glöm aldrig journalistiken i det du gör

Page 96: Presentation DataSKUP, Oslo 18 okt 2014

“Databasen är din intervjuperson. Ställ

intressanta frågor till den och följ upp med

journalistiska följdfrågor så hittar du de

unika nyheterna i din data.”

Helena Bengtsson

Page 97: Presentation DataSKUP, Oslo 18 okt 2014

Tack!

Kristofer Sjöholm, SVT Pejl@KristoferSjhlm

[email protected]

svt.se/pejl@svtpejl

Page 98: Presentation DataSKUP, Oslo 18 okt 2014

Länkar för Valet 2014Valkompass http://www.svt.se/nyheter/val2014/guide/kompass/svt/

Kandidatguide http://www.svt.se/nyheter/val2014/guide/kandidat

Valkompassen som telefontjänst http://www.svt.se/pejl/nu-finns-valkompassen-som-telefontjanst

Kompass-svarsvisualisering http://pejl.svt.se/val2014/svaren-i-valkompassen

Så gjorde vi valkompassen http://blogg.svt.se/pejl/pejl/sa-har-jobbade-vi-med-att-ta-fram-valkompassen/

Pejl på kommun och landstingsvalen http://pejl.svt.se/kommun-och-landstingsvalen/sverige/

Nu släpper vi kompassdata fri http://blogg.svt.se/pejl/pejl/har-ar-var-data-fran-svts-valkompass-gor-nagot-

med-den-du-ocksa/

Kandidatkollen http://kandidatkollen.se/

Silobreaker http://val2014.silobreaker.se/

#dinröst-cancerköer http://pejl.svt.se/val2014/koer-i-cancervarden/

#dinröst-flyktingmottagande: http://pejl.svt.se/val2014/flyktingmottagande

Vad tycker partierna? http://pejl.svt.se/val2014/vad-tycker-partierna/

Var är du på inkomstskalan? http://pejl.svt.se/visualisering/inkomster/var-ar-du

VALU-grafik för svt.se http://www.svt.se/nyheter/val2014/2315203

VALU-grafik anpassad http://pejl.svt.se/val2014/valu-riksdag/valjarstrommar?stripped=true

Play-klipp från Valvakan: http://www.svt.se/nyhetsklipp/nyheter/article2344442.svt

Valresultat ner på distriktsnivå: http://valresultat.svt.se/

Page 99: Presentation DataSKUP, Oslo 18 okt 2014

Teknik för SVT Pejl

Python + Django

PostgreSQL

D3 JS, High Charts JS, Raphael JS

HTML 5/CSS3

WordPress

Responsive design för alla skärmstorlekar

Drift i Amazon-moln

FTP-server för uppladdning av statiska filer

Page 100: Presentation DataSKUP, Oslo 18 okt 2014

Verktyg för analys och inhämtning

Excel

Google Drive

Open Refine

Access

PostgreSQL

Dataset för nedladdning

Öppna API:er