business intelligence - sas · •wizualizacja danych, wizualizacja wyników analizy, oraz big data...

Copyr i g ht © 2012, SAS Ins t i tu t e Inc . A l l r ights reser ve d .

BUSINESS INTELLIGENCE

SAS VISUAL ANALYTICS

Artur

Jastrzębski


CO TO JEST BIG DATA?

Copyr i g ht © SAS Ins t i tu t e Inc . A l l r ights reser ved .

Perspektywa

SASBig Data jest WSZĘDZIE

17% populacji świata chociaż raz skorzystało z sieci społecznościowych.

Twitter notuje 100 milionów Tweetów dziennie.

Facebook notuje 350 milionów unikalnych użytkowników dziennie.

60 h materiału jest ładowanych do YOUTUBE każdej minuty.

80% firm używa social media w procesach rekrutacyjnych.


Source: IDC Digital Universe Study, sponsored by EMC, May 2010

THE CHALLENGE?


BIG DATA WHAT NEXT?


WHY DO WE CARE?

YOUR

COMPETITIVE

ADVANTAGE

Orient

Observe

Act

Act

Orient

DecideMARKET

OPPORTUNITY

Decide


CO TO JEST?

“Data that exceeds an organization’s

conventional database storage or

processing capacity”

BIG DATA


VOLUME

VARIETY

VELOCITY

VALUE

TODAY THE FUTURE

DA

TA

SIZ

EBIG DATA – THE CHALLENGE


PERSPEKTYWA

SAS

Big Data is RELATIVE not ABSOLUTE

Big Data

When volume, velocity and variety of data exceeds an organization’s storage or compute capacity for accurate and timely decision-making


BIG DATA I SAS


WSTĘP BIG DATA A PROCES ANALITYCZNY

Vo

lum

e

Va

riety

Ve

locity

V a

l u e

Historyczne

transakcje

Fora

internetowe

Social

Media

Dane z

sensorów

Clickstream

Sformułowanie

Problemu

Przygotowanie

Danych

Eksploracja

Danych

Analiza i Modelowa

nie

Wykorzystanie i

Ewaluacja Modelu


Sformułowanie

Problemu

Przygotowanie

Danych

Eksploracja

Danych

Analiza i Modelowa

nie

Wykorzystanie i

Ewaluacja Modelu

ANALITYCZNY

CYKL ŻYCIACO OPÓŹNIA EFEKT BIZNESOWY?

∆t1

Latencja

Danych∆t2

Latencja

Analizy

∆t3

Latencja

Decyzji

TEXT

MINING

SENTIMENT

ANALYSIS

CONTENT

CATEGORIZA

TION

TEXT ANALYTICS

GRID

COMPUTING

IN-MEMORY

ANALYTICS

IN-DATABASE

PROCESSING

HIGH PERFORMANCE ANALYTICS


Data latency Analysis latency Decision latency

WINDOW OF OPPORTUNITY

TimeAction

taken

Action

taken


SAS & BIG DATA OBSZARY FUNKCJONALNE

Functionality SAS Technology Goal – decrease of How

Acquire &

Manage

Big Data repositories integration SAS/Access to Hadoop,

SAS In-database Technologies

Data latency Seamless access to any data

Big Data transformation and preparation for

analytics

SAS Data Loader for Hadoop

SAS Data Management

Data latency In-database &

In–HADOP data processing

Social Network and Web Data Acquisition SAS Social Media Analytics,

SAS Text Mining

Data latency Automated data acquisition and filtering

Real-time data filtering & selection SAS Event Stream Processing Data latency Real-time processing

Discover Visual Discovery & Exploration SAS Visual Analytics

SAS Visual Statistics

Analysis latency In-memory processing

Statistical Discovery & Desctriptive Analytics SAS High Performance Statistics Analysis latency In-memory processing

Concept Extraction for unstructured data SAS Enterprise Content Categorization

SAS Text Miner

Analysis latency Automated natural language processing

Model Predictive Modeling High Performance Data Mining

SAS In Memory Statistics for Hadoop


Content Categorization, Sentiment Analysis,

Text Mining

High Performance Text Mining Analysis latency Automated natural language processing

Time series forecating, Optimization High Performance Forecasting,

High Performance Optimization


Act Information Delivery & Reporting SAS Visual Analytics Decision latency In-memory processing

Automated decision management SAS Real-Time Decision Manager,

SAS In-database Technologies

Decision latency Integration with business process

Real–time signal detection SAS Event Stream Processing Decision latency Teal-time alerting and event processing


SAS HIGH-PEFORMANCE

ANALYTICS


SAS IN-MEMORY


SAS®

LASR

ANALYTIC SERVER

In-memory

• Szybkość, sekundowe odpowiedzi

Dla wielu użytkowników

• Setki równoczesnych użytkowników

Bezstanowy

• Bez potrzeby wstępnego przeliczania

Interaktywny

• Natychmiastowa wizualizacja wpływu zmian parametrów na wyniki modelu

Opcje wdrożenia

• MPP (distributed) lub SMP (single machine)

Dedykowany serwer in-memory zaprojektowany do potrzeb

interaktywnej i iteracyjnej analityki


Przetwarzanie

danych

Eksploracja /

WizualizacjaModelowanie Wdrożenie

SAS®

LASR™

ANALYTIC SERVERZINTEGROWANY INTERFEJS UŻYTKOWNIKA

DATA SCIENTIST /PROGRAMISTA

Visual

Analytics

Visual

Statistics

IMSTAT for

Hadoop*

GUI GUI PROGRAMMING

ANALITYK BIZNESOWY

STATYSTYK

*SAS® In-Memory Statistics for Hadoop


BIG DATA

SOLUTIONS

SEARCH IS KEY……….BUT WHEN LOOKING

FOR THE ‘KNOWN UNKNOWNS’

“As we know, there are known knowns; there are things we

know we know. We also know there are known unknowns; that

is to say we know there are some things we do not know. But

there are also unknown unknowns -- the ones we don't know

we don't know. And if one looks throughout the history of our

country and other free countries, it is the latter category that

tend to be the difficult ones.”

Donald Rumsfeld, 2002


RÓŻNE OBLICZA BUSINESS INTELLIGENCE


DWIE TWARZE BI

• Świat raportów i dashboardów

• Monitorowanie efektywności

procesów

• Ustalone miary, KPI, alerty

• Ustalona ścieżka dla

informacji

• Odpowiedzi na

predefiniowane pytania

• Znane dane (nasze własne?)

• Świat analiz

• Pytania Ad-hoc

• Praca interaktywna

• Eksploracja wizualna

• Odkrywanie wiedzy przy

pomocy metod

analitycznych

• Nieznane, nowe dane

RAPORT

Co?

ODKRYCIE

Dlaczego?BI

Reporting Dashboards Ad-hoc Query Interactive

VisualizationOLAP Predictive Modelling

& Data Mining


SELF SERVICE BI DEFINICJA

Self-service business intelligence definiuje się jako:

rozwiązania w środowisku BI, pozwalające użytkownikom na większą

samodzielność i mniejszą zależność od organizacji IT

główne cele

łatwe w użyciu narzędzia BI (w tym dla zaawansowanych analiz)

łatwy dostęp do danych źródłowych (nie tylko hurtownia)

wyniki proste w tworzeniu, zrozumieniu, dostępie i współdzieleniu

szybkie we wdrożeniu i łatwe w zarządzaniu procesy warehousingowe


SELF SERVICE BI OD SUROWYCH DANYCH DO WYNIKU

Sandbox

WyliczeniaModel

Agregacje

Filtry

Hierarchie

Upload


WIZUALIZACJA WZROK – KRÓL ZMYSŁÓW

70% receptorów zmysłów jest

ulokowanych w oczach

Widzenie „zużywa” 25% mocy

obliczeniowej mózgu

Układ siatkówka-mózg działa z

prędkością ok. 10Mbps


OBRAZ JEST WART

1000 SŁÓWPOTRZEBA WIZUALIZACJI


WIZUALNA

EKSPLORACJAMETODA ANALIZY DANYCH

Wizualizacja

(wgląd)

Interakcja

(łatwość pytania)

Szybkość

(natychmiastowy rezultat)


WIZUALNA

EKSPLORACJASKŁADNIKI

• Paleta narzędzi wizualizacji oraz automatyzacja wizualizacji

• Wizualizacja danych, wizualizacja wyników analizy, oraz BIG DATA

• Animacje, podpowiedzi, tipsy

Wizualizacja

• Zaznaczanie, filtrowanie, sortowanie, pędzlowanie, drill down,

• Dynamiczne połączenia i aktywne obiekty

• Zaawansowane metody analizyInterakcja

• Czas reakcji do kilku sekund, niezależny od wielkości danych

• Możliwość bezkarnego weryfikowania wielu hipotez

• Samodzielność użytkownika jako efekt szybkości Szybkość


SAS® VISUAL ANALYTICS


BUSINESS

VISUALIZATION

RÓŻNICA MIĘDZY WIZUALIZACJĄ, A WIZUALIZACJĄ Z

WYKORZYSTANIEM ANALITYKI

DATA VISUALIZATION ANALYTIC VISUALIZATION

EXPLORATION DISCOVERY


SAS® VISUAL

ANALYTICSJEDNO ZINTEGROWANE ROZWIĄZANIE

Raport

Dystrybucja

RAPORT

Co?

ODKRYCIE

Dlaczego?

VISUAL

ANALYTICS

Eksploracja

Odkrycie


ARCHITEKTURA

ROZWIĄZANIA

Eksploracja

Projektowanie Raportów

Przeglądanie Raportów

Przygotowanie Danych

Administracja

WEB

Przeglądanie Raportów

MOBILE

SAS®

VISUAL ANALYTICS

MIEJSCE W ŚRODOWISKU INFORMATYCZNYM

ORGANIZACJI

PRACA WSADOWA

Ładowanie danych

BAZA IN-MEMORY

UŻYTKOWNIK

BIZNESOWY

ZAAWANSOWANY

UŻYTKOWNIK / IT

Pliki z PCSerwer klasy Commodity Hardware

Dowolne dane

dostępne z SAS


SAS® VISUAL

ANALYTICSGŁÓWNE KOMPONENTY

Centralny punkt dostępu Integracja Dedykowane interfejsy

MOBILE BIDATA BUILDER EXPLORER DESIGNER

• Natywne aplikacje iOS

i Android pozwalające

na interaktywny

dostęp do raportów

• Łączenie danych z

wielu źródeł

• Tworzenie kolumn

wyliczanych i

pochodnych

• Ładowanie danych

• Ad-hoc analiza

danych i odrywanie

związków

• Zaawansowane

analizy

• Tworzenie

dashboardów i

raportów dostępnych

przez web i tablety

SAS® LASR™ ANALYTIC SERVER

ADMINISTRATOR• Monitorowanie SAS®

LASR™ Analytic

server

• Ładowanie/usuwanie

danych

• Zarządzanie

bezpieczeństwem


SAS® VISUAL

ANALYTICSHUB

Strona startowa dla wszystkich użytkowników

Widoki zależne od ról użytkowników

Nawigacja do różnych czynności

Ad-Hoc eksploracja danych

Tworzenie raportów

Przeglądanie raportów

Zadania administracyjne

Przygotowanie danych

Administracja i monitorowanie sytemu

Ulubione i wyszukiwanie

Komentarze i współpraca


SAS® VISUAL

ANALYTICSDATA BUILDER

Wyszukiwanie tabel w metadanych

Łączenie tabel i ładowanie przyrostowe

Tworzenie kolumn wyliczanych (kreator budowy wyrażeń)

Filtrowanie kolumn i wierszy (dane surowe i zagregowane)

Ładowane danych z Excela do pamięci

Harmonogramowanie wykonania zapytań


SAS® VISUAL

ANALYTICSADMINISTRATOR

Monitorowanie Środowiska

Zasoby (CPU, I/O, Memory)

Procesy (sesje użytkowników)

Logowanie z urządzeń mobilnych

Zarządzanie serwerami i danymi

Start/stop serwerów in-memory

Ładowanie/usuwanie tablel in-memory

Zarządzanie bezpieczeństwem

Bezpieczeństwo tabel i wierszy

Listy dostępu urządzeń mobilnych


SAS® VISUAL

ANALYTICSEXPLORER

Eksploracja danych

Wizualizacja, poszukiwanie relacji, trendów, nieprawidłowości, itd.

Automatyczne wykresy

Wizualizacje: Tabele, Wykresy słupkowe, liniowe, rozproszenia, bąbelkowe, mapy geograficzne i wiele innych

Łatwa w użyciu analityka: Korelacje (Relacje), Regresja (Liniowa, kwadratowa, sześcienna, PSpline, Best Fit), Prognozowanie (wiele algorytmów), Statystyki agregujące

Dynamiczne hierarchie: Drill down, up, and across siblings

Zmienne wyliczane

Selekcja i zaznaczanie w celu odkrycia relacji

Zapisanie i udostępnienie eksploracji jako raport lubPDF

Eksport danych do Excela lub CSV/TSV


SAS® VISUAL

ANALYTICSDESIGNER

Interfejs do tworzenia raportów i dashboardów

Wykorzystanie istniejących raportów i danych

Użycie wielu źródeł danych

Wiele opcji wizualizacji danych

Precyzja rozmieszczenia obiektów na raportach

Interakcje pomiędzy obiektami raportów oraz promptami

Komentarze na poziomie raportów i obiektów

Dynamiczne Hierarchie: Drill down, up, itp.

Zmienne wyliczane i tworzone

Eksport danych do Excela, CSV/TSV

Adaptacyjne prezentacje – budowane raz, używane w różnych kanałach dystrybucji.


SAS® VISUAL

ANALYTICSVIEWER

Wisualizacja reportów

Wiele źródeł danych

Interakcje i prompty

Nawigacje według hierarchii

Współpraca i komentarze

Eksport danych do Excela, CSV/TSV

Wykorzystanie mechanizmów bezpieczeństwa Platformy SAS


SAS® VISUAL

ANALYTICSMOBILE

Natywne aplikacje dla tabletów iPad i Android

Zaawansowane metody wizualizacji i interakcji na raportach: filtrowanie, zaznaczanie, drill-down, powiększanie, itp.

Kolaboracja i komentarze

Współdzielenie poprzez email

Interaktywne przeglądanie raportów offline

Wykorzystanie mechanizmów bezpieczeństwa Platformy SAS

Dodatkowe mechanizmy bezpieczeństwa związane z urządzeniami mobilnymi: szyfrowanie, zdalne usuwanie zawartości, listy dostępu i wykluczeń, SSL itd.


DZIĘKUJĘ

[email protected]

business intelligence - sas · •wizualizacja danych, wizualizacja wyników analizy, oraz big data...

Documents