two case studies big-data and machine learning at scale solutions in iran
TRANSCRIPT
1
تیرماهه ۱۳۹۵
اامیر صدیقی
اازز نیازز‌سنجی تا پیاددهه‌ساززییبرررسی ددوو ررااهه‌حل کالنن‌ددااددهه
recommender.ir helio.irوو
@amirsedighi تو2تر: [email protected]اایمیل:
اامیر صدیقی
کاررشناسس ااررشد نرمم‌اافزاارر با بیش اازز ۲۵ سالل سابقه برنامه نویسی
موسس وو معمارر چند ررااهه‌حل نرمم‌اافزاارریی مبتنی بر فناوورریی‌هایی کالنن‌ددااددهه
2
معرفی
3
پرسش
ددرر اایراانن چه ساززمانن‌هایی به فناوورریی کالنن‌ددااددهه نیاززمندند؟
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
بانک‌ها، بیمه‌ها وو موسساتت مالی
دداانشگاهه‌ها وو کتابخانه‌ها
4
نیازز سنجی
ساززمانن‌هایی اایراانی که به فناوورریی کالنن‌ددااددهه نیاززمندند:
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
بانک‌ها، بیمه‌ها وو موسساتت مالی
دداانشگاهه‌ها وو کتابخانه‌ها
5
نیازز سنجی
ساززمانن‌هایی اایراانی که به فناوورریی کالنن‌ددااددهه نیاززمندند:
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
بانک‌ها، بیمه‌ها وو موسساتت مالی
دداانشگاهه‌ها وو کتابخانه‌ها
6
نیازز سنجی
ساززمانن‌هایی اایراانی که به فناوورریی کالنن‌ددااددهه نیاززمندند:
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
بانک‌ها، بیمه‌ها وو موسساتت مالی
دداانشگاهه‌ها وو کتابخانه‌ها
7
نیازز سنجی
ساززمانن‌هایی اایراانی که به فناوورریی کالنن‌ددااددهه نیاززمندند:
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
8
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
9
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
10
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
11
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
12
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
کمپانی‌هایی ااینترنتی، تجاررتت االکتروونیکی وو ااشترااکک گذاارریی محتواا
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
13
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
14
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
15
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
16
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
17
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
صنایع تولید وو توززیع اانرژژیی، مخابرااتت وو ددیتا
18
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
بانک‌ها، بیمه‌ها وو موسساتت مالی
19
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
بانک‌ها، بیمه‌ها وو موسساتت مالی
20
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
بانک‌ها، بیمه‌ها وو موسساتت مالی
21
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
دداانشگاهه‌ها وو کتابخانه‌ها
22
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
دداانشگاهه‌ها وو کتابخانه‌ها
23
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
دداانشگاهه‌ها وو کتابخانه‌ها
24
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
دداانشگاهه‌ها وو کتابخانه‌ها
25
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
نیازز به سامانه‌هایی تحلیل متونن فاررسی
فقداانن سامانه‌هایی کشف سبک ززندگی
نیاززمندیی‌هایی کسب‌وو‌کارر ددرر حوززهه کالنن ددااددهه
26
چالش‌هایی مشترکک
فقداانن موتورر‌هایی جستجویی تحلیلی (فاررسی)
فقداانن سامانه‌هایی کشف سلیقه وو پیش‌بینی ررفتارر کارربر
فقداانن ررااههحلهایی بالددررنگ نظاررتت وو کشف تقلب
فقداانن سامانه‌هایی کشف سبک ززندگی
نیازز به ررااههحلهایی مقیاسس پذیر وو بالددررنگ مدیریت الگگ
نیازز به سامانه‌هایی تحلیل متونن فاررسی
برخی چالش‌هایی ساززمانن‌هایی اایراانی ددرر ززمینه پرددااززشش کالنن‌ددااددهه:
27
ررااههحلهایی ما
جستجویی تحلیلی (فاررسی)
سروویس کشف سلیقه وو پیش‌بینی ررفتارر کارربر
ررااهه‌حل بالددررنگ نظاررتت وو کشف تقلب
ررااهه‌حلی براایی شناسایی سبک ززندگی
ررااهه‌حلی مقیاسس پذیر براایی مدیریت الگگ
سامانه تحلیل متونن فاررسی
ررااههحلهایی ددااددهه‌اایی ما ددرر پاسخ با نیاززمندیی‌هایی کسب‌وو‌کارر:
picker.ir
recommender.ir
helio.ir
lifestyler.ir
nimbus.ir
commentum.ir
28
ررااههحلهایی ما
جستجویی تحلیلی (فاررسی)
سروویس کشف سلیقه وو پیش‌بینی ررفتارر کارربر
ررااهه‌حل بالددررنگ نظاررتت وو کشف تقلب
ررااهه‌حلی براایی شناسایی سبک ززندگی
ررااهه‌حلی مقیاسس پذیر براایی مدیریت الگگ
سامانه تحلیل متونن فاررسی
ررااههحلهایی ددااددهه‌اایی ما ددرر پاسخ با نیاززمندیی‌هایی کسب‌وو‌کارر:
picker.ir
recommender.ir
helio.ir
lifestyler.ir
nimbus.ir
commentum.ir
29
چرخه حیاتت ددااددهه ددرر ساززمانن
خردد
ددااددهه
ااطالعع
دداانش
30
چرخه حیاتت ددااددهه ددرر ساززمانن
B2B
سروویس‌هایی ما
خردد
ددااددهه
ااطالعع
دداانشValue Added ServiceAPI Economy
سروویس‌هایی ماسروویس‌هایی ما
31
سامانه پیشنهاددددهندهه
User Experience Excellencerecommender.ir
recommender.ir
ااوولین پیاددهه ساززیی ددرر سالل ۱۳۹۱
32
سامانه پیشنهاددددهندهه - معرفی
سروویس ااررززشش اافزووددههبالددررنگ
اابرییمقیاسس‌پذیریی اافقی (شاررددینگ)
پاسخ نیازز باززاارر‌ددااخلی به کمک فناوورریی ررووزز (هر ماهه یک رریلیز)
(Realtime)
(Cloud-based)
(VAS)
recommender.ir
بکاررگیریی گسترددهه یاددگیریی ماشین وو تکنیک‌هایی پرددااززشش‌جریانن ددااددهه
33
آآززمایش مربا
آآیا اانتخابب‌هایی بیشتر به فرووشش بیشتر منتهی می‌شودد؟
recommender.ir
34
آآززمایش مربا
آآیا اانتخابب‌هایی بیشتر به فرووشش بیشتر منتهی می‌شودد؟
recommender.ir
35
آآززمایش مربا
آآیا اانتخابب‌هایی بیشتر به فرووشش بیشتر منتهی می‌شودد؟
recommender.ir
36
اافزوونگی ااطالعاتت = ااختاللل ددرر تصمیم گیریی
recommender.ir
37
چالش‌هایی کارربراانن ددرر سایت‌هایی بزررگگ
recommender.ir
38
چالش‌هایی کارربراانن ددرر سایت‌هایی بزررگگ
recommender.ir
39
ررکامندرر ددرر خدمت ررضایت کارربر
recommender.ir
40
ررکامندرر ددرر خدمت ررضایت کارربر
recommender.ir
41
ررکامندرر ددرر خدمت ررضایت کارربر وو سوددآآوورریی
recommender.ir
42
نقش ررکامندرر‌ها ددرر کسب‌وو‌کارر‌هایی مدررنن
recommender.ir
43
نقش ررکامندرر‌ها ددرر کسب‌وو‌کارر‌هایی مدررنن
recommender.ir
44
recommender.ir گرددشش‌ددااددهه‌ها ددرر
recommender.ir
45
recommender.ir گرددشش‌ددااددهه‌ها ددرر
recommender.ir
46
recommender.ir گرددشش‌ددااددهه‌ها ددرر
recommender.ir
47
چرخه حیاتت فعالیت‌هایی کارربر
recommender.ir
48
چرخه حیاتت فعالیت‌هایی کارربر - تشابه
recommender.ir
49
محاسباتت متنوعع محبوبيیت وو شباهت آآيیتمها
محبوبيیت
تشابه
چرخه حیاتت فعالیت‌هایی کارربر - تشابه
recommender.ir
50
محبوبتريین آآيیتمهايییي كکسبووكکارر
محاسباتت متنوعع محبوبيیت وو شباهت آآيیتمها
چرخه حیاتت فعالیت‌هایی کارربر - محبوبیت
recommender.ir
51
محبوبتريین آآيیتم ددرر دداامنه معيین
محاسباتت متنوعع محبوبيیت وو شباهت آآيیتمها
چرخه حیاتت فعالیت‌هایی کارربر - محبوبیت
recommender.ir
52
چرخه حیاتت فعالیت‌هایی کارربر
recommender.ir
53
Leverage
recommender.ir
54
Regex
recommender.ir
55
شناسایی همگراایی ررفتارر کارربر به سمت آآیتم
recommender.ir
56
شناسایی ترند
recommender.ir
57
کنترلل عدمم عالقمندیی
recommender.ir
58
پیشنهادد‌هایی مبتنی بر مکانن کابر/آآیتم
recommender.ir
59
(Cold-Start) غلبه بر شرووعع سردد
recommender.ir
60
شناسایی جنسیت وو سن کارربر ناشناسس
25 yo
recommender.ir
پرسونا
61
اازز کلیک وو ااسکروولل، تا کامنت وو ااسمایلی
recommender.ir
62
سامانه کشف تقلب‌هایی بانکی
helio.ir
ااوولین پیاددهه ساززیی ددرر سالل ۱۳۹۴
63
سامانه کشف تقلب‌هایی بانکی - معرفی
سروویس ااررززشش اافزووددههبالددررنگ
اابریی(HDFS) مقیاسس‌پذیریی اافقی
(Realtime)
(Cloud-based)
(VAS)
(Distributed) توززیع‌شدههپرددااززشگر رروویداادد‌هایی پیچیدهه (CEP) وو تکنیک‌هایی پرددااززشش‌جریانن ددااددهه
64
سامانه کشف تقلب‌هایی بانکی - هلیو
65
سامانه کشف تقلب‌هایی بانکی - هلیو
66
سامانه کشف تقلب‌هایی بانکی - هلیو
67
سامانه کشف تقلب‌هایی بانکی - هلیو
68
سامانه کشف تقلب‌هایی بانکی - هلیو
69
سامانه کشف تقلب‌هایی بانکی - هلیو
70
سامانه کشف تقلب‌هایی بانکی - هلیو
71
تجربه ما
پرووژژهه بر ااساسس نیازز‌هایی ووااقعی صنعت وو کسب‌وو‌کارر تعریف شودد
(SOA) فناوورریی وو خدماتت به صوررتت سروویس‌هایی مستقل توسعه یابد
B2B
Open Source
ساززمانن‌هایی چابک (کسب‌وو‌کارر‌هایی نوپا/خصوصی) که اازز جلسه گریزاانن هستند
تجربیاتت ززیر به صوررتت تکراارر پذیر به ما کمک کرددهه ااست:
API Economy
72
سپاسس
linkedin.com/company/recommender-ir
twitter.com/recommender_irinstagram.com/recommender_ir
telegram.me/recommenderrecommender.ir/blog
[email protected]/recommender
با ما ددرر شبکه‌هایی ااجتماعی وو ررسانه‌هایی ززیر ددرر ااررتباطط باشید: