nosql - неспроста ли это ЖЖЖ / Даниил Подольский (incaller.org)

NoSQL — неспросталиэто"ЖЖЖ"?ДаниилПодольскийCTOinCaller.org

Почемуэтоважно

•Обчитавшиеся рекламыруководителипредставляютсобойпроблему


•Обчитавшиеся рекламыруководителипредставляютсобойпроблему•Обчитавшиеся форумовичатиков инженерыпредставляютсобойещебольшуюпроблему


•Обчитавшиеся рекламыруководителипредставляютсобойпроблему•Обчитавщиеся форумовичатиков инженерыпредставляютсобойещебольшуюпроблему•NoSQL– мощноеиэффективноетехническоесредство,хотьипредъявляетповышенныетребованиякоквалификацииразработчиков

ЧтотакоеNoSQL

ЧтотакоеNoSQL?АчтотакоеSQL?

ЧтотакоеSQL

•Язык запросов AKAStructuredQueryLanguage

ЧтотакоеSQL

•Язык запросов AKAStructuredQueryLanguage•РСУБДAKARDBMS•Типизация•Таблицы•Связи AKAforeign keys

ЧтотакоеSQL


•Транзакции

ЧтотакоеSQL


•Транзакции•One server to rule them all

ТакчтожетакоеNoSQL

• Нетязыказапросов• Этополуправда!



• Нетжесткойтипизации• CREATE TABLE nosql (

key BIGINT,value BLOB

);



• Нетжесткойтипизации• CREATE TABLE nosql (

key BIGINT,value BLOB

);• Norelations,всестроки– самипосебе• Денормализация какнормажизни


•ВсевышеперечисленноепозволяетNoSQLбытьбыстрееSQL


•ВсевышеперечисленноепозволяетNoSQLбытьбыстрееSQL•Иэтодажеправда


•ВсевышеперечисленноепозволяетNoSQLбытьбыстрееSQL•Иэтодажеправда•Местами!

WhyNoSQLissexy

•Скорость

WhyNoSQLissexy

•Скорость•Возможностьстроитьраспределенныесистемы

WhyNoSQLissexy

•Скорость•Возможностьстроитьраспределенныесистемы•Возможностьраспараллеливатьнагрузку

WhyNoSQLissexy

•Скорость•Возможностьстроитьраспределенныесистемы•Возможностьраспараллеливатьнагрузку•Возможностьжертвоватьконсистентностью

WhyNoSQLissexynotsomuch

• Никакихтранзакций• ACID- транзакциизаявлены,нораспространяютсяонинаобновлениеоднойстроки!



• Никакихсложныхзапросов• Дляраспределеннойсистемыониневозможны• Анераспределеннаяненужна




• Сомнительнаяподдержкавторичныхиндексов• Эточрезвычайноважно




• Сомнительнаяподдержкавторичныхиндексов• Эточрезвычайноважно

• Никакихсвязей• Денормализация какнормажизни• Исканпоresultset

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадообойтись без

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадообойтись без:•Маленькийdataset

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадообойтись без:•Маленькийdataset•99%read1%write

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадообойтись без:•Маленькийdataset•99%read1%write•Низкиетребованиякпроизводительности•Низкие- этоменьше100KUps

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадообойтись без:•Маленькийdataset•99%read1%write•Низкиетребованиякпроизводительности•Низкие- этоменьше100KUps•Высокиетребованиякконсистентности•NoSQL базанеконсистентна никогда!

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадовнедрять

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадовнедрять:•Большойdataset снизкойсвязанностью

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадовнедрять:•Большойdataset снизкойсвязанностью•Высокиетребованиякдоступностиданных

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадовнедрять:•Большойdataset снизкойсвязанностью•Высокиетребованиякдоступностиданных•Высокиетребованиякlatency

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаточнонадовнедрять:•Большойdataset снизкойсвязанностью•Высокиетребованиякдоступностиданных•Высокиетребованиякlatency•Высокаявероятностьнеобходимостипостоянногорасширениякластера•Какнистарайся,аРСУБДшардируется плохо

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаможнопопробовать

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаможнопопробовать•Никогда!

ОсновыпроектированиясистемсиспользованиемNoSQL•Когдаможнопопробовать•Никогда!•Этокаксженитьбой…

ОсновывнедренияNoSQL

• “MySQL тожеNoSQL”AKA“PostgreSQL тожеNoSQL”


• “MySQL тожеNoSQL”AKA“PostgreSQL тожеNoSQL”•Неведитесь


• “MySQL тожеNoSQL”AKA“PostgreSQL тожеNoSQL”•Неведитесь•Нуразвечтовампростонравитсяидея


• “MySQL тожеNoSQL”AKA“PostgreSQL тожеNoSQL”•Неведитесь•Нуразвечтовампростонравитсяидея• Сказотом,какпрограммистАлександрборолсязасвободусамовыражения,иобиспользованииAnemometerкакинструментасвободоподавления


• “MySQL тожеNoSQL”AKA“PostgreSQL тожеNoSQL”•Неведитесь•Нуразвечтовампростонравитсяидея• Сказотом,какпрограммистАлександрборолсязасвободусамовыражения,иобиспользованииAnemometerкакинструментасвободоподавления• РСУБДзахватилимирнепонашейтупости,апотому,чтоэтапарадигманаиболеегибкаяизизвестных


• In-memory,однаnode


• In-memory,однаnode•Возьмитеmemcache


• In-memory,однаnode•Возьмитеmemcache•Хотитеперсистентности - возьмитеTarantool


• In-memory,однаnode•Возьмитеmemcache•Хотитеперсистентности - возьмитеTarantool•Давозьмитечтоугодно- результатнеизменится


• In-memory,однаnode•Возьмитеmemcache•Хотитеперсистентности - возьмитеTarantool•Давозьмитечтоугодно- результатнеизменится•Дажеирепликациюможетевключить•Сможетемасштабироватьчтение


• In-memory,несколько нод,replicationfactor1


• In-memory,несколько нод,replicationfactor1•Возьмите memcache


• In-memory,несколько нод,replicationfactor1•Возьмите memcache•Потому,что вам ничто не поможет


•Несколько нод,replicationfactor>1


•Несколько нод,replicationfactor>1•Вот тут,собственно,и начинается NoSQL


•Несколько нод,replicationfactor>1•Вот тут,собственно,и начинается NoSQL•Write-optimizedи read-optimized•Что это


•Несколько нод,replicationfactor>1•Вот тут,собственно,и начинается NoSQL•Write-optimizedи read-optimized•Что это•Почему это важно


•Несколько нод,replicationfactor>1•Вот тут,собственно,и начинается NoSQL•Write-optimizedи read-optimized•Что это•Почему это важно•Почему нельзя сделать both-optimized


•Несколько нод,replicationfactor>1•Вот тут,собственно,и начинается NoSQL•Write-optimizedи read-optimized•Что это•Почему это важно•Почему нельзя сделать both-optimized

•Репликация,ребалансинг,восстановление целостности

Немногопрактическогоопыта

• Aerospikeкак яркий представитель read-optimizedkey-valueхранилищ


• Aerospikeкак яркий представитель read-optimizedkey-valueхранилищ•OpenSource с 2014года


• Aerospikeкак яркий представитель read-optimizedkey-valueхранилищ•OpenSource с 2014года• Прекрасный GUIконтроля состояния кластера


• Aerospikeкак яркий представитель read-optimizedkey-valueхранилищ•OpenSource с 2014года• Прекрасный GUIконтроля состояния кластера•Отлично работающие ребалансинг и восстановление


• Aerospikeкак яркий представитель read-optimizedkey-valueхранилищ•OpenSource с 2014года• Прекрасный GUIконтроля состояния кластера•Отлично работающие ребалансинг и восстановление• Индексы всегда в памяти,данные возможно впамяти


• Aerospikeкак яркий представитель read-optimizedkey-valueхранилищ•OpenSource с 2014года• Прекрасный GUIконтроля состояния кластера•Отлично работающие ребалансинг и восстановление• Индексы всегда в памяти,данные возможно впамяти• Достаточная производительность:150KUps,400KRpsна кластере из 4-хнод


•Aerospike: ложкадегтя,илисказоГригориидевопсе и15minutespoweroutage


•Aerospike: ложкадегтя,илисказоГригориидевопсе и15minutespoweroutage•НенадоиспользоватьAerospike длябольшихобъемовданных


•Aerospike: ложкадегтя,илисказоГригориидевопсе и15minutespoweroutage•НенадоиспользоватьAerospike длябольшихобъемовданных•АещеуAerospike оченьмедленноеобновлениевторичныхиндексов


• Cassandraкак яркий представитель write-optimizedNoSQLСУБД


• Cassandraкак яркий представитель write-optimizedNoSQLСУБД• OpenSource


• Cassandraкак яркий представитель write-optimizedNoSQLСУБД• OpenSource• Написана на Java


• Cassandraкак яркий представитель write-optimizedNoSQLСУБД• OpenSource• Написана на Java• Индексы хранятся на диске


• Cassandraкак яркий представитель write-optimizedNoSQLСУБД• OpenSource• Написана на Java• Индексы хранятся на диске• Вторичные индексы обновляются быстро


• Cassandraкак яркий представитель write-optimizedNoSQLСУБД• OpenSource• Написана на Java• Индексы хранятся на диске• Вторичные индексы обновляются быстро• Работающие средства восстановления целостности иребалансинга


• Cassandraкак яркий представитель write-optimizedNoSQLСУБД• OpenSource• Написана на Java• Индексы хранятся на диске• Вторичные индексы обновляются быстро• Работающие средства восстановления целостности иребалансинга•Mmaped files


•Cassandra:ложкадегтя,илисказоКонстантинедевопсе и100%diskutilisation


•Cassandra:ложкадегтя,илисказоКонстантинедевопсе и100%diskutilisation•Дисковый cacheна SSD- наше все


•Cassandra:ложкадегтя,илисказоКонстантинедевопсе и100%diskutilisation•Дисковый cacheна SSD- наше все•NoGUIforversion3yet

Итого

• ЕслиестьшансобойтисьбезNoSQL –обойдитесьбезнего•Личноемнениедокладчика,конечноже

Итого


• Еслишансанет- выберитеправильныйпродукт•НевсеNoSQL базыполезныодинаково

Итого


• Еслишансанет- выберитеправильныйпродукт•НевсеNoSQL базыполезныодинаково

• ЕсливашпаттернляжетнапарадигмуNoSQLхорошо- результатыбудутсущественнолучше,чемприиспользованииРСУБД

Вопросы?

nosql - неспроста ли это ЖЖЖ / Даниил Подольский (incaller.org)

Engineering