Transcription

От Xранения до АналитикиПять причин выбрать СХДDellEMC Isilon для аналитики“Больших Данных”Михаил ВладимировТехнический консультант

Спектр яИнфраструктураУСЛУГИ2 Copyright 20162017 Dell Inc.

Business Laptops / Desktops / TCPortfolio 2016Power Edge SERVER FamilyM ModularC CloudT TowerLatitude Inspiron PrecisionViPR-C vUnityXPSUnity ALL FLASHDSSD D3IoT GatewayVRTXUnity HYBRIDOptiPlex Precision Inspiron XPS Thin ClientsVMAX AFAxtremIOR RackVNXeEmbeddedIndustrial Box PCFX FlexVMAX3100k/200k/400kDell EMC NetworkingX-SeriesN-SeriesC-SeriesVNXIsilon SD EdgeS & Z-SeriesM-SeriesSecurity AnalyticsDCAeGRCVBLOCKSC SeriesVxRAILECATVIAVxRACK MD SeriesXC SeriesDell Storage SeriesVPLEXCloud ArraySecure IDIsilonRecoverPointRP4VMData Protection SolutionsDataECS Centera Avamar Atmos DLM DomainPollyREX-RaymesosmoduledvdiCloud Tiering ConnectrixAppliance SAN ConnectivityRack HD LibStorageCTACTA/VE3 Copyright 2017 Dell Inc.

Алхимия “Больших Данных”На пути к философскому камню: Комплексное (сложное) технологическоерешение Различные источники информации Различные инструменты решения дляпохожих задач (и их применимость) Готовность инфраструктуры решатьпоставленные задачи (тип данных, ростобъёмов, модернизации, поддержка) Стоимость (CAPEX/OPEX) Внутренние требования и стандарты(надёжность, конфиденциальность .)4 Copyright 2017 Dell Inc.

Рост объёмовданныхпревышает ростбюджетов на ITClickstreamGeolocationWeb DataInternet of ThingsNew DataSourcesDocs, emailsServer logsGartner IT Budget Growth5 Copyright 2017 Dell Inc.TraditionalData

Ограничения традиционных систем Неравномернаяутилизация ресурсовFileSystemVolume ьностьAggregate /LUN / SANRAID6 Copyright 2017 Dell Inc.

Как Scale-Out системы могут помочь1) Упрощение инфраструктуры (снижение TCO)2) Производительность (параллельный доступ)3) Надёжность (при работе с большими объемами данных)4) Готовность к массированному росту данных5) Дополнительный функционал (различные протоколы доступа,многопоточность, надёжность и конфиденциальность)6) Простое внедрение, администрирование, модернизация7) Возможность избежать миграции данных7 Copyright 2017 Dell Inc.

Dell EMC Isilon - “Simple is smart”8 Copyright 2017 Dell Inc.

“Data Lake” – Хранение неструктурированной информацииВсе данные важны – от филиалов до БЛАКОРАСПРОСТРАНЕНИЕ ОЗЕРА ДАННЫХ НА ПЕРИФЕРИЙНЫЕ ПЛОЩАДКИ И ОБЛАКО9 Корпорация Copyright2017Dellг. Inc.EMC,2015Все права защищены.9

EMC IsilonКак мы это ин том, ые файлови директорий еракластера10 Copyright 2017 Dell Inc.

Операционная система OneFSОдин том, одна еннаяэффективность11 Copyright 2017 Dell Inc.Простота и отанаращивания

Аппаратная платформаNITROPowered by Intel Xeon ProcessorsAll-Flash Линейный рост производительности и ельны oolsАктивный архивВиртуальнаяплатформа Copyright 2017 Dell икация данныхв облакоЁмкость12HD-Series

1 – Простая инфраструктура хранения данныхОбщие ание13 Copyright 2017 Dell Inc.WEB 3.0Облачные приложения13

2 - Непревзойденная защита и доступность меN 2,N 1ССзащитойN 3 и N 4обеспечиваетсяданные полностью ажедаже при отказе илиодногодискаузловили узлаПо мере увеличенияколичества узлов в кластереIsilon збыточности данных надисках14 Copyright 2017 Dell 0%

3 – Соответствие корпоративным требованиям истандартамЗАЩИТА ДАННЫХБЕЗОПАСНОСТЬДАННЫХ15 Copyright 2017 Dell Inc.Фундаментдля «озераданных»УПРАВЛЕНИЕ ДАННЫМИУПРАВЛЕНИЕ ПРОИЗВОДИТЕЛЬНОСТЬ

4 - Долговременное хранениебез рисков миграцииХранения данных в течении десятков лет Бесшовная замена узлов Совместная работа узлов разныхпоколений в едином кластере Вывод из эксплуатации старыхузлов одной кнопкой16 Copyright 2017 Dell Inc.No Data Migrations

5 - Работа с ведущими веренная интеграция с docs/DOC-3710117 Copyright 2017 Dell Inc.

EXISTING SOURCESРазделение уровней хранения и ОВBusinessAnalyticsERPData FlowOFFLOADCRM21HORTONWORKSDATA PLATFORMOPERATIONAL SERVICESDATASERVICES123ClickstreamACTIVE ARCHIVEVisualization& DashboardsETL/ELT OFFLOADHADOOP CORE3NEW SOURCESCommodity ComputeENRICH WITH NEWDATA TYPESWeb & ns4ENTERPRISE-GRADEDATA MANAGEMENTSensor & MachineIsilonServer Logs18 Copyright 2017 Dell Inc.5NFS, SMB,HTTP, SwiftMULTI-PROTOCOLACCESS

Как это работает - Встроенная поддержка HDFSDNS Load Balancing (zone)(1) SmartConnect DNSPolicy Load BalancingHDFS Namenode TrafficDFSClientHDFS Datanode TrafficHadoop Compute Node(4) Write HDFS Blocks(3) Read HDFS Blocks(possible Adaptive Prefetch)(2) Namenode Session: addBlock (Write) getBlockLocations tanodeDatanodeDatanodeIsilon NodeIsilon NodeIsilon NodeSingle Isilon Cluster (Infiniband Backend)19 Copyright 2017 Dell Inc.VirtualRackNamenodeDatanodeIsilon Node

6 - Упрощение процедур ETLTraditional Hadoop DAS17m:32sData Handling notrequired on Isilon30m:18s20m:50Isilon Enabled Hadoop1 TB Terasort Test16m:00s20 Copyright 2017 Dell Inc.Hadoop DASvHadoop Isilon55MB/s Node ThroughputCompute:30m 18sTime To Results: 68m 40s85MB/s Node ThroughputCompute:16m 00sTime To Results: 16m 00s

Бизнес Аналитика с EMC Isilon – Это просто !!!!Три простых шага:Делай раз: Бесплатная триальная комьюнити версия PivotalPHD или Cloudera CDH, чтобы ощутить силуHadoop елай два: Hadoop Starter Kit (HSK), чтобы получитьподробные инструкции как развернуть Хадуп за час на ISILONи платформе Vmware три: Виртуальный EMC Isilon – доступен длясвободного скачивания http://emc.com/getisilon бесплатнаятриальная лицензия HDFS (необходимо запросить в EMC)21 Copyright 2017 Dell Inc.

5 5 ПРОСТЫХ ПРИЧИН ВЫБРАТЬ EMC ISILON1222Консолидация различных задач (от архива до аналитики)Высокая производительность (Scale-Out)3Масштабируемость (до 144 узла, 50 ПБ)4Простое внедрение, установка и ь хранения Copyright 2017 Dell Inc.