Розвиток Big Data у Росії
Потреба в обробці і зберіганні дуже великих масивів даних постійно зростає. У зв’язку з цим все частіше можна почути термін Big Data. Так що ж це таке?
Методи обробки та структурування великих даних і називають Big Data. Світовий ринок Великих Даних додає до 20% в рік. Відображається ця світова тенденція і на вітчизняних інформаційних технологіях. Big Data стає певним трендом, популярною темою серед it-фахівців і тих, чий бізнес залежить від обробки великої кількості інформації. А таких усе більше. Серед найбільш сприйнятливих до Big Data галузей в Росії можна виділити:
банки і рітейл — насамперед для них важливий аналіз клієнтської бази та оцінка ефекту маркетингових кампаній);
телекомунікації — тут у пріоритеті монетизація трафіку і сегментація клієнтської бази;
державні структури — ведення звітності, аналіз заявок від населення і обмін даними між підрозділами;
нафто – і газодобувні компанії — планування і моніторинг видобутку та збуту;
енергетичні компанії — створення інтелектуальних електроенергетичних систем, оперативний моніторинг і прогнозування.
Ринок Big Data в Росії тільки зароджується. Більшість російських компаній зараз використовує іноземні (в основному західних) рішення в цій області. Основними провайдерами послуг у сфері Великих Даних на російському ринку є Sap, Oracle, IBM, EMC, Microsoft, IBS, Cloudera, Hortonworks і Teradata.
Однак і вітчизняні компанії поступово накопичують власні розробки в сфері Великих Даних.
Ощадбанк
Виступ глави Ощадбанку Германа Грефа на Всесвітньому фестивалі молоді і студентів у Сочі в жовтні 2017 року стало в деякому роді знаковим для Big Data у Росії. Вперше керівник такого високого рівня заговорив з трибуни про Великих Даних та їх впровадженні.
«Ми довго спілкувалися з моїм колегою Джеком Ма (президентом китайської компанії Alibaba Group — прим. ред.), і він каже таку фразу: „Забудьте про IT, забудьте про інформаційні технології, це вчорашній день, це “відстій”“», — розповів Греф.
«Сьогоднішня економіка — це економіка даних. У цьому сенсі я з ним згоден. Те, що стосується диджитализации, — це останній тренд. І перехід до цього тренду означає, що у нас в руках з’явилися зрілі технології, які дозволяють обробляти величезну кількість даних. Технології Big Data увійшли в свою стадію зрілості і всім компаніям стали доступні», — додав він.
Інтерес Грефа до Big Data знаходиться не тільки в теоретичній площині, але і в суто практичної. Зокрема, Великі Дані вже почали використовувати в Ощадбанку для оцінки ризиків. Правда, інновації впроваджуються не без заминок.
«Ми три роки працювали з регулятором для того, щоб перейти на так званий просунутий підхід у регулюванні наших ризик-зважених активів. Коли ми до цього підійшли, зрозуміли, що це нам не потрібно, тому що, якщо ми перейдемо, нам буде заборонено використовувати неверифіковані моделі. А у нас всі моделі зараз перекладаються на нейронні мережі», — розповів Греф.
Ощадбанк зараз дуже активно залучає фахівців з Big Data і співпрацює з декількома університетами: МФТІ, ФКН ВШЕ і МГУ.
Незважаючи на всю свою об’єктивну і суб’єктивну зацікавленість в Big Data, Ощадбанк умовним лідером в цій області серед вітчизняних компаній назвати не можна. А кого можна? Відповідь лежить майже на поверхні.
Яндекс
Яндекс — це компанія, яка стала працювати з великими даними ще «до того, як це стало мейнстрімом» саме через специфіку свого бізнесу.
Обробка веб-сторінок з самого початку зобов’язала компанію постійно нарощувати обчислювальні потужності і удосконалювати алгоритми обробки даних, адже їх обсяг в інтернеті зростає з величезною швидкістю. Він подвоюється кожні 2 роки.
Поступово Яндекс почав додавати до пошуку все нові послуги, за два десятиліття перетворившись у того велетня, якого ми знаємо зараз. Сьогодні Яндекс — це справжня корпорація, крім пошуку надає сервіси електронних платежів, замовлення таксі, доставки їжі, музики і багато інші можливості. 10 липня 2018 року в продаж надійшла розумна колонка «Яндекс.Станція» з штучним інтелектом по імені Аліса. Всі напрямки Яндекса сьогодні так чи інакше пов’язані з Big Data. У 2014 році компанія створила експериментальний підрозділ «Yandex Data Factory», або скорочено YDF, що спеціалізується виключно на великих даних.
«Аналіз „Великих Даних“ з використанням машинного навчання — молода і перспективна область», — говорить керівник YDF Євгенія Завалішина. — «Використовувані алгоритми Яндекс розробив для власних потреб: пошуку, прогнозування пробок, таргетингу реклами, складання музичних рекомендацій. Однак алгоритми аналізують не „утримання“ даних, а взаємозв’язки між ними, і тому можуть застосовуватися в будь-якій галузі».
У 2018 році Яндекс прибрав експериментальний статус у «Yandex Data Factory». Зараз це вже міжнародний B2B-підрозділ компанії, серед клієнтів і партнерів якого Intel, AstraZeneca, ЦЕРН, Магнітогорський металургійний комбінат, Газпром нафту і Schlumberger.
Цікаво, що Яндекс офіційно консультує з Big Data вже згаданий раніше Ощадбанк.
Mail.ru Group
Найбільша IT-корпорація Росії Mail.ru, звичайно, не могла залишитися в стороні від нового інформаційного тренда. В 2016 році, на 2 роки пізніше, ніж Яндекс, Mail.Ru Group виділила в окреме направлення на роботу з Великими Даними.
У рамках напряму «Великі Дані» Mail.ru надає послуги по створенню предиктивных математичних моделей, проведення маркетингових досліджень, консалтингу у сфері розвитку інфраструктури та методології роботи з Big Data.
«Компанія займається аналізом даних фактично з моменту заснування. Накопичена експертиза і компетенції дозволяють надавати послуги з аналізу Big Data стороннім замовникам, незалежно від географії присутності. Насамперед це проекти, які спрямовані на серйозне підвищення ефективності процесів маркетингу і продажів, оптимізації виробництва, логістики, управління ризиками, планування, управління персоналом та інші робочі процеси різних бізнесів. У зв’язку з цим було прийнято рішення виділити цю роботу в окремий підрозділ», — прокоментував створення в компанії напряму «Великі Дані» Дмитро Сергєєв, заступник генерального директора Mail.Ru Group.
У 2014 році на базі факультету ВМК МГУ імені М. в. Ломоносова був запущений освітній проект «Техносфера Mail.Ru», в рамках якого співробітники компанії ведуть курси з машинного навчання і data mining.
Big Data Key
Крім найстаріших гравців ринку, які існують не одне десятиліття, тон розвитку галузі починають задавати і нові учасники. З зростанням популярності Big Data у Росії стали з’являтися компанії, що спеціалізуються на Великих Даних.
Одним з найбільш яскравих представників «нової хвилі» на російському ІТ-ринку стала «Big Data Key». Зараз компанія зайняла нішу по обслуговуванню малого та середнього бізнесу.
«Поступово інтерес до роботи з Великими Даними з’являється не тільки у гігантів, начебто найбільших банків і нафтовидобувних корпорацій, але й у менш великих компаній. Економіка Росії диджитализируется, при цьому відбувається її стиск. Тому зростає конкуренція. Керівники шукають способи оптимізувати свій бізнес, починають звертати увагу на нові інструменти в IT. Одним з них якраз є Big Data», — розповідає директор Big Data Key Філіп Просандеев.
Компанія «Big Data Key» починала з того, що готувала так звані «датасеты». Тобто структурувала з допомогою спеціального синтаксису інформацію для обробки нейронними мережами. Потім перейшла вже до більш серйозних завдань на зразок архівування та аналізу великих масивів даних.
Крім «чистих» Великих Даних Big Data Key займається кількома напрямками в IT-сфері. Це і розробка сайтів, і інтеграція CRM, і різного роду інтернет-реклама, але Big Data поступово все більше проникає у суміжні області.
Підсумки
В даний момент в Росії продовжується накопичення обсягу інформації до рівня Великих Даних. У Росії так само, як і в усьому світі, спостерігається тренд на візуалізацію інформації, аналіз медіафайлів і розвиток «інтернету речей». Відповідно, стають все більш затребуваними інструменти для обробки і зберігання Великих Даних.
Навіть незважаючи на загальну стагнацію російської економіки, International Data Corp. прогнозує, що до 2020 року обсяг Big Data у нашій країні зросте з нинішніх 1,8% до 2,2% від загальносвітового обсягу даних.
Компанії, які вже отримали вигоду від використання Big Data, поступово формують нове середовище для розвитку даних технологій. Тут йдеться як про тих, хто створює ці технології, так і про тих, хто ними користується.
Максим Голіков