Водный дом и озеро данных: смоленских школьников научили обращаться с большими данными
Смоленск
09 ноября

Водный дом и озеро данных: смоленских школьников научили обращаться с большими данными

Как правильно хранить данные? Кто такой дата-инженер? Ответы на эти и другие вопросы искали гости Информационного центра по атомной энергии (ИЦАЭ) Смоленска 9 ноября на мероприятиях, прошедших в рамках проекта «ИЦАЭ OPEN».

Открыла программу лекция преподавателя физико-математического факультета Смоленского государственного университета Владислава Ковалёва «Что такое водный дом и озеро данных?».

Сначала эксперт познакомил слушателей лекции с понятием Big Data, или Большие данные.  Большими называются данные, обладающие тремя основными свойствами: большой объём, разнообразие и высокая скорость поступления. Простыми словами  Big Data – это структурированные, частично структурированные или неструктурированные большие массивы данных. Специалист, который разрабатывает и обслуживает инфраструктуру хранения, обработки и анализа больших объёмов данных, называется дата-инженер.

«Слушателями лекции были одарённые школьники, интересующиеся программированием, — отметил Владислав Ковалёв. – Поэтому важно было рассказать им о такой перспективной специальности, как дата-инженер, рассказать, чем отличаются друг от друга транзакционные и аналитические базы данных, а также чем отличаются DWH, это ещё иногда называют водным домом, отDataLake – озера данных».

DWH (Data Waterhouse или Data Warehouse) – своеобразная библиотека, в которой собираются данные из разных систем. Информация в ней упорядочена и каталогизирована. DWH – инструмент, используемый для аналитики и обнаружения закономерностей и взаимосвязей в данных, которые появляются со временем.

Озёра данных (Data Lake) используют для хранения структурированных и полуструктурированных данных, а также неструктурированных, неформатированных данных из огромного количества источников. При умелом использовании озёра данных становятся надёжным инструментом для многих отраслей: торговля, нефтеперерабатывающая промышленность, страхование, логистика и другие.  Например, в медицине, где база данных о пациентах, их диагнозах и способах лечения может быть использована для автоматизации диагностики.

Продолжила программу интеллектуальная командная викторина «Научный квиз», в которой участникам предстояло вспомнить, а кому-то и узнать, о важнейших мировых достижениях в области математики, физики и атомной отрасли. Команды, например, вспоминали, правда ли на голову Ньютону падало яблоко или эту байку он придумал для объяснения своей юной племяннице закона всемирного тяготения, выбирали, что выше: градирня на АЭС или девятиэтажный дом, и выясняли, нужен ли кислород для сгорания ядерного топлива.

«ИЦАЭ OPEN» — проект сети ИЦАЭ, когда центры работают в формате открытой площадки для тех, кто хочет больше узнать о науке и современных технологиях. В этот день гостей ждут познавательные мастер-классы, интеллектуальные игры и встречи с экспертами, а также научно-популярные ток-шоу и викторины.