Фирма ДАТА-ЦЕНТР Автоматика приняла участие во второй всемирной конференции по технологии BIG DATA. Это первый Российский доклад на международной конференции касающийся указанной технологии. Кроме доклада для участников конференции было организовано пленарное заседание на котором сотрудники фирмы ДАТА-ЦЕНТР Автоматика ответили на большое количество вопросов по применению технологии BIG DATA в металлургии.

В современных информационных технологиях сложилась серия подходов, инструментов и методов обработки структурированных и неструктурированных данных огромных объёмов, при значительном многообразии этих данных.

В качестве определяющих характеристик для данных подходов отмечают «три V»: объём (англ. volume, в смысле величины физического объёма), скорость (англ. velocity в смыслах как скорости прироста, так и необходимости высокоскоростной обработки и получения результатов), многообразие (англ. variety, в смысле возможности одновременной обработки различных типов структурированных и полуструктурированных данных).

Эти определения как нельзя лучше подходят для данных металлургического производства.

Множество сигналов с датчиков контроля технологических процессов, карты ультразвукового контроля, изображения полос прокатки, содержащих дефекты на полосе, данные о перемещении продукции и материалов, данные о заказах и поставщиках – прекрасный пример структурированных и полуструктурированных данных.

Вся совокупность технологий по обработке данных огромного объема и слабой структуризации или вообще не структурированных получила название BIG DATA.

Термин BIG DATA ввел Клиффорд Линч, редактор журнала Nature, который 3 сентября 2008 года подготовил специальный номер журнала с темой «Как могут повлиять на будущее науки технологии, открывающие возможности работы с большими объёмами данных?», где поместил материалы связанные с феноменом взрывного роста многообразия и объемов обрабатываемых данных и технологических перспективах.

К 2011 году большинство крупнейших поставщиков информационных технологий поставили на рынок продукты относящиеся к BIG DATA. В том числе: IBM, Oracle], Microsoft], Hewlett-Packard, EMC. Также нельзя не упомянуть ветерана обработки больших данных фирму Teradatа, которая аж с 1984 года работает в области обработки «больших данных».

В 2007 году фирма ДАТА-ЦЕНТР Автоматика разработала систему EXPERT BASE, а в 2009 году создала и внедрила на основе системы EXPERT BASE «Автоматизированную Систему Слежения и Контроля Процессов «Технология»» (АС СКП «Технология») на Череповецком металлургическом комбинате ОАО «Северсталь».

EXPERT BASE и АС СКП «Технология» во многом предвосхитили применение BIG DATA в металлургии, а в современном виде предусматривают прямое применение технологий BIG DATA. О системе EXPERT BASE можно посмотреть здесь.