Несмотря на то, что в огромных центрах обработки данных АНБ хранятся миллиарды бит данных о нашей личной жизни, есть одна вещь, о которой много не говорили, по крайней мере, о CNN. Это связано с инженерной проблемой, возникшей вместе с облачными технологиями, большими данными и впечатляющими физическими центрами хранения данных, которые сейчас строятся по всему миру. Так что же это? Ну, независимо от того, кто управляет одной из гигантских ИТ-систем, которые используют эти средства, существует потребность в программных системах, которые помогают всем этим данным быстро входить и выходить из конвейера. Эта потребность представляет собой один из самых интересных вопросов ИТ или головоломок, стоящих сегодня перед профессионалами.
Как отмечают многие эксперты, сегодняшний экстремальный спрос на обработку данных выходит далеко за рамки традиционных подходов. Проще говоря, использование простых структур баз данных и инструментов, таких как интерфейс SQL-запросов, не обеспечит достаточную вычислительную мощность или функциональность для подобных систем, разработанных за последние несколько лет. Архивы современных крупных технологических компаний нуждаются в чрезвычайно масштабируемой технологии. Им нужны инструменты обработки данных, которые могут вводить и выводить результаты в гораздо большем объеме, чем тот, который может облегчить один сервер. Им нужны решения, которые можно быстро наращивать для роста, решения, которые включают сложные уровни искусственного интеллекта, решения, разработанные для легкого управления ИТ-отделом.
Вопрос в том, как компании и правительственные учреждения преодолевают ограничения традиционного пути обработки данных? Здесь мы рассмотрим один очень многообещающий вариант: программное обеспечение для обработки больших данных и администрирование нескольких центров обработки данных.
