Стартъпът демонстрира база данни с графични ускорители, обработваща 350 млн. туита на един сървър
Стартъпът MapD, който разработва релационна система за управление на бази данни с вградени високопроизводителни аналитични и визуализиращи енджини, получи голямата награда на конференцията Nvidia 2014 GPU Technology. Форумът се провежда от производителя на графични ускорители Nvidia.
Основната особеност на MapD е, че за обработката на базите данни се използва изчислителната мощност на графичния ускорител. Според информацията технологията позволява на един сървър на цена около 1000 щатски долара да се справя с масиви от данни, които досега са изисквали цял клъстър. MapD също така поддържа клъстеризация и разпределяне на задачите върху стотици или дори хиляди компютърни системи.
Използването на графични ускорители за обработка на големи обеми от данни не е нова идея. Подобни решения използват IBM, Netflix, Яндекс и Baidu, но постигнатото от MapD е много повече, се казва в изходния текст.
Демонстрация с туитове в реално време
По време на Nvidia 2014 GPU Technology стартъпът показа възможностите на своя енджин в уеб приложение, което в реално време преработва и визуализира стотици милиони съобщения от Туитър за периода от януари 2011 до септември 2013 година. Тестовата база съдържа около 350 милиона туита и работи на един единствен сървър, оборудван с 8 графични процесора Nvidia K40.
Сумарно в графичната памет може да се съхранява до 96 GB информация, която може да се обработва със скорост над 2 TB/s. За цялостната обработка на тази база данни е достатъчно време от 5 до 30 милисекунди, а анализът и визуализацията на данните са вградени в самия енджин.