Программный комплекс предназначен для параллельно-конвейерной обработки больших потоков данных на вычислительных кластерах. Разработанный ПК обеспечивает: обработку потенциально бесконечных потоков данных; контроль поступления новых данных и автоматический запуск процесса систематической обработки, либо загрузку требуемых данных и их обработку для отдельного пользовательского запроса (с временным или пространственным окном, либо другими ограничениями); возможность организации конвейерной обработки по заданной схеме композитного задания для каждой подзадачи (атомарной), в качестве которой могут выступать уже существующие консольные программы и пакеты; автоматическую интеллектуальную балансировку подзадач и обрабатываемых ими данных по ресурсам вычислительного кластера, исходя из априорной или статистической оценки сложности выполнения подзадач; контроль и гарантированность процесса выполнения как всей задачи обработки данных, так и отдельных подзадач; возможность изменения схемы обработки и подзадач без необходимости изменения конфигурации оборудования; хранение и доступ к результатам обработки через Интернет. Тип реализующей ЭВМ: IBM PC-совмест. ПК
Язык программирования: Python 2.7
Вид и версия операционной системы: Windows, Linux
Язык программирования: Python 2.7
Вид и версия операционной системы: Windows, Linux