Некоммерческая организация Apache Software Foundation (ASF), обеспечивающая поддержку многочисленным Open Source-проектам, объявила о переводе фреймворка для анализа большого количества данных Apache Spark в разряд ведущих проектов (Top-Level Project, TLP).
Spark позиционируется как очень быстрое и хорошо масштабируемое средство обработки и анализа больших объемов данных. Веб-ресурс The Register назвал Spark «швейцарским ножом Hadoop», а сами разработчики утверждают, что их продукт позволяет запускать приложения в десятки раз быстрее, чем в случае применения Hadoop MapReduce. Spark может работать с любыми существующими данными Hadoop и поддерживает менеджер кластеров YARN из Hadoop 2, позволяет запускать приложения на языках Java, Scala и Python.
Spark был изначально создан в 2009 году в исследовательском центре AMPLab (Калифорнийский университет в Беркли), а сегодня его используют такие компании, как Alibaba, Cloudera, Databricks, IBM, Intel и Yahoo. Последний релиз Apache Spark — версия 0.9.0 — был представлен в начале февраля. Исходный код распространяется на условиях свободной лицензии Apache License v2.0. Сайт проекта — spark.apache.org.
Компания Cisco объявила о выпуске нового языка OpenAppID для определения работающих в сети приложений. Разработка интегрирована в свободную систему обнаружения и предотвращения вторжений Snort.
OpenAppID позволяет обнаруживать запущенные приложения для того, чтобы реагировать на потенциальные угрозы, исходящие из них. Готовая реализация OpenAppID войдет в ближайший релиз Snort и позволит обнаруживать приложения по их сетевой активности, сообщать об их трафике, блокировать по управляемым политикам и расширять язык правил Snort для указания спецификаций приложений.
К моменту релиза в базе OpenAppID ожидается наличие более 1000 детекторов (спецификаций для идентификации приложений). Предполагается, что открытость OpenAppID и его включение в состав Open Source-инструмента будет способствовать расширению базы приложений благодаря совместным усилиями сообщества, заинтересованного в этих возможностях. А пока для всех желающих доступна альфа-версия Snort 2.9.7.0 с OpenAppID.
Мартин Рош (Martin Roesch), автор Snort и основатель Sourcefire (поглощена Cisco в прошлом году), нынешний вице-президент и главный архитектор в Cisco Security Business Group: «OpenAppID демонстрирует, что безопасность в духе Open Source является частью мировоззрения Cisco. Привнесение возможностей Open Source в мир безопасности на прикладном уровне [модели OSI] удачно поддерживает портфель решений [Cisco] для Application Centric Infrastructure (ACI)».