Автор: WinAx

Команда Redis выпустила несколько новых модулей. RedisRaft является совершенно новым и все еще находится в стадии разработки, в то время как RedisAI и Redis Gears были анонсированы год назад и теперь общедоступны.

Фреймворк распределенной потоковой обработки Apache Samza обновлен до версии 1.5. Усовершенствования включают упрощенный рабочий процесс отправки заданий, который обеспечивает повышенную безопасность, и возможность перемещать контейнеры без перезапуска приложения.

Apache Hudi был принят как проект верхнего уровня. Технология озера данных с открытым исходным кодом для потоковой обработки поверх Apache Hadoop уже используется в таких организациях, как Alibaba, Tencent и Uber, и поддерживается Amazon Web Services как часть Amazon EMR.

Spark 3 был выпущен с существенными улучшениями в поддержке Python и SQL, а также изменениями, упрощающими изучение данных. Это также быстрее.

TileDB, созданный для того, чтобы предоставить специалистам по данным более эффективный способ хранения, обновления, анализа и совместного использования больших наборов данных, позволяет моделировать данные в виде плотных или разреженных многомерных массивов. Новые функции версии 2 включают поддержку разнородных измерений и строковых измерений в разреженных массивах.

Команда ScyllaDB включила API-интерфейс, совместимый с DynamoDB, в новую версию базы данных NoSQL с открытым исходным кодом. Другие улучшения в ScyllaDB 4.0. Включают более эффективную реализацию облегченных транзакций и поддержку отслеживания измененных данных.

Redis 6 теперь общедоступен с потоковой передачей для ввода-вывода. До сих пор база данных в памяти не поддерживала многопоточный ввод-вывод, поскольку это усложняло бы модель сегментирования Redis, но теперь она доступна в качестве опции и может повысить производительность ввода-вывода Redis в два раза по сравнению с Redis 5.

Neo4j выпустила Graph Data Science Framework, набор продуктов Neo4j, предназначенных для предоставления аналитикам данных инструментов для работы с данными, содержащими высокопрогнозные, но недостаточно используемые отношения и сетевые структуры.

Apache Kafka, платформа больших данных и потоков данных, была обновлена до новой версии, которая добавляет новые метрики и повышает безопасность.

RedisGraph, модель графической базы данных для Redis, была обновлена. Новая редакция поддерживает полнотекстовый поиск, ответы на запросы в виде полного графа и улучшения языка запросов Cypher.