Amazon анонсировала PartiQL, язык запросов, совместимый с SQL, который позволяет запрашивать данные независимо от того, в какой базе данных они хранятся. Эталонная реализация языка имеет открытый исходный код.
Автор: WinAx
Какие навыки нужны специалистам по данным
В настоящее время существует огромный спрос на специалистов по данным, которые являются популярной работой с привлекательными зарплатами. Но какие знания и навыки ищут работодатели?
PayPal Open Sources Hera
PayPal сделал HERA, свой высокоэффективный надежный доступ к хранилищам данных, с открытым исходным кодом. Hera — это шлюз доступа к данным, который PayPal использует для масштабирования доступа к базе данных для сотен миллиардов запросов SQL в день.
Инструмент потоковой передачи данных из открытых источников LinkedIn
LinkedIn предоставил открытый исходный код своего инструмента для потоковой передачи данных между системами. Brooklin описывается как распределенная служба для потоковой передачи данных почти в реальном времени и в любом масштабе.
Google Data Studio повышает интерактивность
Google обновил свой инструмент аналитики Data Studio, добавив новую домашнюю страницу, призванную облегчить пользователям поиск информации и отчетов.
Apache Storm переработан на Java
Apache Storm 2.0 был выпущен с лучшей производительностью, новыми функциями и интеграцией с внешними системами. Его основные функции также были переписаны на Java.
Библиотека Python с открытым исходным кодом Amazon для AWS Glue
Amazon предоставил открытый исходный код библиотеки Python, известной как Athena Glue Service Logs (AGSlogger), которая упрощает синтаксический анализ форматов журналов в AWS Glue для анализа и предназначена для использования с журналами обслуживания AWS.
Apache Avro добавляет поддержку ZStandard
Доступен Apache Avro 1.9 с обновленным средством чтения JSON, меньшим размером и поддержкой сжатия ZStandard.
Microsoft Graph Data Connect теперь общедоступен
Подключение к данным Microsoft Graph теперь общедоступно. Объявление было сделано на конференции Build этого года. Graph — это унифицированная модель программируемости и API, которые можно использовать для доступа к данным в Office 365, Dynamics 365, Enterprise Mobility and Security, Windows 10 и Azure Active Directory.
Databricks Delta Lake теперь с открытым исходным кодом
На саммите Spark + AI, проходящем на этой неделе в Сан-Франциско, Databricks объявила, что она открыла исходный код своего уровня хранения Delta Lake, который обрабатывает этап, на котором данные переносятся в озеро данных организации.