Google вывел сервис Cloud DataFlow из беты

Специалисты Google удалили метку «бета» в Cloud DataFlow, своем управляемом облачном сервисе и модели программирования для обработки потоковых и пакетных big data, и сделали его общедоступным.

«Cloud Dataflow предназначен для облегчения разработки источников данных отдельными системами потоковой и пакетной обработки, обеспечивая унифицированную модель программирования», - говорится в блоге Google Cloud Platform. - «Основываясь на более чем десяти годах инноваций Google, в том числе MapReduce, FlumeJava и Millwheel, сервис Cloud Dataflow создан, чтобы освободить вас от сложностей, связанных с управлением и оптимизацией большого объема данных».

Сервис призван улучшить управляемость, отказоустойчивость, доступность и представление обработки big data.

Динамическая балансировка в Cloud Dataflow эффективно оптимизирует использование ресурсов, что обеспечивает дополнительный прирост производительности, не требуя ручного вмешательства.

Кроме того, Google расширил список партнеров, добавив в него Tamr, Salesforce, Clearstory, springML, Cloudera, data Artisans.

Cloud Dataflow также включает в себя нативную интеграцию облачной платформы для Cloud Storage, Cloud Datastore, BigQuery и Cloud Pub/Sub.

Разработчики Google также сделали общедоступным функционал Cloud Pub/Sub, предназначенный для интеграции приложений и сервисов с последующим анализом потоков данных в реальном времени.

В сентябре 2014 года Google открыл для просмотра балансировку нагрузки HTTP для своей облачной платформы всем клиентам. Несколькими месяцами ранее балансировка была доступна лишь некоторым подписавшимся клиентам.

В декабре того же года Google получил расширенную поддержку Windows для Cloud Platform.