Pour Hortonworks, une plate-forme comme Data flow doit pouvoir collecter toutes les données en mouvement que ce soit en flux ou par streaming pour qu’ils soient analysés. La version 3.1 est en droite ligne dans cette vision.
Une gestion des flux améliorée
Les améliorations dans la version 3.1 portent principalement sur la gestion des flux avec l’intégration de la dernière version de NiFi, la 1.5, qui comprend un nouveau module, le Registry, qui facilite la virtualisation du flux NiFi permettant un contrôle du flux plus fin.
Les composants NiFi voient aussi une meilleure intégration avec d’autres services de la plate-forme comme Apache Atlas, Hortonworks SmartSense, Apache Ranger et Apache Knox.
De nouvelles fonctions pour le streaming
Les nouvelles fonctions pour le streaming visent à simplifier la tâche des développeurs et des équipes DevOps dans l’entreprise. Les principales nouvelles fonctions sont :
- Le support de Kafka 1.0 avec une intégration avec les services de HDF.
- Le support d’Ambari pour Kafka 1.0.
- De nouveaux processeurs NiFi et SAM (Streaming Analytics Manager) pour Kafka 1.0.
- De nouveaux modules de tests et des outils pour DevOps dans SAM.
Les nouveautés de la version 3.1 d'HDF.