Dans notre dernier article, nous avons évoqué le développement de jobs de traitement de données à l’aide d’Apache Beam. Nous abordons dans cet article l’une des questions les plus fréquentes du monde des big data modernes : le traitement des données en streaming. La principale différence entre le traitem...

Dans mon article précédent, « Talend et Apache Spark : Introduction technique », je vous ai expliqué l'équivalence entre les jobs Spark Talend et la commande Spark submit. Dans cet article, je souhaite continuer à évaluer les configurations Spark Talend et la commande Apache Spark submit. Nous allons tout d'abord voir comment vous pouvez mapper les options de l'onglet Spark Configuration (Configuration Spark) dans le...

Plusieurs options sont désormais disponibles en matière d'architecture big data en temps réel. L'architecture Lambda n'est plus la seule possibilité. Dans cette série d'articles, je vous présente deux de ces architectures, dont Lambda, et je vous propose un comparatif s'appuyant sur des cas d'utilisation concrets. Vous souhaitez savoir comment sélectionner la bonne architecture pour votre projet en temps réel ? C'est parti. Les exigences du traitement en temps réel...

With the Euro 2016 tournament now drawing to a close, and having two kids of my own in a competitive soccer league, even a French husband; I now live and breathe football (or soccer depending on your frame of reference) almost every single day. Soccer, much like today’s businesses, has begun to embrace the world of big data. The key method of judging how well a player or team will perform throughout the course of a game or even throughout the season is beginning to sh...

Nous sommes entrés dans l’ère de l’économie de l’information, une ère où les données sont devenues l’actif le plus précieux de toute société. Les organisations les plus performantes les utilisent pour accroitre leur revenu, apporter plus de valeur à leurs clients, optimiser les processus et innover en intégrant une dimension numérique à leur produits et services. Désormais, les organisations ne peuvent plus se passer de données précises et pertinentes pour prendre le...

  February is here and it seems that everyone has made their predictions (even me!) for what’s ahead for technology in 2016. As I read through the various predictions lists, I started discovering a common theme: the inclusion of real-time data initiatives as a main priority for IT. Real-time streaming data and analyt...

Hadoop and the broader Big Data ecosystem continue to innovate at an incredible rate. By harnessing the power of the community and creating a survival-of-the-fittest competitive landscape, the open-source development approach helps not only fuel the pace of innovation but also drive buyer confidence and market adoption. Open source is also important to a growing number of developers who are moving away from proprietary software looking for greater efficiency...

Tags: big data, benchmark, talend, informatica,   Talend vs Informatica – Benchmark Big Data Si vous avez déjà dialogué avec un commercial Talend ou lu certains documents mark...

Tags: talend 6, apache spark, spark streaming, real-time big data, #talend6awakens,   L'analytique en temps réel des Big Data...

Hadoop's Big Data processing platforms feature two integration modes that correspond to different types of usage, but are being used interchangeably with increasing frequency. "Batch" or "asynchronous" mode enables the programming of typically overnight processing. Examples of using batch mode include a bank branch integrating the day's deposits into its books, a distributor using or updating a...