I set di dati RDD (Resilient Distributed Datasets) di Apache Spark sono raccolte di dati di varia natura, dalle dimensioni talmente grandi da non poter rientrare in un unico nodo e che devono pertanto essere ripartiti tra vari nodi. Apache Spark partiziona automaticamente i dati RDD e …
Read Article
Per prima cosa desidero ringraziare tutti i lettori dei miei due blog precedenti dedicati a Talend e Apache Spark. Se non conoscete questa serie di blog e non avete letto i miei post precedenti, potete trovare questi articoli qui “Talend e Apache Spark: manuale tecnico di base” …
Read Article
Nel mio precedente blog, “Talend e Apache Spark: manuale tecnico di base“, vi ho illustrato le analogie tra i job Talend Spark e spark-submit. In questo nuovo blog, continuerò ad analizzare le configurazioni Talend Spark con Apache spark-submit. Per prima cosa, vedremo di fare un parallelo tra …
Read Article
Negli anni trascorsi in Talend come tecnico dell’assistenza, prima di diventare customer success architect, i clienti spesso mi chiedevano informazioni sulle capacità di Talend con Apache Spark. Quando parliamo di Spark, la prima cosa che ci viene in mente è il comando spark-submit che utilizziamo per inviare …
Read Article
Quando si tratta di scegliere un’architettura per big data in tempo reale, oggi le opzioni sono più di una. Il menu offre molto di più della sola opzione Lambda e in questa serie di blog prenderò in esame un paio di queste possibilità, confrontandole sulla base di …
Read Article
Che cos’è un modello di dati? Chi è uno sviluppatore Talend come me, ha quotidianamente a che fare con modelli di dati e crede di sapere di cosa si tratta: Una definizione strutturale dei dati di un sistema aziendale Una rappresentazione grafica dei dati di business …
Read Article
Today’s CIOs are no strangers to the concept of the Enterprise Data Lake. Often times, an enterprise data lake is viewed as a panacea for all a CIO’s data ills, including being viewed as the ‘holy grail’ for those trying to spur digital transformation. Yet many …
Read Article
With the Euro 2016 tournament now drawing to a close, and having two kids of my own in a competitive soccer league, even a French husband; I now live and breathe football (or soccer depending on your frame of reference) almost every single day. Soccer, much …
Read Article
Engineering a big data ingestion pipeline is complicated – if you don’t have the right tools. All data, be it big, little, dark, structured, or unstructured, must be ingested, cleansed, and transformed before insights can be gleaned, a base tenet of the analytics process model. Talend, …
Read Article
In the beginning of ETL…. When I started my IT career over 15 years ago I was nothing more than a “Fresh-out” with a college degree and an interest in computers and programming. At that time, I knew the theories behind the Software Development Life Cycle …
Read Article