Inizia a utilizzare Spark Streaming oggi stesso
Sfrutta il potenziale dell'analisi in tempo reale e dell’integrazione IoT grazie alla potenza di Spark Streaming e dell’apprendimento automatico. Le funzioni d’integrazione di Talend Real-Time Big Data generano codice nativo che può essere implementato on-premise, nel tuo cloud o nel cloud gestito da Talend per iniziare subito a lavorare con Apache Spark, Spark MLlib e Spark Streaming.
Real-Time Big Data Platform Funzionalità
Licenza
- Licenza di abbonamento con garanzia e indennizzo
Strumenti di progettazione e produttività
- Generazione di codice nativo per Spark Streaming
- Mappatura visuale per dati XML e EDI complessi su Spark
- Tool di progettazione Spark e MapReduce
- Generazione di codice nativo in batch per MapReduce e Spark
- Job Scheduler di Hadoop con YARN
- Sicurezza Kerberos per Hadoop
- Inserimento, caricamento e scaricamento di dati in un data lake
- Messaggistica aziendale (JMS, ActiveMQ, AMQP)
- Tool di sviluppo basati su Eclipse e Job Designer
- Collaborazione in team con repository condiviso
- Integrazione continua / rilascio continuo
- Controllo, comparazione dei processi, analisi di impatto, verifica, debug e ottimizzazione
- Metadata Bridge per l’importazione/esportazione e la gestione centralizzata dei metadati
- Distant Run e parallelizzazione
- Schema dinamico, joblet riutilizzabili e progetti di riferimento
- Gestione del repository
- Supporto ETL ed ELT
- Procedure guidate e visualizzatore di dati interattivo
- Controllo delle versioni
- Change data capture (CDC)
- Sistema Drools di gestione delle regole di business
- Documentazione automatica
Qualità dei dati e governance
- Analisi e profilazione dei dati con diagrammi grafici e drill-down
- Risoluzione automatica degli errori di qualità dei dati e imposizione di regole
- Pulizia e mascheramento dei dati
- Portale per la qualità dei dati con monitoraggio, report e dashboard
- Ricerca semantica con rilevamento automatico di pattern
- Survivorship completa
- Campionamento dei dati
- Arricchimento, armonizzazione, fuzzy matching e deduplicazione
Connettori
- Cloud: Amazon Web Services (AWS), Microsoft Azure, Google Cloud Platform e molti altri
- Distribuzioni Big Data supportate: Amazon EMR, Azure HDInsight, Cloudera, Google Dataproc, Hortonworks, MapR
- Spark MLlib (classificazione, clustering, raccomandazione, regressione)
- NoSQL: Cassandra, Couchbase, DynamoDB, MongoDB, Neo4j e molti altri
- Componenti di messaggistica ad alta velocità (Kafka, Kinesis, Flume)
- RDBMS: Oracle, Teradata, Microsoft SQL Server e molti altri
- SaaS: Marketo, Salesforce, NetSuite e molti altri
- Pacchetti di applicazioni: SAP, Microsoft Dynamics, Sugar CRM e molti altri
- Tecnologie: Dropbox, Box, SMTP, FTP/SFTP, LDAP e molte altre
- Servizi esterni opzionali di convalida degli indirizzi
Componenti
- Componenti Hadoop: HDFS, Hbase, Hive, Pig, Sqoop
- Gestione file senza script: apertura, spostamento, compressione e decompressione
- Controllo e orchestrazione di flussi e integrazioni di dati con processi master
- Mapper, agréger, trier, enrichir et fusionner les données”,Composants
- Supporto standard: REST, SOAP, OpenID Connect, OAuth, SAML, STS, WSDL, SWAGGER e molti altri
- Trasporti/protocolli supportati: HTTP, JMS, MQTT, AMQP, UDP, Apache Kafka, WebSphere MQ e molti altri
- Modelli di integrazione aziendale per mediazione dei servizi, instradamento e messaggistica”,Componenti
Preparazione e stewardship dei dati
- Importazione, esportazione e combinazione di dati da qualsiasi database e file Excel o CSV
- Importazione, esportazione e combinazione di file CSV, Parquet e AVRO da/verso Hadoop
- Esportazione in Tableau
- Accesso self-service on demand a set di dati approvati
- Condivisione di dati preparati e set di dati
- Operazionalizzazione dei dati preparati in qualsiasi flusso di integrazione big data e cloud
- Preparazioni di dati su Apache Beam (versione software scaricabile)
- Rilevamento automatico, profilazione, suggerimenti intelligenti e visualizzazione dei dati
- Rilevamento e profilazione automatici di tipi semantici personalizzati
- Campionamento intelligente e selettivo
- Tracciamento e mascheramento dei dati con sicurezza basata sui ruoli
- Funzioni di pulizia e arricchimento
- Applicazione Data Stewardship per la gestione e certificazione dei dati
Gestione e monitoraggio
- Alta disponibilità, bilanciamento del carico, failover per i processi
- Gestione implementazione e collaborazione in team
- Gestione di utenti, gruppi, ruoli, progetti e licenze
- Controllo del ciclo di vita su Amazon EC2
- Piano di esecuzione, scheduler basato su tempi/eventi
- Punti di controllo, recupero da errori
- Gestione del contesto (sviluppo, QC, prod.)
- Monitoraggio delle attività
- Server di log con dashboard
Qualità dei Big Data
- Apprendimento automatico per la comparazione e deduplicazione dei dati
- Supporto per Cloudera Navigator e Apache Atlas
- Profiling di file HDFS
Gestione ESB
- Monitoraggio JMX, monitoraggio delle attività dei servizi
- Monitoraggio del sistema
- Visibilità nelle statistiche in diretta sull’attività del flusso di messaggi
- Repository degli artefatti integrato
- Servizio di log degli eventi centralizzato, servizio di provisioning
- Plug-in HypericHQ
- Job conductor
- Gestione e autorizzazione delle identità
- Alta disponibilità dei servizi Web
Agile integrazione delle applicazioni
- Sicurezza dei servizi Web basata su WS-Policy
- Consegna e instradamento di messaggi ed eventi basata su modelli di integrazione aziendale (EIP)
- Service locator e registro dei servizi
- Creazione, mediazione e simulazione di servizi
- Strumenti di script e a riga di comando
- Specifiche di gestione chiavi XML (XKMS)
Pacchetto ESB e implementazione
- Flessibilità dei contenitori per distribuzioni ESB
- Pacchetto OSGI implementato in Talend Runtime
- Pacchetti Spring Boot utilizzati come microservizio
Profilazione avanzata dei dati
- Rilevamento di modelli di frodi secondo la legge di Benford
- Analisi di set di colonne
- Analisi di corrispondenza avanzate
- Analisi di correlazione di colonne temporali
Talend nominata Leader.
Siamo stati nominati Leader nel Forrester Wave™: Big Data Fabric, Q2 2018. Abbiamo ricevuto i punteggi più alti nelle categorie Current Offering e Strategy tra i fornitori esaminati nel report.
Accelera il passaggio al real-time
Converti un processo di integrazione in batch esistente in una procedura in tempo reale con pochi e semplici clic, senza dover imparare il codice Spark. Talend Studio dispone di oltre 900 connettori e componenti preinstallati, tra cui più di 100 componenti Spark. Inizia a lavorare con Hadoop, cloud SaaS e storage, database e NoSQL.
Guarda:
Esegui progetti Big Data in tempo reale su vasta scala
Solo Talend sfrutta appieno Spark, Spark Streaming, Hadoop, NoSQL e il cloud generando codice nativo. Inserisci, elabora, arricchisci e pulisci i dati nel tuo framework big data per usufruire di tutta la sua potenza e scalabilità, sia in locale che nel cloud. Trasferisci i dati direttamente nel tuo data lake usando Apache Kafka, Amazon Kinesis, Google Pub/Sub e molto altro come parte della piattaforma in tempo reale.
Guarda:
Sfrutta il potenziale dell’analisi IoT
Talend Real-Time Big Data è una piattaforma di integrazione end-to-end che utilizza l’elaborazione in-memory di Spark e componenti di apprendimento automatico. Cattura e distribuisci milioni di eventi al secondo con la connettività IoT e la messaggistica ad alta velocità. Acquisisci, processa e trasmetti istantaneamente informazioni essenziali ad applicazioni in tempo reale e archivi di dati NoSQL.
Scarica:
Riduci il TCO con Talend Cloud
Progetta flussi di integrazione big data cloud-to-cloud, on-premise o ibridi in Talend Studio, quindi implementa e gestisci questi flussi attraverso una piattaforma cloud sicura e altamente scalabile. Crea velocemente pipeline di dati portabili per integrare tecnologie da AWS, Azure, Snowflake, Cloudera, Google Cloud Platform, MapR o Hortonworks. Con il servizio cloud gestito di Talend non devi preoccuparti di aggiornamenti, failover o ripristini d'emergenza.
Altri vantaggi
Self-Service e Governance Collaborativa
Data Quality
Data Preparation
Data Stewardship
