architecture for big data

Question 1

design pattern, tipi di dati/sistemi, etl, cdc intrusive sul database

Question 2

architetture sw, correlazione architettura reale- architettura sw

Answer 2

definizione, concetti di stile ( con anche problemi di erosione e drift) viste e materiali (guardo)

Question 3

piloni delle sw architecture

Answer 3

7 magici punti (o qualcosa del genere)

Question 4

perchè usare un fs per salvare i log, tecniche di CDC legate ai log/applicative, confrontare 2 versioni diverse di db

Question 5

adoope, adoope fs, elementi, struttura, procedure

Answer 5

oltre a cose classiche proprietà che si vuole il sistema garantisca, name node come single point of failure, scrittura distribuita su + file, l’utilizzo di journaling manager

Question 6

apache spark (elementi architetturali), resilient distributed ds,hash system, politica lazy, operazioni

Question 7

funzionamento ripartizoine dei task, esecuzoine di azioni sul cluster, funzionamento reduce

Question 8

procedimento totale di esecuzione task, docker

Question 9

utilizzo tipico apache spark

Question 10

dataframe in spark, passaggio spark -> sqldb, composizione sql db