AWS Data Engineer (Senior) (Freelancer)

Mactores è l'agente-nativo AWS studio di modernizzazione. La maggior parte dei lavori di modernizzazione non spedisce, sta in piloti, scivola un anno, o atterra a tre volte il bilancio. Esistiamo per spedirlo: sistemi di produzione in esecuzione, pensionati legacy, risultati misurati. La nostra consegna è costruita su Aedeon, la piattaforma di agente costruita dalla società sorella dei fondatori di Mactores, che assorbe il 60-70% ripetitivo del lavoro di fidanzamento, scoperta, mappatura di dipendenza, validazione, generazione di test, che la consulenza tradizionale fattura le ore umane contro. Ingegneri dipendenti dal futuro possiedono il resto: l'architettura, il giudizio e il taglio, nelle date a cui ci impegniamo nel contratto. Questo è un ruolo freelance senior nel nostro pilastro di modernizzazione della piattaforma dati: consolidare e migrare l'infrastruttura dei dati dei clienti su AWS in settimane, non quarti. I clienti vengono da noi dopo che un programma di dati ha bloccato — oleodotti nessuno si fida, magazzini nessuno gestisce nuovi carichi di lavoro su, una modernizzazione che ha prodotto diagrammi anziché sistemi di produzione. Aedeon gestisce la scoperta automatica delle sorgenti, la mappatura degli schemi, l'estrazione del lignaggio e la validazione parallela. Si prende il lavoro che ha bisogno di giudizio di un ingegnere senior: pipeline si basa su EMR e Glue, modelli di dati per Redshift, Snowflake, Athena, e Presto, Airflow orchestrazione, e la risoluzione dei problemi che ottiene un sistema abbastanza stabile da tagliare. Freelance qui significa reale lavoro di consegna su impegni reali — non aumento del personale nel backlog di qualcun altro. Cosa farai? Costruire e mantenere le pipeline di dati su Amazon EMR o Amazon Glue che funzionano in produzione. Modelli di dati di progettazione e query dell'utente finale su Amazon Redshift o Snowflake, Amazon Athena e Presto. Costruire e mantenere l'orchestrazione pipeline con Airflow. Lavora con altri team per comprendere le esigenze dei dati e progettare le soluzioni che li soddisfano. Risoluzione dei problemi e ottimizzazione delle tubazioni e dei modelli di dati fino a quando non si tengono sotto carico reale. Scrivere e mantenere gli script PySpark e SQL per estrarre, trasformare e caricare i dati. Documentare e comunicare le decisioni tecniche al pubblico tecnico e non tecnico. Traccia nuove tecnologie di dati AWS e giudica il loro impatto sui sistemi che gestiamo. Cosa stiamo cercando? Corso di laurea in Informatica, Ingegneria, o un campo correlato.3+ anni di esperienza lavorando con PySpark e SQL.2+ anni di esperienza costruzione e mantenimento di datadotti utilizzando Amazon EMR o Amazon Glue.2+ anni di esperienza con la modellazione dei dati e querying degli utenti finali utilizzando Amazon Redshift o Snowflake, Amazon Athena e Presto.1+ anni di esperienza di costruzione e manutenzione dell'orchestrazione pipeline utilizzando Airflow. Forti capacità di problem solving e risoluzione dei problemi. Ottima capacità di comunicazione e collaborazione. Capacità di lavorare in modo indipendente e all'interno di un ambiente di squadra. Sei preferito se haiAWS Data Analytics Specialty CertificationExperience con la metodologia di sviluppo AgileCome lavoriamo? Dirigiamo un modello indeployed: ingegneri incorporati con i team di consegna, possedere il loro pezzo del risultato, e nave contro le date impegnate. Questo è un coinvolgimento freelance remoto, quindi saremo direttamente sulla forma: si lavora project-by-project all'interno di quel modello, con Aedeon che assorbe lo strato ripetitivo in modo che il tempo fatturato vada a giudizio di ingegneria, non la validazione manuale. Potrai lavorare in modo indipendente, coordinare a stretto contatto con il team di fidanzamento, e il tuo output atterra in sistemi di produzione che i clienti firmano. CompensazioneUlteriori informazioniLa vita a MactoresCi preoccupiamo di creare una cultura che fa una vera differenza nella vita di ogni Mactorian. I nostri 10 Principi di Leadership Core che onorano il processo decisionale, la leadership, la collaborazione e la curiosità guidano come lavoriamo. 1. Sii un passo avanti2. Consegna il best3. Sii grassetto4. Prestare attenzione al dettaglio5. Goditi la sfida6. Essere curiosi e agire7. Prendere la leadership8. Fornire valore10. Siate collaborativiVogliamo leggere ulteriori dettagli sulla cultura del lavoro su https://mactores.com/careersIl percorso per unire il Mactores TeamAt Mactores, il nostro processo di reclutamento è strutturato intorno a tre fasi distinte: Pre-Employment Assessment: A serie di valutazioni della vostra competenza tecnica e idoneità per il ruolo. Intervista manageriale: Il gestore di assunzioni si impegna con voi in più discussioni, 30 minuti a un'ora ciascuna, coprendo competenze tecniche, esperienza pratica, potenziale di leadership e comunicazione. Discussione HR: Durante questa sessione di 30 minuti, avrai l'opportunità di discutere l'offerta e i prossimi passi con un membro del team HR. Mactores offre pari opportunità in tutte le pratiche di lavoro. Non discriminare in base a razza, religione, genere, origine nazionale, età, disabilità, stato civile, stato militare, informazioni genetiche, o qualsiasi altra categoria protetta da leggi federali, statali e locali. Ciò vale per ogni parte del rapporto di lavoro, reclutamento, compensazione, promozioni, trasferimenti, azione disciplinare, licenziamento, formazione e programmi sociali e ricreativi. Nota: Si prega di rispondere quante più domande possibile con questa applicazione per accelerare il processo di assunzione.