Come posso tenere traccia dell'utilizzo delle mie risorse cloud?

Sto cercando di automatizzare la distribuzione delle mie applicazioni AWS con Jenkins.

In questo momento, se vogliamo aggiornare l'applicazione in uno qualsiasi degli ambienti, diciamo UAT, costruiamo le nostre immagini docker, troviamo l'attività ECS corrente e la aggiorniamo con la nuova immagine, troviamo il cluster ECS in esecuzione e aggiorna le attività.

In generale, quali sono le migliori pratiche per tenere traccia degli ID delle risorse cloud (ID cluster ECS, ID attività ECS, ID EC2, ecc.) Nel proprio ambiente di integrazione continua?

Un uso giudizioso di uno degli strumenti di "orchestrazione" cloud, come Terraform o eventualmente Fuga, sembra essere il modo migliore.

Puoi iniziare in piccolo, scegliere un ambiente meno importante e non molto esteso, decifrarlo attentamente in codice automatizzabile e procedere da lì.

In generale, questo viene chiamato infrastruttura come codice, per google e altre applicazioni multimediali orientate alle parole d'ordine.

Più specificamente, diciamo, se il tuo ambiente fosse descritto nei file HCL di Terraform, avresti richiesto che gli ID fossero esportati come "output" e che potessi operare su quelli provenienti da script / lavori Jenkins / ecc.

Netflix ha presentato il suo metodo per affrontare il problema dell'espansione delle risorse. Hanno creato la Scimmia Janitor che è responsabile della pulizia delle risorse quando è evidente che non vengono utilizzate.

Per tenere traccia delle risorse create in Amazon AWS, generare un registro di controllo e consentire la ricerca nel tempo (e nella cronologia) hanno anche creato Edda . Edda consente di archiviare e cercare tra le risorse AWS.

Si dice che Janitor Monkey potrebbe essere integrato con Edda, ma da allora non hanno pubblicato molte informazioni al riguardo.

Oggi con AWS CloudTrail e AWS Config Rules è possibile ottenere risultati simili senza software di terze parti. Quando furono annunciati Edda e Janitor Monkey (2012-2013) entrambi questi servizi non erano ancora pronti a risolvere questo tipo di problemi.

Con CloudTrail e Config, il tracciamento delle risorse è già in atto. Tutto da fare è scrivere uno script che decida cosa farne andando di tanto in tanto sulla lista.