Interroger les logs CloudWatch avec Athena

• Les limites de CloudWatch Logs

  • Même avec Logs Insights, certains problèmes restent difficiles à résoudre

• Tentative d’interroger CloudWatch Logs avec Athena Federated Query

  • les requêtes prennent beaucoup trop de temps

  • et le troubleshooting est difficile à cause de logs d’erreur peu explicites et d’une documentation peu aidante

• Finalement, retour à la méthode classique : déchargement vers S3 avec Firehose, puis interrogation avec Athena

  • Points pris en compte dans cette approche

    • Firehose dynamic partitioning

    • Athena partition projection

    • taille du buffer et intervalle de Firehose

  • Points d’attention

    • limite du nombre de subscription filters CloudWatch Logs

    • format des logs

    • coût

• IaC

  • Terraformisation du DDL de table Athena

[toughrogrammer]

J’ai utilisé une liste à puces à plusieurs niveaux, mais la mise en forme se casse… J’ai essayé les deux, whitespace et tab, mais c’est pareil, donc je l’ai laissée telle quelle pour l’instant. Merci de votre compréhension.

[xguru]

Ah, ce n’est pas possible pour le moment. Nous ajouterons la prise en charge de Markdown plus tard, donc merci de patienter un peu~

[toughrogrammer]

Oh, j’ai hâte ! Merci toujours, j’utilise votre service avec beaucoup de satisfaction.

[toughrogrammer]

J’ai voulu réessayer une fois après avoir ajouté un commentaire, mais il semble impossible de supprimer le billet. Apparemment, on ne peut pas supprimer un billet s’il a des commentaires.