Cloudflare log explorer
Chapitres
- 10:00Introduction à Log Explorer
- 20:15Architecture classique de protection
- 30:43Le système de Log Push
- 41:50Présentation de Cloudflare Log Explorer
- 52:45Interface Security Analytics
- 63:15Comprendre les sampled logs
- 73:48Analyse avec SQL et datasets
- 84:37Configuration des datasets et filtres
- 95:37Conclusion et avantages du produit
Stockez les logs de manière exhaustive sur Cloudflare.
Transcription
bonjour antoine solution engineer chez cloudflare je vais vous montrer dans cette vidéo le produit log explorer le problème qu'on essaie de résoudre et son fonctionnement sur la partie protection des applications on retrouve souvent ce genre de setup où je protège une application ici myapp.com il y a son origine chez un hyperscaler chez un aws chez un google cloud chez un obh autre chose donc on utilise le cloudflare waaf pour protéger des injections on utilise aussi le cache pour accélérer et rendre l'application plus résiliente mais on va avoir besoin de sortir des logs pour la partie log on peut avoir par exemple l'utilisation d'un système comme datadog donc l'idée ce que qu'on voit souvent c'est des clients qui vont envoyer les logs de cloudflare vers un datadog vers une stack elastic search kibana logstash ce genre de choses qui permet lorsque il y a par exemple quelque chose qui est bloqué côté cloudflare ok vous voulez des statistiques que cloudflare puisse envoyer voilà toutes les informations dans votre centralisation là où vous centralisez toutes les données mais aussi bas les logs les logs d'accès puisque si c'est cloudflare qui répond ici au niveau du cache tous les logs qui existent côté origine ne vous informeront pas puisque c'est cloudflare qui va répondre donc ce système ici est appelé log push que vous avez avec un plan enterprise mais cloudflare propose aussi de stocker l'intégralité des logs et des datasets sur cloudflare directement et pouvoir les requêter avec le produit log explorer donc l'idée c'est de se passer d'un datadog ou autre et d'avoir en fait directement sur cloudflare l'ensemble des logs all the logs directement sur cloudflare donc qui sont alimentés par le wav par le cache par différents mécanismes et donc tous ces logs sont requêtables via un système qu'on appelle cloudflare cloudflare log explorer on va aller dans l'interface et je vais vous montrer comment ça fonctionne alors me voilà dans l'interface cloudflare dans la partie security analytics et on peut voir je vais par exemple zoomer sur ce pic en particulier voilà j'ai des statistiques des metrics sur qui un qui a fait quoi et puis j'ai aussi des logs avec le détail de chaque requête mais ce qui est important de garder en tête c'est que ici les logs que l'on a sont des logs qui sont samplés sampled logs donc c'est à dire qu'on va pas l'ensemble des logs côté un côté cloudflare et pour avoir tous les logs il faut soit les pousser vers un système extérieur à les mettre par exemple dans cloudflare r2 mais ce qui est intéressant c'est d'utiliser le système de log explorer donc par exemple ici je peux aller voir tous ces logs dans log explorer si je vais cliquer sur view in log explorer et lorsqu'on a cette fonctionnalité installée et active sur l'application je vais pouvoir en fait aller chercher dans mes dans mes data sets ok avec du sql par exemple et aller faire des recherches faire de l'analyse sur quels sont et quelles requêtes j'ai reçu par qui quels ont été les incidents ce genre de choses et là je me retrouve avec l'entièreté des données donc là j'avais déjà une query mais on peut aller en créer une ok et là je peux choisir donc là j'ai deux data set enregistré le http request et le log dns je vais pouvoir afficher certaines colonnes par exemple je vais pouvoir aussi faire des filtres voilà si je me retrouve avec ma query et je peux aller par exemple chercher plus spécifiquement sur un range donc le fait de sélectionner va d'aider le range ici voilà une query et je vais avoir la possibilité d'ajouter des nouveaux data sets à mon à mon log explorer par exemple ici hop firewall event et comme je le ferai avec le push je peux sélectionner ce que je souhaite garder ici je sélectionne tout donc le système de log explorer vous permet de vous affranchir d'un outil d'indexation des logs externe et d'avoir tout uniquement dans clavier spectre vidéo vous a été utile et à très vite or