云服务器

专属服务器_联想万全服务器_便宜的

字号+ 作者:微辰云 来源:微辰云 2021-06-10 13:54 我要评论( )

客户最常问的问题之一是"如何在日志中找到这些内容?"-除了我们的日志查询语言之外,通常还需要使用正则表达式。我们很高兴地宣布,我们最近在查询语言中添加了对正则表达式的支持—现在您可以使用工具和软件中使用的强大语言选择器搜索日志了! 即使在我

专属服务器_联想万全服务器_便宜的

客户最常问的问题之一是"如何在日志中找到这些内容?"-除了我们的日志查询语言之外,通常还需要使用正则表达式。我们很高兴地宣布,我们最近在查询语言中添加了对正则表达式的支持—现在您可以使用工具和软件中使用的强大语言选择器搜索日志了!

即使在我们的文档中有regex支持、常见查询和有用的示例,高效地搜索数PB的结构化或非结构化日志数据也是一门艺术,有时与专家交谈是无可替代的。我们请Dan Jacques,一位负责日志的软件工程负责人,他领导了向日志查询语言添加正则表达式的工作,分享了一些日志工作的背景知识,大数据支持,以及探索日志的技巧和窍门。

你能告诉我一点云日志的存储和查询后端吗?

云日志将日志数据存储在海量的内部时间序列数据库中。它针对处理时间戳数据(如日志)进行了优化,这也是您不需要像其他日志工具那样将旧日志数据交换到冷存储的原因之一。这是同一个数据库软件,如何获得大数据,为谷歌内部服务日志和监控提供动力。数据库的设计考虑到了可扩展性,一站式建站,处理量超过2.5 EB(exabytes!)每月的日志数量,大数据的未来,成千上万的Google用户和Google云用户每天都查询这些日志来完成他们的工作……

你能告诉我你在日志查询语言中添加正则表达式支持的经验吗?

在加入团队之前,我曾多次使用Google云平台和云日志作为Googler,并经历过缺少正则表达式支持作为一个功能缺口。支持正则表达式是我的首要任务。今年早些时候,我得到了一个机会,看看它需要什么。不久之后,我和我的团队开始实施正则表达式支持。

作为一个必须为客户解决问题的人,您能否分享一些技巧和最佳实践,以使日志查询尽可能好地执行?

云日志提供了一个非常灵活的,建站服务,基本上是自由形式的日志结构,以及一个非常强大和宽容的查询语言。这种方法有明显的好处:来自各种各样服务和源的日志数据适合我们的模式,并且您可以使用简单易读的查询符号发出查询。然而,通用性的缺点是,针对每个数据和查询模式进行优化是一个挑战。一般来说,您可以通过尽可能缩小查询的范围来提高性能,这反过来又缩小了我们必须搜索的数据量。以下是一些缩小范围和提高性能的具体想法:

原始搜索:"连接"

特定搜索:

日志ID(stdout)资源类型="k8s\ U集装箱"资源.标签.位置="美国中央1-a"resource.labels.cluster\u名称="测试"resource.labels.namespace\u名称=istio系统""正在连接

转载请注明出处。

1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3.作者投稿可能会经我们编辑修改或补充。

相关文章
  • 谷歌云_云服务器云主机区别_价格

    谷歌云_云服务器云主机区别_价格

    2021-06-10 15:02

  • 域名注册_服务器端口查询_9元

    域名注册_服务器端口查询_9元

    2021-06-10 04:08

  • 域名交易_云服务器防御_促销

    域名交易_云服务器防御_促销

    2021-06-10 02:37

  • 轻量服务器_阿里云备案照片要求_高性价比

    轻量服务器_阿里云备案照片要求_高性价比

    2021-06-09 23:44

网友点评