jjzjj

Logstash

全部标签

python - 带有 Web 后端的日志存储

我们需要存储来自某些服务的日志,每个日志都有其级别、命名空间(可能是虚线命名空间)、标签(作为列表)、时间戳(日志创建时间)及其内容(作为文本)。我们还需要一个能够显示/搜索/过滤日志及其级别、命名空间和标签的网络后端。有开源系统吗?我更喜欢Go或Python语言。如果不是,对我们来说最好的解决方案是什么?我不知道这个问题对于stackoverflow是否合法。我只是问一个开源解决方案。感谢您阅读本文, 最佳答案 在我看来,我将分析一些我知道的开源日志系统:logstash:您需要kibana或任何相同的Web界面。logstash

twitter - 去建立事件未定义

环境:Windows10Professional64位。我想构建/安装一个go-project(如您所见,twitterbeat)。C:\apps\Go_workspace\src\github.com\buehler\twitterbeat>gobuild#github.com/buehler/twitterbeat/beaterbeater\twitterbeat.go:62:b.Eventsundefined(type*beat.BeathasnofieldormethodEvents)在这里你可以看到文件的第62行:func(bt*Twitterbeat)Setup(b*bea

java - 如何使用 Logstash 在控制台中打印 xml 属性值

这是xml文件,我想在控制台中打印名称属性值“testSuite.DriverScript”。 最佳答案 关于java-如何使用Logstash在控制台中打印xml属性值,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions/34448055/

xml - 无法使用 logstash 过滤器解析 xml 输入

您好,我正在尝试解析以下xml:StartingORACLEinstance(normal)使用这个配置:input{stdin{type=>"stdin-type"}}filter{multiline{pattern=>"^\s||^[A-Za-z].*"what=>"previous"}xml{store_xml=>"false"source=>"message"xpath=>["/msg/@client_id","msg_client_id","/msg/@host_id","msg_host_id","/msg/@host_addr","msg_host_addr","/msg

xml - 在我 CTRL-C 之前,logstash 不打印输出

我设置了logstash来读取XML文件。它确实这样做了,但它不会将输出打印到标准输出,直到我退出应用程序(ctrl+c)。然后打印出它所解释的正确结构:.conf:input{file{path=>"C:/Projects/PythonProjects/SolAdmin/SolAdmin/ClientConnectionsWide_*.xml"start_position=>beginningignore_older=>0sincedb_path=>"C:/Projects/ElasticStack/logstash-2.3.4/logstash-2.3.4/sincedb"code

xml - 如何在 logstash 中解析多行 XML?

我的s3存储桶中有多行XML文件(约800行),我想在Elasticsearch中为它们编制索引,但我无法在logstash中解析它们。字段有时为空,因此无法手动解析文件。我的xml看起来像:050.00`...在我的输入中我有配置:codec=>multiline{pattern=>"next}在我的过滤器中有以下配置:multiline{pattern=>["\t\t"]what=>next} 最佳答案 好的,看来问题是,您对多行编解码器和XML过滤器感到困惑。我可以建议您设置多行吗:codec=>multiline{patte

json - Logstash:从数组到字符串的 XML 到 JSON 输出

我正在尝试使用Logstash将XML转换为JSON以用于ElasticSearch。我能够获取读取的值并将其发送到ElasticSearch。问题是所有值都以数组形式出现。我想让它们只是字符串。我知道我可以为每个字段单独执行replace,但随后我遇到了嵌套字段深度为3层的问题。XMLLocationIdUserIdMyName2015-08-0710.5Logstash配置input{file{path=>"/var/log/logstash/test.xml"}}filter{multiline{pattern=>"^\s\s(\s\s|\)"what=>"previous"}i

xml - Logstash,从多个文档中的 xml 文件拆分事件,保留根标签中的信息

我的问题:我有XML文件,其中包含我想使用Logstash解析的事件,以便之后使用Kibana请求它。我想在每个事件中保留来自ROOT标记的所有信息。输入看起来像:我想要的,像这样的两个文件:{"number":"34""name":"Hey"}{"number":"34""name":"you"}Logstash配置文件:input{stdin{}}filter{xml{store_xml=>"false"source=>"message"target=>"EVENT"xpath=>["/ROOT/@number","number","/ROOT/EVENTLIST/EVENT/@n

windows - 使用 Windows Server 的集中式日志文件

我想为最终用户提供一个Web界面,以便他们有机会仅使用该界面来监控来自不同服务器的日志文件。我找到了这个提案:http://logstash.net/docs/1.3.3/tutorials/getting-started-centralized这个实现过程的例子:http://michael.bouvy.net/blog/en/2013/11/19/collect-visualize-your-logs-logstash-elasticsearch-redis-kibana/据我所知,Redis通常与Linux操作系统兼容。但是我的操作系统是WindowsServers2008。可以

windows - 使用 nxlog 使用 om_ssl 从 Windows 将日志发送到 logstash

我一直在寻找从Windows发送日志的选项,我已经设置了logstash,目前我使用logstash-forwarder和ssl加密将日志从Linux(CentOS)服务器发送到我的ELK堆栈。出于合规原因,加密在此环境中非常重要。我也希望在Windows中使用logstash-forwarder,但是在用Go编译后我遇到了事件日志的问题,我发现有人说这是不可能的,因为文件锁定问题,这是人们似乎正在开发logstash-forwarder,但我真的等不及了。无论如何,最终我发现nxlog似乎能够使用ssl以加密格式传送日志,我找到了一个fewpostsaboutsimilartopic