使用 Integrate.io 分析云上的 Papertrail 日志

barikulislam017

是一项云托管日志管理服务。我们在内部使用它进行调试，并通过在云上的数据集成平台 Integrate.io 上处理日志来吃我们自己的狗粮。您也可以使用Integrate.io来分析和聚合 Papertrail 日志。

在下面的示例中，我们将分析 Papertrail 收集 电话号码清单 的Heroku 日志，以返回各种运行时指标，例如文件大小和日志页数：

如果您尚未使用 Papertrail，注册并配置您的帐户。

Papertrail 自动将日志存储在 Amazon S3 上。请参阅 Papertrail 的文档，了解如何设置连接。

登录您的 Integrate.io 帐户。如果您没有，免费注册。

单击顶部菜单中的“我的包”。

缩略图

单击右上角“新建包”下拉列表旁边的小箭头，然后选择“来自模板”。从两个可用模板中选择所需的 Papertrail 模板（创建包后您将能够对其进行修改）：

Papertrail 日志运行时指标分析 - 我们将使用此模板。

Papertrail Simple Analysis - 按来源对日志记录进行计数。

缩略图

创建包后，单击名为 Events 的源组件：

在源位置下，选择左侧的云存储连接。如果不可用，请创建一个与您的 Amazon S3 账户的新连接。



输入 Amazon S3 上日志的存储桶和路径。

单击上面的绿色测试连接按钮以确保其正常工作。如果没有，请检查连接、存储桶和路径详细信息。

单击右上角的绿色按钮自动检测架构。再次，如果它不起作用，则源位置详细信息可能未正确设置。另外尝试点击旁边的数据预览按钮，看看日志数据是否正常。

缩略图

返回包屏幕，根据您的数据处理需求更改任何组件。例如，打开名为 GetRuntimeMetrics_Only 的过滤器组件，并通过输入 .< 更改正则表达式以匹配包含关键字 done 的日志。 a i=3>完成。（有关使用软件包的更多信息，请参阅帮助部分）。

打开名为“结果”的目标组件，并设置相关连接、存储桶和保存结果的路径。

全部完成！要运行作业，您需要设置集群。请参阅文档了解更多详细信息。