NorthStar 分析原始和聚合数据保留

间隔（收集-清理）

要进行修改，请使用命令 set northstar system scheduler tasks collection-cleanup interval 。

控制收集清理系统任务的运行频率（以“d”或“天”表示的天数）。示例：1 天、4 天。此任务执行 collector-utils.py 脚本来清理旧日志。默认值为一天 （1d）。要禁用集合清理，请将值设置为 0d。

collector-utils.py 脚本大约在凌晨 1：00（NorthStar 服务器时间）运行。

collector-utils.py 脚本使用 Elasticsearch API 清理“旧”数据，如下所示：

• 早于 raw-data-retention-duration 参数值的原始数据日志将被清除。

• 早于 rollup-data-retention-duration 参数值的每小时聚合数据日志将被清除。

从 NorthStar 服务器调用收集清理任务。您可以通过导航到 Administration > Task Scheduler来查看（但不能修改）清理任务。

原始数据保留持续时间

要进行修改，请使用命令 set northstar system scheduler tasks collection-cleanup raw-data-retention-duration 。

定义被视为原始数据“旧”日志的内容（以天数为单位）。单位可以输入为“d”或“天”。默认值为 14 天（14 天或 14 天），这意味着原始数据日志在 Elasticsearch 中保留 14 天。要禁用原始数据日志的保留，请将该值设置为 0d。

rollup-data-retention-duration

要进行修改，请使用命令 set northstar system scheduler tasks collection-cleanup rollup-data-retention-duration 。

定义何项数据被视为“旧”聚合数据（以天数为单位）。单位可以输入为“d”或“天”。默认值为 180 天（180 天或 180 天），这意味着每小时的聚合数据在 Elasticsearch 中保留 180 天。要禁用聚合数据的保留，请将该值设置为 0d。

间隔（汇总）

要进行修改，请使用命令 set northstar system scheduler tasks rollup interval 。

设置 ESRollup 系统任务的运行频率（以小时为单位）。单位可以输入为“h”或“小时”。ESRollup 系统任务执行 esrollup.py 脚本来聚合前一个间隔的数据。默认值为 1 小时（1 小时或 1 小时）。

esrollup.py 脚本使用 Elasticsearch API 来执行数据聚合。

从 NorthStar 服务器调用 ESRollup 任务。您可以通过导航到 Administration > Task Scheduler来查看（但不能修改）汇总任务。

禁用汇总查询

如果设置，则禁用每小时聚合数据的汇总查询功能。

rollup-query-cutoff-interval

如果设置，并且请求的时间范围大于 rollup-query-cutoff-interval from now，则查询使用汇总索引来搜索数据。