• 地平线版本:3.7.2/3.4.7
• Laravel 版本:6.17.0
• PHP 版本:7.4.4
• Redis驱动&版本:predis 1.1.1/phpredis 5.2.1
• 数据库驱动程序和版本:-

我们的 Horizo​​n 出现了奇怪的错误。基本上是这样的: - 作业已排队。并开始处理。

• 90 秒后(我们的超时配置值)超时。

• 120 秒后(我们的 retry_after 值)重试作业。

• 重试作业成功。

• 15 分钟或 30 分钟后，原始作业(超时的作业)完成。运行实际作业。

似乎这可能发生在任何类型的工作上。例如，如果排队的是可邮寄的，则用户首先收到一封电子邮件，然后在 15 或 30 分钟后用户收到另一封电子邮件。同一个。

这是我们的配置文件

config/database.php:

'redis' => [
        'client' => env('REDIS_CLIENT', 'predis'),
        'default' => [
            'host' => env('REDIS_HOST', '127.0.0.1'),
            'password' => env('REDIS_PASSWORD', null),
            'port' => env('REDIS_PORT', 6379),
            'database' => 0,
        ],
    ],

config/queue.php:

'redis' => [
    'driver' => 'redis',
    'connection' => 'default',
    'queue' => env('DEFAULT_QUEUE_NAME', 'default'),
    'retry_after' => 120, // 2 minutes
    'block_for' => null,
],

config/horizo​​n.php:

'environments' => [
    'production' => [
        'supervisor-1' => [
            'connection' => env('HORIZON_CONNECTION', 'redis'),
            'queue' => [env('DEFAULT_QUEUE_NAME', 'default')],
            'balance' => 'simple',
            'processes' => 10,
            'tries' => 3,
            'timeout' => 90,
        ],
    ],
]

这是它在 Horizo​​n Dashboard 中的样子

当初始作业超时时。在重试工作时，它在 Recent Jobs 中保持这样。

将近半小时后，它变成了这样:

都是一样的标签，我只是涂黑了名字。

这是我们看到的日志(这里的时间是 UTC)

[2020-04-22 11:24:59][88] 处理:App\Mail\ReservationInformation

[2020-04-22 11:29:00][88] 失败:App\Mail\ReservationInformation

[2020-04-22 11:29:00][88] 处理:App\Mail\ReservationInformation

[2020-04-22 11:56:21][88] 已处理:App\Mail\ReservationInformation

注意:使用 Predis，我们还会看到一些日志，例如 Error while reading line from the server。 [tcp://REDIS_HOST:6379] 但对于 PHPRedis 则没有。

我们尝试了很多不同的组合来消除这个问题。它发生在每一个组合中。所以我们认为它一定与 Horizo​​n 有关。

我们尝试过: - Predis 与 Redis 5 和 Redis 3

• 具有不同read_write_timeout 值的Predis

• PHPRedis 与 Redis 5 和 Redis 3

• 在一台服务器上启用了 THP。因此，我们还尝试了与禁用了 THP 的服务器的所有组合。

• 我们之前使用的是 Laravel 6.11 和 Horizo​​n 3.4.7，然后升级到 Laravel 6.14 和 Horizo​​n 3.7.2

只有一个 Horizo​​n 实例在运行。并且在这个 Horizo​​n 实例中没有处理其他队列。

欢迎提供任何信息或提示来尝试!

最佳答案

对我们来说，这是我们系统中的配置错误。我们使用的是 OpenShift 和 Docker。我们在容器/系统中调整了这些值

net.ipv4.tcp_keepalive_intvl
net.ipv4.tcp_keepalive_probes
net.ipv4.tcp_keepalive_time

现在一切正常。

https://stackoverflow.com/questions/61386640/