Как я могу уменьшить задержку моего Redis?

У меня есть простой веб-сценарий для хранения MAC-адреса клиент-сервер с использованием lnmp и Redis на одной машине, API, который я использую, довольно прост, например:

$db->set($client_key, $client_mac);
$db->expire($client_key , 24 * 3600);

Но когда нагрузка высока (мой динамический режим php-fpm разветвляет около 400 дочерних элементов для обработки веб-запросов), я обнаружил, что php-fpms ждут redis-сервера, поэтому вся производительность очень низкая, я не знаю, как для устранения неполадок, так что помогите мне, если можете.

Вы можете видеть, что задержка очень велика: redis-cli --latency

min: 142, max: 535, avg: 303.74 (66 samples)

Когда я пытался остановить свой lnmp, задержка очень быстро падала.

min: 0, max: 136, avg: 16.52 (860 samples)

Моя внутренняя задержка в порядке, я думаю: redis-cli --intrinsic-latency 100

499179439 total runs (avg latency: 0.2003 microseconds / 200.33 nanoseconds per run).

127.0.0.1:6379> SLOWLOG получить

 1) 1) (integer) 154
    2) (integer) 1513766672
    3) (integer) 21172
    4) 1) "SET"
       2) "AP_9whiJGOV3OiNVLp0hjjNSy9E"
       3) "A4:FB:8D:C3:D8:CD"
 2) 1) (integer) 153
    2) (integer) 1513766660
    3) (integer) 18045
    4) 1) "GET"
       2) "CLIENT_cvsgpu88Q4eO5CTF5ybUNJhe"
 3) 1) (integer) 152
    2) (integer) 1513766647
    3) (integer) 20028
    4) 1) "EXPIRE"
       2) "CLIENT_4gHpr4aHxmILzTELJK0Dcv79"
       3) "86400"
 4) 1) (integer) 151
    2) (integer) 1513766624
    3) (integer) 12845
    4) 1) "EXPIRE"
       2) "CLIENT_w1W9gWEyPTzCdEXTeIlw5Asr"
       3) "86400"
 5) 1) (integer) 150
    2) (integer) 1513766570
    3) (integer) 24071
    4) 1) "GET"
       2) "AP_wRcMSNBEsqW9zLesFaXInhiN"

бесплатно -g

              total        used        free      shared  buff/cache   available
Mem:             31           4          11           0          15          25
Swap:            15           0          15

127.0.0.1:6379> информация

# Server
redis_version:3.2.0
redis_git_sha1:00000000
redis_git_dirty:0
redis_build_id:73889ba3761658f4
redis_mode:standalone
os:Linux 3.10.0-514.el7.x86_64 x86_64
arch_bits:64
multiplexing_api:epoll
gcc_version:4.8.5
process_id:14995
run_id:eeec40fcb1e95159d255e77f2f5ef2c27347ff0c
tcp_port:6389
uptime_in_seconds:5496
uptime_in_days:0
hz:10
lru_clock:3820557
executable:/usr/local/redis/bin/redis-server
config_file:/usr/local/redis/etc/redis.conf

# Clients
connected_clients:409
client_longest_output_list:0
client_biggest_input_buf:0
blocked_clients:0

# Memory
used_memory:367481976
used_memory_human:350.46M
used_memory_rss:372391936
used_memory_rss_human:355.14M
used_memory_peak:370264560
used_memory_peak_human:353.11M
total_system_memory:33555197952
total_system_memory_human:31.25G
used_memory_lua:37888
used_memory_lua_human:37.00K
maxmemory:0
maxmemory_human:0B
maxmemory_policy:noeviction
mem_fragmentation_ratio:1.01
mem_allocator:jemalloc-4.0.3

# Persistence
loading:0
rdb_changes_since_last_save:4107050
rdb_bgsave_in_progress:0
rdb_last_save_time:1513764501
rdb_last_bgsave_status:ok
rdb_last_bgsave_time_sec:-1
rdb_current_bgsave_time_sec:-1
aof_enabled:0
aof_rewrite_in_progress:0
aof_rewrite_scheduled:0
aof_last_rewrite_time_sec:-1
aof_current_rewrite_time_sec:-1
aof_last_bgrewrite_status:ok
aof_last_write_status:ok

# Stats
total_connections_received:1275448
total_commands_processed:6172596
instantaneous_ops_per_sec:1116
total_net_input_bytes:372869112
total_net_output_bytes:44716089
instantaneous_input_kbps:65.61
instantaneous_output_kbps:8.22
rejected_connections:0
sync_full:0
sync_partial_ok:0
sync_partial_err:0
expired_keys:0
evicted_keys:0
keyspace_hits:496919
keyspace_misses:293242
pubsub_channels:0
pubsub_patterns:0
latest_fork_usec:0
migrate_cached_sockets:0

# Replication
role:master
connected_slaves:0
master_repl_offset:0
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0

# CPU
used_cpu_sys:394.97
used_cpu_user:130.14
used_cpu_sys_children:0.00
used_cpu_user_children:0.00

Некоторые документы, которые я проверил, предлагают сократить ключ и выбрать другой API, я еще не пробовал, что вы думаете?


person Micr    schedule 20.12.2017    source источник
comment
При чем здесь lnmp?   -  person xRahul    schedule 20.12.2017
comment
lnmp — это Linux + nginx + mysql + php.   -  person Micr    schedule 20.12.2017
comment
Итак, когда вы говорите о задержке после остановки lnmp, вы имеете в виду, что вы остановили демоны nginx и mysql?   -  person xRahul    schedule 20.12.2017
comment
Да, я использую php для получения/установки данных для Redis, поэтому, когда я останавливаю nginx, нет другого процесса, влияющего на Redis-сервер.   -  person Micr    schedule 20.12.2017
comment
Проблема может быть на уровне ОС. Поскольку более 400 дочерних процессов выполняются параллельно, возможно, ваш своп используется из-за нехватки памяти. Посмотрите на снимок ваших ресурсов, когда нагрузка высока.   -  person xRahul    schedule 20.12.2017
comment
Обычно подключение связано с огромными накладными расходами, также убедитесь, что вы закрыли все подключения, когда закончите.   -  person Nigel Ren    schedule 20.12.2017
comment
Я отредактировал вопрос и добавил статистику памяти, я не думаю, что это проблема нехватки памяти.   -  person Micr    schedule 20.12.2017
comment
Не могли бы вы вдвое уменьшить количество необходимых подключений, используя SET $client_key $client_mac EX 86400?   -  person Mark Setchell    schedule 20.12.2017
comment
@Mark Setchell Это помогает, спасибо, но задержка все еще высока, я пытаюсь запустить несколько redis-серверов на сервере ...   -  person Micr    schedule 21.12.2017


Ответы (1)


Я запускаю несколько серверов redis и использую nginx для балансировки нагрузки, но между ними и решил эту проблему, всем спасибо!

person Micr    schedule 23.12.2017