отримати всі ключі в пам'яті

Як я можу отримати всі ключі, встановлені в моїх запам'ятовуваних екземплярах?

Я спробував googling, але не знайшов багато, крім того, що PHPпідтримує getAllKeysметод , а це означає, що це реально зробити якось. Як я можу отримати те саме в сесії telnet?

Я випробував усі параметри, пов’язані із пошуком, згадані в складеному аркуші чіт-листів та підсумках команд Memcached telnet , але жоден з них не працює, і я втрачаю можливість знайти правильний спосіб зробити це.

Примітка. Зараз я це роблю в розробці, тому можна припустити, що проблем не буде через встановлення нових клавіш або інших подібних умов перегонів, а кількість ключів також буде обмежена.

Знайшли спосіб завдяки посиланню тут (з оригінальною дискусією в групі Google )

По-перше, Telnetна ваш сервер:

telnet 127.0.0.1 11211

Далі перелічіть елементи, щоб отримати ідентифікатори плит:

статистика елементів
Пункти ДАТ: 3: номер 1
Елементи СТАТ: 3: вік 498 років
Елементи ДАТ: 22: номер 1
Елементи ДЕРЖ: 22: вік 498
Кінець

Перше число після "елементів" - це ідентифікатор планки. Попросити скинути кеш-пам'ять для кожного ідентифікатора плати з обмеженням для максимальної кількості клавіш для скидання:

статистика кешованих 3 100
ITEM views.decorators.cache.cache_header..cc7d9 [6 b; 1256056128 с]
Кінець

статистика кешованих 22 100
ITEM views.decorators.cache.cache_page..8427e [7736 b; 1256056128 с]
Кінець

memdump

Для цієї (частини) команди є memcdump(іноді ), наприклад:memdumplibmemcached-tools

memcdump --servers=localhost

який поверне всі ключі.

memcached-tool

В останній версії memcachedтакож є memcached-toolкоманда, наприклад

memcached-tool localhost:11211 dump | less

який скидає всі ключі та значення.

Дивитися також:

• Який найпростіший спосіб отримати скидання всіх запам’ятованих ключів у файл?
• Як я можу переглянути дані в пам'яті?

Базуйтесь на @mu 無 відповіді тут. Я написав сценарій скидання кешу.

Сценарій скидає весь вміст запам’ятованого сервера. Це тестується з Ubuntu 12.04 і локальним хостом, так що ваш пробіг може відрізнятися.

#!/usr/bin/env bash

echo 'stats items'  \
| nc localhost 11211  \
| grep -oe ':[0-9]*:'  \
| grep -oe '[0-9]*'  \
| sort  \
| uniq  \
| xargs -L1 -I{} bash -c 'echo "stats cachedump {} 1000" | nc localhost 11211'

Що це робить, він проходить через усі кеш-плити та друкує 1000 записів кожного.

Будь ласка, пам’ятайте про певні обмеження цього сценарію, тобто він може не масштабуватися, наприклад, для кеш-сервера 5 Гб. Але це корисно для налагодження на локальній машині.

Якщо у вас встановлено запам'ятоване PHP і PHP, ви можете запустити

$ php -r '$c = new Memcached(); $c->addServer("localhost", 11211); var_dump( $c->getAllKeys() );'

Баш

Щоб отримати список ключів у Bash, виконайте наступні дії.

Спочатку визначте наступну функцію обгортки, щоб спростити її використання (скопіюйте та вставте в оболонку):

function memcmd() {
  exec {memcache}<>/dev/tcp/localhost/11211
  printf "%s\n%s\n" "$*" quit >&${memcache}
  cat <&${memcache}
}

Запам'ятовується 1.4.31 і вище

Ви можете використовувати lru_crawler metadump allкоманду для скидання (більшості) метаданих для (усіх) елементів кешу.

На відміну від cachedump, це не спричиняє серйозних проблем із роботою та не обмежує кількість ключів, які можна скинути.

Приклад команди за допомогою раніше визначеної функції:

memcmd lru_crawler metadump all

Дивіться: Примітки до випуску1431 .

Запам'ятовується 1.4.30 і нижче

Отримайте список плит, використовуючи команду статистики елементів , наприклад:

memcmd stats items

Для кожного класу slub ви можете отримати список елементів, вказавши ідентифікатор slab разом із обмеженим номером ( 0- необмежено):

memcmd stats cachedump 1 0
memcmd stats cachedump 2 0
memcmd stats cachedump 3 0
memcmd stats cachedump 4 0
...

^{Примітка. Це потрібно зробити для кожного згаданих серверів.}

Щоб перелічити всі ключі від усіх заглушок, ось однолінійний (на один сервер):

for id in $(memcmd stats items | grep -o ":[0-9]\+:" | tr -d : | sort -nu); do
    memcmd stats cachedump $id 0
done

^{Примітка. Наведена вище команда може спричинити серйозні проблеми з роботою під час доступу до елементів, тому не рекомендується запускати в прямому ефірі.}

Примітки:

stats cachedump тільки скидає HOT_LRU (IIRC?), яким керується фоновий потік, коли відбувається діяльність. Це означає, що в новій достатній версії, в якій включено алгоритм 2Q, ви отримаєте короткий огляд того, що знаходиться лише в одному з LRU.

Якщо ви хочете переглянути все, lru_crawler metadump 1(або lru_crawler metadump all) - це новий, в основному, офіційно підтримуваний метод, який асинхронно скидає стільки клавіш, скільки вам потрібно. ви вийдете з них, але це стосується всіх LRU, і якщо ви не будете видаляти / замінювати елементи декількома запусками, ви повинні отримати однакові результати.

Джерело: GH-405 .

Пов'язані:

• Перерахуйте всі об'єкти в запам’ятовуваному вигляді
• Написання клієнта Redis в чистому стилі (це Redis, але дуже схожий підхід)
• Перевірте інші доступні команди на https://memcached.org/wiki
• Перегляньте protocol.txtфайл документів.

Найпростіший спосіб - використання пакету python-memcached-stats, https://github.com/abstatic/python-memcached-stats

Метод ключів () повинен змусити вас йти.

Приклад -

from memcached_stats import MemcachedStats
mem = MemcachedStats()

mem.keys()
['key-1',
 'key-2',
 'key-3',
 ... ]