ottenere tutte le chiavi impostate in memcached

Come posso ottenere tutte le chiavi impostate nelle mie istanze memcached?

Ho provato a cercare su Google, ma non ho trovato molto, tranne che PHPsupporta un getAllKeysmetodo , il che significa che in realtà è possibile farlo in qualche modo. Come posso ottenere lo stesso in una sessione telnet?

Ho provato tutte le opzioni relative al recupero menzionate nel cheat sheet memcached e nel riepilogo dei comandi telc Memcached , ma nessuna di esse funziona e non riesco a trovare il modo corretto per farlo.

Nota: lo sto facendo attualmente in fase di sviluppo, quindi si può presumere che non ci saranno problemi dovuti all'impostazione di nuove chiavi o ad altre condizioni di gara simili, e anche il numero di chiavi sarà limitato.

Ho trovato un modo, grazie al link qui (con la discussione del gruppo google originale qui )

Innanzitutto, Telnetal tuo server:

telnet 127.0.0.1 11211

Quindi, elenca gli elementi per ottenere gli ID del solaio:

articoli stats
Voci STAT: 3: numero 1
Articoli STAT: 3: età 498
Voci STAT: 22: numero 1
Articoli STAT: 22: età 498
FINE

Il primo numero dopo "articoli" è l'ID del solaio. Richiedi un dump della cache per ogni ID slab, con un limite per il numero massimo di chiavi da scaricare:

stats memorizzato nella cache 3 100
ITEM views.decorators.cache.cache_header..cc7d9 [6 b; 1256056128 s]
FINE

stats memorizzato nella cache 22 100
ITEM views.decorators.cache.cache_page..8427e [7736 b; 1256056128 s]
FINE

memdump

C'è un comando memcdump(a volte memdump) per quello (parte di libmemcached-tools), ad esempio:

memcdump --servers=localhost

che restituirà tutte le chiavi.

memcached-tool

Nella versione recente di memcachedc'è anche il memcached-toolcomando, ad es

memcached-tool localhost:11211 dump | less

che scarica tutte le chiavi e i valori.

Guarda anche:

• Qual è il modo più semplice per ottenere un dump di tutte le chiavi memorizzate in un file?
• Come posso visualizzare i dati in memcache?

Basati su @mu 無 rispondi qui. Ho scritto uno script di dump della cache.

Lo script scarica tutto il contenuto di un server memcached. È testato con Ubuntu 12.04 e un localhost memcached, quindi il tuo chilometraggio può variare.

#!/usr/bin/env bash

echo 'stats items'  \
| nc localhost 11211  \
| grep -oe ':[0-9]*:'  \
| grep -oe '[0-9]*'  \
| sort  \
| uniq  \
| xargs -L1 -I{} bash -c 'echo "stats cachedump {} 1000" | nc localhost 11211'

Ciò che fa, passa attraverso tutte le lastre della cache e stampa 1000 voci di ciascuna.

Si prega di essere consapevoli di alcuni limiti di questo script, ad esempio potrebbe non adattarsi a un server cache da 5 GB, ad esempio. Ma è utile per scopi di debug su un computer locale.

Se hai PHP e PHP-memcached installati, puoi eseguirlo

$ php -r '$c = new Memcached(); $c->addServer("localhost", 11211); var_dump( $c->getAllKeys() );'

bash

Per ottenere un elenco di chiavi in ​​Bash, attenersi alla seguente procedura.

Innanzitutto, definisci la seguente funzione wrapper per renderla semplice da usare (copia e incolla nella shell):

function memcmd() {
  exec {memcache}<>/dev/tcp/localhost/11211
  printf "%s\n%s\n" "$*" quit >&${memcache}
  cat <&${memcache}
}

Memcached 1.4.31 e versioni successive

È possibile utilizzare il lru_crawler metadump allcomando per scaricare (la maggior parte) dei metadati per (tutti) gli elementi nella cache.

Al contrario cachedump, non causa gravi problemi di prestazioni e non ha limiti sulla quantità di chiavi che è possibile scaricare.

Esempio di comando utilizzando la funzione precedentemente definita:

memcmd lru_crawler metadump all

Vedi: ReleaseNotes1431 .

Memcached 1.4.30 e precedenti

Ottieni un elenco di lastre utilizzando il comando statistiche articoli , ad esempio:

memcmd stats items

Per ogni classe slub, puoi ottenere un elenco di elementi specificando l'id slub insieme al numero limite ( 0- illimitato):

memcmd stats cachedump 1 0
memcmd stats cachedump 2 0
memcmd stats cachedump 3 0
memcmd stats cachedump 4 0
...

^{Nota: è necessario eseguire questa operazione per ciascun server memcached.}

Per elencare tutte le chiavi di tutti gli stub, ecco il one-liner (per un server):

for id in $(memcmd stats items | grep -o ":[0-9]\+:" | tr -d : | sort -nu); do
    memcmd stats cachedump $id 0
done

^{Nota: il comando sopra potrebbe causare gravi problemi di prestazioni durante l'accesso agli elementi, quindi non è consigliabile eseguire in diretta.}

Appunti:

stats cachedumpesegue il dump di solo HOT_LRU(IIRC?), che viene gestito da un thread in background quando si verifica l'attività. Ciò significa che con una versione abbastanza nuova abilitata dall'algoritmo 2Q, otterrai una vista istantanea di ciò che è in una delle LRU.

Se vuoi vedere tutto, lru_crawler metadump 1(o lru_crawler metadump all) è il nuovo metodo per lo più supportato ufficialmente che scaricherà in modo asincrono tutte le chiavi che vuoi. li toglierai dall'ordine ma colpirà tutti gli LRU e, a meno che tu non stia eliminando / sostituendo gli articoli, più esecuzioni dovrebbero produrre gli stessi risultati.

Fonte: GH-405 .

Relazionato:

• Elencare tutti gli oggetti in memcached
• Scrivere un client Redis in puro bash (è Redis, ma approccio molto simile)
• Controlla altri comandi disponibili su https://memcached.org/wiki
• Dai un'occhiata al protocol.txtfile docs.

Il modo più semplice è usare il pacchetto python-memcached-stats, https://github.com/abstatic/python-memcached-stats

Il metodo keys () dovrebbe iniziare.

Esempio -

from memcached_stats import MemcachedStats
mem = MemcachedStats()

mem.keys()
['key-1',
 'key-2',
 'key-3',
 ... ]