Come decomprimere i file jsonlz4 (backup dei segnalibri di Firefox) utilizzando la riga di comando?

Sembra che ci siano vari modi specifici di JavaScript + per decomprimere questo browser, ma non c'è modo di trasformare i file jsonlz4 in qualcosa che unlz4verrà letto?

Sono stato in grado di decomprimere jsonlz4 utilizzando lz4json:

apt-get install liblz4-dev
git clone https://github.com/andikleen/lz4json.git
cd lz4json
make
./lz4jsoncat ~/.mozilla/firefox/*/bookmarkbackups/*.jsonlz4

Salvare questo script in un file, ad esempio mozlz4:

#!/usr/bin/env python
from sys import stdin, stdout, argv, stderr
import os
try:
    import lz4.block as lz4
except ImportError:
    import lz4

stdin = os.fdopen(stdin.fileno(), 'rb')
stdout = os.fdopen(stdout.fileno(), 'wb')

if argv[1:] == ['-c']:
    stdout.write(b'mozLz40\0' + lz4.compress(stdin.read()))
elif argv[1:] == ['-d']:
    assert stdin.read(8) == b'mozLz40\0'
    stdout.write(lz4.decompress(stdin.read()))
else:
    stderr.write('Usage: %s -c|-d < infile > outfile\n' % argv[0])
    stderr.write('Compress or decompress Mozilla-flavor LZ4 files.\n\n')
    stderr.write('Examples:\n')
    stderr.write('\t%s -d < infile.json.mozlz4 > outfile.json\n' % argv[0])
    stderr.write('\t%s -c < infile.json > outfile.json.mozlz4\n' % argv[0])
    exit(1)

In realtà quasi tutti i file lz4 del profilo Firefox sono file mozlz4 . Significa che hanno la stessa "intestazione del formato file". Tranne un file. Parlo di webext.sc.lz4 file. Ha mozJSSCLz40v001\0un'intestazione di file e forse alcuni scpacchetti per comprimere un gruppo di file sul flusso di byte.

Esiste un componente aggiuntivo di Firefox per leggere o comprimere i file di testo .mozlz4 mozlz4-edit

Googling sufficientemente persistente per questo presenta molte soluzioni, ma la maggior parte di esse sembra essere (a) interrotta da successive modifiche alle librerie sottostanti, o (b) inutilmente complessa (almeno per i miei gusti personali), rendendole ingombranti a rilasciare nel codice esistente.

Quanto segue sembra funzionare almeno su Python 2.7 e 3.6 usando una versione recente dei collegamenti Python LZ4 :

def mozlz4_to_text(filepath):
    # Given the path to a "mozlz4", "jsonlz4", "baklz4" etc. file, 
    # return the uncompressed text.
    import lz4.block
    bytestream = open(filepath, "rb")
    bytestream.read(8)  # skip past the b"mozLz40\0" header
    valid_bytes = bytestream.read()
    text = lz4.block.decompress(valid_bytes)
    return text

Ovviamente questo non tenta di convalidare input (o output), non è inteso per essere sicuro, ecc., Ma se si vuole solo essere in grado di analizzare i propri dati FF, ottiene il lavoro di base.

Versione della riga di comando qui , che può essere salvata nella directory pertinente e richiamata dalla riga di comando come:

chmod +x mozlz4.py
./mozlz4.py <file you want to read> <file to save output to>