Big Binary Files Upload (PostgreSQL)
Oggetti di grandi dimensioni di PostgreSQL
PostgreSQL offre una struttura nota come oggetti di grandi dimensioni, accessibili tramite la tabella pg_largeobject
, progettata per memorizzare tipi di dati di grandi dimensioni, come immagini o documenti PDF. Questo approccio è vantaggioso rispetto alla funzione COPY TO
poiché consente l'esportazione dei dati nel file system, garantendo una replica esatta del file originale.
Per memorizzare un file completo all'interno di questa tabella, è necessario creare un oggetto nella tabella pg_largeobject
(identificato da un LOID), seguito dall'inserimento di frammenti di dati, ognuno di dimensione 2KB, in questo oggetto. È fondamentale che questi frammenti siano esattamente di dimensione 2KB (ad eccezione dell'ultimo frammento) per garantire il corretto funzionamento della funzione di esportazione.
Per dividere i tuoi dati binari in frammenti da 2KB, è possibile eseguire i seguenti comandi:
Per codificare ogni file in Base64 o Hex, è possibile utilizzare i seguenti comandi:
Importante: Quando si automatizza questo processo, assicurarsi di inviare frammenti di 2KB di byte in testo normale. I file codificati in esadecimale richiederanno 4KB di dati per frammento a causa del raddoppio delle dimensioni, mentre i file codificati in Base64 seguono la formula ceil(n / 3) * 4
.
Il contenuto degli oggetti di grandi dimensioni può essere visualizzato per scopi di debug utilizzando:
Utilizzo di lo_creat
e Base64
Per memorizzare dati binari, viene prima creato un LOID:
In situazioni che richiedono un controllo preciso, come sfruttare una Blind SQL Injection, lo_create
è preferibile per specificare un LOID fisso.
I frammenti di dati possono quindi essere inseriti come segue:
Per esportare e potenzialmente eliminare l'oggetto di grandi dimensioni dopo l'uso:
Utilizzo di lo_import
e Hex
La funzione lo_import
può essere utilizzata per creare e specificare un LOID per un oggetto di grandi dimensioni:
Dopo la creazione dell'oggetto, i dati vengono inseriti per pagina, assicurandosi che ogni chunk non superi i 2KB:
Per completare il processo, i dati vengono esportati e l'oggetto di grandi dimensioni viene eliminato:
Limitazioni
Si nota che gli oggetti di grandi dimensioni possono avere ACL (Access Control Lists), che potrebbero limitare l'accesso anche agli oggetti creati dal tuo utente. Tuttavia, gli oggetti più vecchi con ACL permissive potrebbero ancora essere accessibili per l'esfiltrazione del contenuto.
Last updated