Birdz - Conversion Export Oracle en CSV

 

Description :

Des dumps (export datapump de partitions) sont fournis sur des disques.

Le but est de fournir pour certaines tables les fichiers csv par partition.

 

Etapes :

Import : utilisation impdp

Export : utilisation python ( pandas, cx_Oracle)

Transfert : sdk google cloud 

 

Problématique :

Ne disposant pas de la Fibre optique la volumétrie a uploader ne me permet pas un transfert direct 

Le calcul rapide du temps de transfert pour 10To en VDSL avec un upload à 5mb/s = 195 jours 

=> Utilisation d'un site avec fibre pour le transfert

 

Environnement :

Cluster Proxmox 

  • VM Oracle : import, export
  • VM Google cloud sdk : verification

raspberrypi avec google cloud sdk : transfert