Utils SQL

dashboard.src.utils_sql

Contient les fonctions de connexion et d'utilisation de la base SQL (postgresql). Le fichier config.ini force la connexion à une des trois bases de données. Il contient au minimum: [GENERAL] MODE_EXECUTION = REC

Les fonctions create_ror_table, available_dataset et drop_table sont dépréciées

Functions

open_connection(env)

Crée une connexion à la base indiquée dans le fichier config.ini

Source code in dashboard/src/utils_sql.py
def open_connection(env: str):
    """Crée une connexion à la base indiquée dans le fichier config.ini"""
    current_dir = os.path.dirname(os.path.abspath(__file__))
    current_dir = Path(current_dir)
    acces_config_path = current_dir.parent.parent.absolute() / "Config" / "acces.yaml"
    try:
        with open(acces_config_path, 'r') as f:
            acces_config = yaml.safe_load(f)
            logger.info(f"Acces config file readed from {acces_config_path}")
            db_access = acces_config[env]["DB_CONFIG"]
    except Exception as e:
        logger.exception(f"Erreur lors du chargement du fichier de configuration : {e}")
        raise

    conn = psycopg2.connect(
        host = db_access["host"],
        port = db_access["port"],
        dbname = db_access["db_name"],
        user = db_access["user"],
        password  = os.getenv("DB_PASSWORD")
    )

    return conn

req2table(requete, env, conn=None)

convertit la requete en dataframe

Source code in dashboard/src/utils_sql.py
def req2table(requete:str, env:str,
              conn=None)-> pd.DataFrame :
    """ convertit la requete en dataframe """
    if not conn:
        to_close = True
        conn = open_connection(env)
    else:
        to_close = False
    cursor = conn.cursor()
    try:
        cursor.execute(requete)
    except:
        conn.rollback()
        logger.exception(f"Erreur sur: {requete}. L'objet retourné est nul.")
    else:
        col = [x.name for x in cursor.description]
        df = pd.DataFrame(cursor.fetchall(), columns=col)
        return df
    finally:
        if to_close:
            conn.close()
            logger.info("connexion fermée")