Vos documents dans ClickHouse, quel que soit le volume

Comment ça marche

1. 1

   Connectez ClickHouse une seule fois

   Créez un rôle avec des droits d'insertion sur un seul schéma et collez ses identifiants dans Holofin. Holofin crée la table au premier chargement ; il ne voit rien d'autre dans ClickHouse.

2. 2

   Envoyez vos documents comme d'habitude

   Dépôt dans l'application, transfert par e-mail ou appel à l'API. Holofin classe chaque fichier, découpe les liasses en documents et lit les champs propres à chaque type.

3. 3

   Interrogez les lignes

   Chaque champ arrive sous forme d'une ligne, avec sa confiance, la page dont il provient et un indicateur needs_review. Joignez-le à vos propres tables dans ClickHouse comme n'importe quelle autre source.

Comment le connecteur ClickHouse écrit les données

Le seul droit dont Holofin a besoin :

CREATE USER holofin_loader IDENTIFIED WITH sha256_password BY '...';
GRANT INSERT, SELECT ON extracted.document_fields TO holofin_loader;

La table écrite par Holofin

Une ligne par champ : un nouveau type de document ne modifie jamais la table. Les colonnes sont identiques d'une plateforme à l'autre ; les types suivent la nomenclature de ClickHouse.

Interroger les données dans ClickHouse

Taux de revue et confiance médiane par type de document sur 30 jours, avec countIf et quantile :

-- Review rate per document type over the last 30 days
SELECT
    document_type,
    uniqExact(document_id) AS documents,
    round(countIf(needs_review) / count(), 3) AS review_rate,
    quantile(0.5)(confidence) AS median_confidence
FROM extracted.document_fields FINAL
WHERE loaded_at >= now() - INTERVAL 30 DAY
GROUP BY document_type
ORDER BY documents DESC

Sécurité

• Les documents sont traités en Europe, sur des serveurs OVHcloud situés en France et certifiés ISO 27001.
• Holofin écrit uniquement dans le schéma que vous lui ouvrez. Il ne peut pas lire vos autres tables.
• La durée de conservation des fichiers sources dans Holofin se règle par organisation, de zéro rétention des données à une conservation illimitée. Les lignes de votre entrepôt suivent vos propres règles.
• RGPD : Holofin agit en tant que sous-traitant. Aucun document ne quitte l'Union européenne.