Le choix du médium (RJ-45 vs SFP+) a un impact mesurable sur la latence, même si cet impact est souvent masqué par d’autres facteurs. Dans ton contexte précis (Ceph, Proxmox, stockage distribué), la réponse est oui, et ce n’est pas anecdotique.

Je te réponds de façon factuelle et hiérarchisée.

1. Latence intrinsèque : cuivre vs fibre/DAC

RJ-45 (10GBASE-T)

  • Encodage complexe (PAM-16)

  • DSP actif dans la PHY

  • Buffering interne

  • Consommation Ă©levĂ©e

  • Latence ajoutĂ©e typique :
    ~2 à 4 µs par port

➡️ aller-retour = 4 à 8 µs minimum

SFP+ (DAC ou fibre)

  • Encodage simple

  • PHY beaucoup plus lĂ©gère

  • Pas de DSP lourd

  • Pas ou très peu de buffering

Latence ajoutée typique :

  • DAC passif : ~0.1 Ă  0.3 µs

  • Fibre (SR/LR) : ~0.3 Ă  0.5 µs

➡️ aller-retour < 1 µs

2. Ordres de grandeur (comparatif clair)

Lien 10G Latence ajoutée Rapport
10GBASE-T (RJ-45) 2–4 µs ×10
SFP+ DAC 0.1–0.3 µs ×1
SFP+ fibre 0.3–0.5 µs ×2

👉 Ce n’est pas marginal quand :

  • les I/O sont petits

  • les acks sont synchrones

  • le chemin est parcouru des milliers de fois par seconde

3. Pourquoi ça compte beaucoup pour Ceph

Ceph fait :

  • des allers-retours frĂ©quents

  • des acks synchrones

  • de la rĂ©plication

  • du quorum

Chaque write implique :

  • client → OSD primaire

  • OSD → OSD secondaires

  • ack → client

👉 Chaque microseconde est multipliée.

Avec RJ-45 :

  • la latence s’additionne

  • le jitter augmente

  • la sensation de lenteur est amplifiĂ©e

Avec SFP+ :

  • chemin plus court

  • variance plus faible

  • comportement plus prĂ©visible

4. Pourquoi ZFS local “gagne” encore plus avec SFP+

MĂŞme pour TrueNAS :

  • iSCSI

  • NFS

  • replication ZFS

  • metadata sync

Le gain n’est pas spectaculaire seul, mais :

  • il rĂ©duit le jitter

  • il stabilise les fsync

  • il amĂ©liore la constance

5. Cas où la différence est invisible

Soyons honnĂŞtes :

  • streaming vidĂ©o

  • gros transferts sĂ©quentiels

  • sauvegardes longues

  • trafic WAN

Là, le débit domine, pas la latence.

6. Règle simple

Pour du stockage distribué ou sync-heavy : SFP+ toujours.
RJ-45 = acceptable, mais jamais optimal.

Dans ton infra :

  • Ceph → SFP+ justifiĂ©

  • inter-nĹ“uds → SFP+ recommandĂ©

  • stockage → SFP+ obligatoire

  • accès utilisateur → RJ-45 OK

7. Verdict clair

✅ Oui, le médium impacte la latence
✅ L’impact est mesurable, pas théorique
âś… Ceph amplifie cet impact
✅ SFP+ réduit latence et jitter
✅ Ton ressenti global est cohérent avec ça