Optimisation Trino/Iceberg Big Data

Je cherche un(e) spécialiste capable de prendre en main un environnement Trino + Apache Iceberg déjà en production et de l’amener à un niveau de performance supérieur. Nous traitons actuellement plus de 10 téraoctets de données et notre priorité absolue est l’optimisation des performances, en particulier :

• Réduction significative des temps de requête
• Meilleure utilisation des ressources CPU, mémoire et réseau

Ce que j’attends :
1. Audit rapide de la configuration existante (catalogues, moteurs de stockage, paramètres Trino, format Iceberg).
2. Recommandations concrètes et hiérarchisées : partitioning, zoning, sizing, tuning JVM, cache index, optimisation des plans de requête, etc.
3. Implémentation et tests A/B pour valider les gains sur des jeux de données réels.
4. Documentation claire des changements et bonnes pratiques pour mon équipe.

Une expertise démontrable sur des déploiements Trino/Iceberg à très grande échelle sera déterminante. Une expérience avec les données liées au secteur de la santé sera un atout majeur, ainsi que toute recommandation d'optimisation ou d'implémentation spécifique à l'industrie de la santé.

Je fournis un accès contrôlé aux clusters, aux métriques actuelles et à un canal Slack dédié pour échanger.