Google Cloud Serverless pour Apache Spark

Profitez du meilleur rapport prix/performances du secteur. Google Cloud Serverless pour Apache Spark est basé sur notre moteur de requêtes natif nouvelle génération, Lightning Engine, en version Preview. Il offre des performances de requête et de traitement de données Spark nettement plus rapides, plus de 3,6 fois plus rapides** que celles d'Apache Spark Open Source, grâce à son exécution vectorisée avancée, son cache intelligent intégré et ses E/S de stockage optimisées. Vous pouvez ainsi obtenir des insights plus rapidement et réduire vos coûts.

** Les requêtes sont dérivées de la norme TPC-DS et de la norme TPC-H. Elles ne sont donc pas comparables aux résultats publiés pour la norme TPC-DS et la norme TPC-H, car ces exécutions ne respectent pas toutes les exigences de la spécification de la norme TPC-DS et de la norme TPC-H.

Exécutez vos charges de travail Spark de production en toute confiance. Google Cloud Serverless pour Apache Spark optimise les ressources, assure l'isolation des jobs et est compatible avec les fonctionnalités de sécurité d'entreprise de Google Cloud (y compris VPC-SC, CMEK, authentification personnelle et règles d'administration personnalisées). Il assure un environnement d'exécution sécurisé avec des fonctionnalités telles que des sous-réseaux sécurisés, le chiffrement par défaut des données au repos et en transit, et l'absence d'accès direct à la VM ou à la racine, ce qui réduit votre charge de sécurité opérationnelle. Bien que conçu pour l'automatisation, Spark offre aux utilisateurs expérimentés un accès complet aux configurations pour un contrôle précis.

Intégrez l'IA générative dans le cycle de vie de votre développement Spark. Utilisez Gemini pour générer du code PySpark en tenant compte du contexte dans les notebooks avec un contexte intelligent de vos données pour booster votre productivité. Obtenez des recommandations de dépannage assistées par l'IA avec Gemini Cloud Assist Investigate pour résoudre rapidement les problèmes, obtenir des insights opérationnels plus détaillés et optimiser les performances.

Exécutez facilement des charges de travail d'entraînement distribué ou d'inférence par lot. Google Cloud Serverless pour Apache Spark offre une accélération intégrée par GPU et est livré avec des bibliothèques de ML populaires préemballées, comme XGBoost, PyTorch et Transformers. Les temps de démarrage des environnements d'IA/de ML sont ainsi considérablement réduits, et la fiabilité est améliorée, car les images sont certifiées par Google.