Google Cloud Serverless para Apache Spark

Tenha a melhor relação custo-benefício do setor. O Google Cloud Serverless para Apache Spark é alimentado pelo nosso mecanismo de consulta nativa de última geração, o Lightning Engine, em prévia. Ele oferece uma performance de processamento de dados e consulta do Spark significativamente mais rápida, mais de 3, 6 vezes mais rápida** do que o Apache Spark de código aberto, com execução vetorial avançada, armazenamento em cache inteligente integrado e E/S de armazenamento otimizada, ajudando você a gerar insights mais rapidamente e reduzir custos.

** As consultas são derivadas do padrão TPC-DS e do padrão TPC-H e, portanto, não podem ser comparadas aos resultados publicados do padrão TPC-DS e do padrão TPC-H, porque essas execuções não atendem a todos os requisitos da especificação do padrão TPC-DS e do padrão TPC-H.

Execute suas cargas de trabalho de produção do Spark com confiança. O Google Cloud Serverless para Apache Spark otimiza recursos, oferece isolamento de jobs e oferece suporte aos recursos de segurança corporativa do Google Cloud, incluindo VPC-SC, CMEK, autenticação pessoal e políticas personalizadas da organização. Ele garante um ambiente de execução seguro com recursos como sub-redes seguras, criptografia padrão para dados em repouso e em trânsito e sem acesso direto à VM ou ao root, minimizando a carga de segurança operacional. Embora tenha sido criado para automação, os usuários avançados mantêm acesso total às configurações do Spark para controle detalhado.

Incorpore a IA generativa ao ciclo de vida de desenvolvimento do Spark. Use o Gemini para gerar códigos do PySpark com base no contexto em notebooks com contexto inteligente dos seus dados para aumentar a produtividade. Receba recomendações de solução de problemas com assistência de IA com o Gemini Cloud Assist Investigate para resolver problemas rapidamente, ter insights operacionais mais aprofundados e otimizar o desempenho.

Execute cargas de trabalho de inferência em lote ou treinamento distribuído sem problemas. O Google Cloud Serverless para Apache Spark oferece suporte integrado à aceleração de GPU e vem com bibliotecas de ML conhecidas pré-empacotadas, como XGBoost, PyTorch e Transformers. Isso resulta em tempos de inicialização significativamente mais rápidos para ambientes de IA/ML e melhora a confiabilidade, já que as imagens são certificadas pelo Google.