Tingkatan Managed Service untuk Apache Spark | Managed Service for Apache Spark | Google Cloud Documentation

Langsung ke konten utama

Dokumentasi

Mulai

Mulai Menggunakan Google Cloud
Daftar Produk
Cloud Customer Care

Produk Unggulan

Agent Platform
Pengelolaan API Apigee
BigQuery
Compute Engine
Cloud CDN
Cloud Run
Cloud Storage
Cloud SQL
Gemini Enterprise
Google Kubernetes Engine
Looker

Alat Lintas Produk

Pengelolaan akses dan resource
Pengelolaan biaya dan penggunaan
Infrastruktur sebagai kode
SDK, bahasa, framework, dan alat

Area Teknologi

AI dan ML
Pengembangan aplikasi
Hosting aplikasi
Compute
Pipeline dan analisis data
Database
Terdistribusi, hybrid, dan multicloud
Solusi industri
Migrasi
Jaringan
Kemampuan observasi dan pemantauan
Keamanan
Storage

/

Konsol

English
Deutsch
Español – América Latina
Français
Indonesia
Italiano
Português – Brasil
עברית
中文 – 简体
中文 – 繁體
日本語
한국어

Masuk

Managed Service for Apache Spark

Mulai gratis

Ringkasan Panduan Referensi Contoh Referensi

Dokumentasi
- Lainnya
- Ringkasan
- Panduan
- Referensi
- Contoh
- Referensi
Konsol

Ringkasan
Konsep Utama
Managed Service untuk Apache Spark serverless
- Ringkasan
- Paket serverless Managed Service untuk Apache Spark
Managed Service untuk Apache Spark di cluster
Membandingkan deployment serverless dan cluster
Managed Service untuk Apache Spark di GKE
Mulai
Serverless
- Membuat workload batch serverless Spark
Cluster
GKE
- Menjalankan tugas Spark di Kubernetes
Mengembangkan aplikasi
Serverless
- Mengonfigurasi serverless
- Membuat workload dan sesi batch
- Membuat tabel Apache Iceberg dengan metadata di katalog runtime Lakehouse
- Menggunakan konektor BigQuery dengan Spark
  - Ringkasan
  - Membuat kueri tabel BigQuery
- Menjalankan kode PySpark di notebook BigQuery Studio
- Optimalkan
Cluster
- Pemrosesan data
  - Mengonfigurasi Spark
    Mengelola dependensi Spark
    Menyesuaikan lingkungan Spark
    Mengaktifkan penulisan serentak
    Meningkatkan performa Spark
    Menyesuaikan Spark
    Menggunakan Lightning Engine
  - Menjalankan tugas Spark
    Menggunakan konsol
    Menggunakan command line
    
    Menggunakan REST API Explorer
    Membuat cluster
    Menjalankan tugas Spark
    Memperbarui cluster
    Hapus cluster
    Menggunakan library klien
  - Menjalankan tugas Hadoop
  - Menulis dan menjalankan tugas Spark Scala
  - Menjalankan Trino
  - Menjalankan Flink
  - Menjalankan Hive
  - Run Pig
  - Menjalankan HBase
  - Jalankan Python
    Mengonfigurasi lingkungan Python
    Menggunakan Library Klien Cloud untuk Python
  - Menggunakan konektor data
    
    Menggunakan konektor Spark BigQuery
    Ringkasan
    Contoh kode konektor BigQuery
    Menggunakan konektor Cloud Storage
    Menggunakan konektor Spark Spanner
- Data lake dan lake house
- Notebook dan UI data science
  - Menggunakan notebook
    Ringkasan
    Menjalankan notebook Jupyter di cluster
    Menjalankan analisis genomik di notebook
    Menggunakan ekstensi JupyterLab untuk mengembangkan workload Spark serverless
  - Menggunakan Gateway Komponen
- Sumber dan penyimpanan data
- Administrasi dan tata kelola data
  - Manajemen fleet
  - Silsilah
    Mengaktifkan silsilah data Spark
    Mengaktifkan silsilah data Hive
- Konfigurasi cluster
  - Komponen
    Ringkasan
    Delta Lake
    Docker
    Flink
    HBase
    WebHCat Hive
    Hudi
    Iceberg
    Jupyter
    Pig
    Presto
    
    Ranger
    Menginstal Ranger
    
    Menggunakan Ranger
    Menggunakan Ranger dengan Kerberos
    Menggunakan Ranger dengan caching dan downscoping
    Mencadangkan dan memulihkan skema Ranger
    Solr
    Trino
    Zeppelin
    Zookeeper
  - Gambar cluster
    Ringkasan
    Layanan
    
    Versi image cluster
    Ringkasan
    Versi image rilis 3.0.x
    Versi image rilis 2.3.x
    Versi image rilis 2.2.x
    Versi image rilis 2.1.x
  - Opsi Compute
    Jenis mesin
    GPU
    Platform CPU minimal