Panduan penerjemahan SQL IBM Netezza

Data warehousing IBM Netezza dirancang untuk berfungsi dengan sintaksis SQL khusus Netezza. SQL Netezza didasarkan pada Postgres 7.2. Skrip SQL yang ditulis untuk Netezza tidak dapat digunakan di data warehouse BigQuery tanpa perubahan, karena dialek SQL-nya bervariasi.

Dokumen ini menjelaskan persamaan dan perbedaan sintaksis SQL antara Netezza dan BigQuery di area berikut:

• Jenis data
• Elemen bahasa SQL
• Sintaksis kueri
• Bahasa manipulasi data (DML)
• Bahasa definisi data (DDL)
• Prosedur tersimpan
• Functions

Anda juga dapat menggunakan batch terjemahan SQL untuk memigrasikan skrip SQL secara massal, atau terjemahan SQL interaktif untuk menerjemahkan ad-hoc kueri. IBM Netezza SQL/NZPLSQL didukung oleh kedua alat di pratinjau.

Jenis data

Pemformatan jenis tanggal dan stempel waktu

Untuk mengetahui informasi selengkapnya tentang format jenis tanggal yang digunakan Netezza SQL, lihat dokumentasi Pola template Waktu Tanggal Netezza. Untuk mengetahui informasi selengkapnya tentang fungsi tanggal waktu, lihat dokumentasi Fungsi tanggal/waktu Netezza.

Saat mengonversi elemen pemformatan jenis tanggal dari Netezza ke GoogleSQL, Anda harus memberikan perhatian khusus pada perbedaan zona waktu antara TIMESTAMP dan DATETIME, seperti yang diringkas dalam tabel berikut:

Pernyataan SELECT

Secara umum, pernyataan SELECT Netezza kompatibel dengan BigQuery. Tabel berikut berisi daftar pengecualian:

SELECT
  (subquery) AS flag,
  CASE WHEN flag = 1 THEN ...

SELECT
  (subquery) AS flag,
  CASE WHEN (subquery) = 1 THEN ...

SELECT
  q.*,
  CASE WHEN flag = 1 THEN ...
FROM (
  SELECT
    (subquery) AS flag,
    ...
  ) AS q

Operator perbandingan

Fungsi SQL bawaan

Functions

Bagian ini membandingkan fungsi Netezza dan BigQuery.

Fungsi agregat

Fungsi analisis

Fungsi tanggal dan waktu

Fungsi string

Fungsi matematika

Sintaksis DML

Bagian ini membandingkan sintaks Netezza dan BigQuery DML.

Pernyataan INSERT

INSERT INTO table VALUES (...);

INSERT INTO table (...) VALUES (...);

INSERT INTO table (...) VALUES (...);
INSERT INTO table (...) VALUES (...);

INSERT INTO table VALUES (), ();

Skrip DML di BigQuery memiliki semantik konsistensi yang sedikit berbeda dengan pernyataan yang setara di Netezza. Perlu diperhatikan juga bahwa BigQuery tidak menawarkan batasan selain NOT NULL.

Untuk ringkasan tentang snapshot isolation serta penanganan sesi dan transaksi, lihat Jaminan konsistensi dan transaction isolation.

Pernyataan UPDATE

Di Netezza, klausa WHERE bersifat opsional, tetapi diperlukan di BigQuery.

UPDATE tbl
SET
tbl.col1=val1;

UPDATE A
SET
  y = B.y,
  z = B.z + 1
FROM B
WHERE A.x = B.x
  AND A.y IS NULL;

UPDATE A
SET
  y = B.y,
  z = B.z + 1
FROM B
WHERE A.x = B.x
  AND A.y IS NULL;

UPDATE A alias
SET x = x + 1
WHERE f(x) IN (0, 1)

UPDATE A
SET x = x + 1
WHERE f(x) IN (0, 1);

UPDATE A
SET z = B.z
FROM B
WHERE A.x = B.x
  AND A.y = B.y

UPDATE A
SET z = B.z
FROM B
WHERE A.x = B.x
  AND A.y = B.y;

Untuk contoh, lihat contoh UPDATE.

Karena kuota DML, sebaiknya gunakan pernyataan MERGE yang lebih besar, bukan beberapa pernyataan UPDATE dan INSERT tunggal. Skrip DML di BigQuery memiliki semantik konsistensi yang sedikit berbeda dengan pernyataan yang setara di Netezza. Untuk ringkasan tentang snapshot isolation serta penanganan sesi dan transaksi, lihat Jaminan konsistensi dan transaction isolation.

Pernyataan DELETE dan TRUNCATE

Pernyataan DELETE dan TRUNCATE adalah cara untuk menghapus baris dari tabel tanpa memengaruhi skema atau indeks tabel. Pernyataan TRUNCATE memiliki efek yang sama dengan pernyataan DELETE tetapi jauh lebih cepat daripada pernyataan DELETE untuk tabel besar. Pernyataan TRUNCATE didukung di Netezza, tetapi tidak didukung di BigQuery. Namun, Anda dapat menggunakan pernyataan DELETE di Netezza dan BigQuery.

Di BigQuery, pernyataan DELETE harus memiliki klausa WHERE. Di Netezza, klausa WHERE bersifat opsional. Jika klausa WHERE tidak ditentukan, semua baris dalam tabel Netezza akan dihapus.

BEGIN;
LOCK TABLE A IN EXCLUSIVE MODE;
DELETE FROM A;
INSERT INTO A SELECT * FROM B;
COMMIT;

bq query \

--replace \

--destination_table \

tableA \

'SELECT * \

FROM tableB \

WHERE ...'

bq cp \

-f tableA tableB

DELETE FROM database.table

DELETE FROM table WHERE TRUE;

Pernyataan MERGE

Pernyataan MERGE harus cocok dengan maksimal satu baris sumber untuk setiap baris target. Skrip ML di BigQuery memiliki semantik konsistensi yang sedikit berbeda dari pernyataan setara di Netezza. Untuk ringkasan snapshot isolation serta penanganan sesi dan transaksi, lihat Jaminan konsistensi dan transaction isolation. Misalnya, lihat contoh MERGE BigQuery dan contoh MERGE Netezza.

Sintaksis DDL

Bagian ini membandingkan sintaks DDL Netezza dan BigQuery.

Pernyataan CREATE TABLE

Pernyataan DROP

Opsi dan atribut kolom

Tabel sementara

Netezza mendukung tabel TEMPORARY yang ada selama durasi sesi.

Untuk membuat tabel sementara di BigQuery, lakukan hal berikut:

1. Buat set data yang memiliki masa aktif singkat (misalnya, 12 jam).

2. Buat tabel sementara dalam set data tersebut, dengan awalan nama tabel temp. Misalnya, untuk membuat tabel yang akan habis masa berlakunya dalam satu jam, lakukan hal berikut:

   CREATE TABLE temp.name (col1, col2, ...)
   OPTIONS(expiration_timestamp = TIMESTAMP_ADD(CURRENT_TIMESTAMP(),
   INTERVAL 1 HOUR));
   

3. Mulailah membaca dan menulis dari tabel sementara.

Anda juga dapat menghapus duplikat secara independen untuk menemukan error dalam sistem downstream.

Perhatikan bahwa BigQuery tidak mendukung kolom (urutan) DEFAULT and IDENTITY.

Pernyataan SQL prosedural

Netezza menggunakan bahasa skrip NZPLSQL untuk menangani prosedur yang tersimpan. NZPLSQL didasarkan pada bahasa PL/pgSQL Postgres. Bagian ini menjelaskan cara mengonversi pernyataan SQL prosedural yang digunakan dalam prosedur, fungsi, dan pemicu tersimpan dari Netezza ke BigQuery.

Pernyataan CREATE PROCEDURE

Netezza dan BigQuery mendukung pembuatan prosedur tersimpan dengan menggunakan pernyataan CREATE PROCEDURE. Untuk mengetahui informasi selengkapnya, lihat Menggunakan prosedur tersimpan SQL.

Deklarasi dan penetapan variabel

Pengendali pengecualian

Netezza mendukung pengendali pengecualian yang dapat dipicu untuk kondisi error tertentu. BigQuery tidak mendukung pengendali kondisi.

Pernyataan SQL dinamis

Netezza mendukung kueri SQL dinamis di dalam prosedur yang tersimpan. BigQuery tidak mendukung pernyataan SQL dinamis.

Pernyataan flow-of-control

Pernyataan dan elemen bahasa prosedural lainnya

Pernyataan SQL multi-pernyataan dan multi-baris

Netezza dan BigQuery mendukung transaksi (sesi) dan oleh karena itu, mendukung pernyataan yang dipisahkan dengan titik koma yang dijalankan bersama dengan konsisten. Untuk informasi selengkapnya, lihat Transaksi multi-pernyataan.

Pernyataan SQL lainnya

Jaminan konsistensi dan transaction isolation

Netezza dan BigQuery bersifat atomik, yaitu sesuai dengan ACID pada tingkat per mutasi di banyak baris. Misalnya, operasi MERGE sepenuhnya atomik, bahkan dengan beberapa nilai yang disisipkan.

Transaksi

Netezza secara sintaksis menerima keempat mode transaction isolation ANSI SQL. Namun, terlepas dari mode yang ditentukan, hanya mode SERIALIZABLE yang digunakan, yang memberikan tingkat konsistensi setinggi mungkin. Mode ini juga menghindari pembacaan kotor, tidak dapat diulang, dan phantom di antara transaksi konkurensi. Netezza tidak menggunakan penguncian konvensional untuk menerapkan konsistensi. Sebagai gantinya, metode ini menggunakan pemeriksaan dependensi serialisasi, yaitu bentuk kontrol konkurensi optimis untuk melakukan roll back transaksi terbaru otomatis saat dua transaksi mencoba mengubah data yang sama.

BigQuery juga mendukung transaksi. BigQuery membantu memastikan kontrol konkurensi optimis (yang pertama kali di-commit akan memiliki prioritas) dengan snapshot isolation, serta kueri membaca data yang di-commit terakhir sebelum kueri dimulai. Pendekatan ini menjamin tingkat konsistensi yang sama per baris, per mutasi, dan di seluruh baris dalam pernyataan DML yang sama, sembari menghindari deadlock. Dalam kasus beberapa update DML terhadap tabel yang sama, BigQuery akan beralih ke kontrol konkurensi pesimis. Tugas pemuatan dapat berjalan sepenuhnya secara independen dan ditambahkan ke tabel.

Rollback

Netezza mendukung pernyataan ROLLBACK untuk membatalkan transaksi saat ini dan melakukan roll back pada semua perubahan yang dibuat dalam transaksi.

Di BigQuery, Anda dapat menggunakan pernyataan ROLLBACK TRANSACTION.

Batas database

Langkah selanjutnya

• Dapatkan petunjuk langkah demi langkah untuk Bermigrasi dari IBM Netezza ke BigQuery.