Lulus KTT Komunitas Data

Pipa CI/CD adalah serangkaian prosedur yang harus diikuti untuk memberikan versi baru dari perangkat lunak. Integrasi Berkelanjutan/Pengiriman Berkelanjutan (CI/CD) Pipa adalah serangkaian praktik yang bertujuan meningkatkan pengiriman perangkat lunak melalui penggunaan baik a Devop atau a Teknik Keandalan Situs (SRE) mendekati. Pipa CI/CD menggabungkan pemantauan dan otomatisasi untuk meningkatkan proses pengembangan aplikasi, terutama selama Integrasi Dan Pengujian fase, serta selama Pengiriman Dan Penyebaran. Meskipun setiap langkah pipa CI/CD dapat dilakukan secara manual, nilai sebenarnya dari pipa CI/CD direalisasikan melalui otomatisasi.

Membangun Snowflake CI CD Pipeline Menggunakan Azure DevOps & Flyway Sederhanakan: 4 Langkah Kritis

Akronim CI dan CD sering digunakan dalam praktik pengembangan modern dan DevOps. Integrasi kontinu (CI) mengacu pada praktik terbaik DevOps mendasar di mana pengembang sering menggabungkan perubahan kode menjadi repositori pusat di mana build dan tes otomatis dijalankan. Di samping itu, Pengiriman Berkelanjutan (CD) adalah perpanjangan integrasi kontinu karena secara otomatis menyebarkan semua perubahan kode pada lingkungan pengujian dan/atau produksi setelah tahap pembangunan.

Daftar isi

Setelah walk-through dari artikel ini, Anda akan mendapatkan pemahaman yang layak tentang kepingan salju bersama dengan fitur-fitur utama yang ditawarkannya. Artikel ini juga akan memberi Anda panduan langkah demi langkah tentang cara membangun a CD Snowflake CI Pipa dengan cara yang mulus. Baca bersama untuk mempelajari lebih lanjut tentang saluran pipa Snowflake CI CD.

Daftar isi

• Prasyarat
• Apa itu Snowflake?
  • Fitur utama dari kepingan salju
  • Langkah 1: Buat proyek demo
  • Langkah 2: Siapkan lingkungan produksi
  • Langkah 3: Buat grup variabel perpustakaan
  • Langkah 4: Buat dan jalankan pipa penyebaran CD CI kepingan salju

  Prasyarat

  • Pengalaman langsung dengan git.
  • Akun kepingan salju yang aktif.
  • Akun Layanan DevOps Azure Aktif.

  Apa itu Snowflake?

  Kepingan salju adalah salah satu yang paling populer Gudang Data Cloud yang menawarkan sejumlah besar fitur tanpa mengurangi kesederhanaan. Itu berskala secara otomatis, baik naik dan turun, untuk menawarkan yang terbaik Kinerja-ke-biaya perbandingan. Fitur pembeda dari kepingan salju adalah memisahkan Komputasi dari Penyimpanan. Ini penting karena hampir setiap gudang data lainnya, termasuk Amazon Redshift, menggabungkan keduanya, menyiratkan bahwa Anda harus mempertimbangkan ukurannya dari beban kerja tertinggi Anda dan kemudian mengeluarkan biaya yang terkait dengannya.

  Kepingan salju tidak memerlukan perangkat keras atau perangkat lunak Dipilih, diinstal, dikonfigurasi, atau dikelola, menjadikannya ideal untuk organisasi yang tidak ingin mendedikasikan sumber daya untuk Pengaturan, Pemeliharaan, dan Dukungan dari server in-house. Ini memungkinkan Anda untuk menyimpan semua data Anda di lokasi terpusat dan mengukur komputasi Anda secara mandiri. Misalnya, jika Anda membutuhkannya waktu sebenarnya memuat data Untuk transformasi yang kompleks tetapi hanya memiliki beberapa pertanyaan kompleks dalam pelaporan Anda, Anda dapat membuat skrip gudang kepingan salju besar untuk beban data dan kemudian skala kembali setelahnya’S selesai – Semua secara real-time. Ini akan menghemat sejumlah besar uang tanpa membahayakan tujuan solusi Anda.

  Fitur utama dari kepingan salju

  Beberapa fitur utama dari kepingan salju adalah sebagai berikut:

  • Skalabilitas: Itu Menghitung Dan Penyimpanan Sumber daya dipisahkan dalam kepingan salju’ Multi-cluster Arsitektur data yang dibagikan. Strategi ini memberi pengguna kemampuan untuk meningkatkan sumber daya ketika sejumlah besar data harus dimuat dengan cepat dan meningkatkan kembali ketika proses selesai tanpa mengganggu operasi apa pun.
  • Tidak ada administrasi yang diperlukan: Ini memungkinkan bisnis untuk mengatur dan mengelola solusi tanpa memerlukan keterlibatan luas dari administrator database atau tim TI. Itu tidak mengharuskan pemasangan perangkat lunak atau commissioning perangkat keras.
  • Keamanan: Snowflake menampung berbagai fitur keamanan, mulai dari bagaimana pengguna mengakses kepingan salju hingga bagaimana data disimpan. Untuk membatasi akses ke akun Anda, Anda dapat mengelola kebijakan jaringan dengan daftar putih alamat IP. Snowflake mendukung berbagai metode otentikasi, termasuk Otentikasi dua faktor Dan Sso melalui Otentikasi federasi.
  • Dukungan untuk data semi-terstruktur: Kepingan salju’Arsitektur S memungkinkan penyimpanan Tersusun Dan Semi-terstruktur data di lokasi yang sama dengan memanfaatkan VARIAN skema di Membaca tipe data. VARIAN dapat menyimpan data terstruktur dan semi-terstruktur. Setelah data dimuat, Snowflake secara otomatis menguraikannya, mengekstrak atributnya, dan menyimpannya dalam format kolom.

  Apa itu pipa CI/CD?

  Pipa CI/CD adalah serangkaian prosedur yang harus diikuti untuk memberikan versi baru dari perangkat lunak. Integrasi Berkelanjutan/Pengiriman Berkelanjutan (CI/CD) Pipa adalah serangkaian praktik yang bertujuan meningkatkan pengiriman perangkat lunak melalui penggunaan baik a Devop atau a Teknik Keandalan Situs (SRE) mendekati. Pipa CI/CD menggabungkan pemantauan dan otomatisasi untuk meningkatkan proses pengembangan aplikasi, terutama selama Integrasi Dan Pengujian fase, serta selama Pengiriman Dan Penyebaran. Meskipun setiap langkah pipa CI/CD dapat dilakukan secara manual, nilai sebenarnya dari pipa CI/CD direalisasikan melalui otomatisasi.

  1. Apa tujuan dari pipa CI/CD?

  Tujuan dari pipa CI/CD adalah untuk memberikan versi baru dari perangkat lunak dengan mengikuti serangkaian prosedur yang ditentukan. Ini bertujuan untuk meningkatkan pengiriman perangkat lunak melalui penggunaan otomatisasi dan pemantauan selama fase integrasi, pengujian, pengiriman, dan penyebaran dari proses pengembangan aplikasi.

  2. Bagaimana integrasi kontinu (CI) masuk ke dalam pipa CI/CD?

  Integrasi Berkelanjutan (CI) adalah praktik terbaik DevOps mendasar di mana pengembang sering menggabungkan perubahan kode menjadi repositori pusat di mana build dan tes otomatis dijalankan. Ini memastikan bahwa perubahan kode terintegrasi dengan lancar dan konflik atau masalah apa pun diidentifikasi di awal proses pengembangan.

  3. Apa itu pengiriman kontinu (CD) dalam pipa CI/CD?

  Continuous Delivery (CD) adalah perpanjangan integrasi kontinu di mana semua perubahan kode secara otomatis digunakan ke lingkungan pengujian dan/atau produksi setelah tahap pembangunan. Ini memastikan bahwa setiap pembaruan atau peningkatan perangkat lunak dikirimkan kepada pengguna secara efisien dan konsisten.

  4. Dapatkah setiap langkah pipa CI/CD dilakukan secara manual?

  Ya, setiap langkah pipa CI/CD dapat dilakukan secara manual. Namun, nilai sebenarnya dari pipa CI/CD direalisasikan melalui otomatisasi. Eksekusi manual langkah-langkah pipa dapat memakan waktu dan rentan terhadap kesalahan manusia, sedangkan otomatisasi meningkatkan efisiensi dan memastikan hasil yang konsisten.

  5. Apa manfaat utama dari mengotomatisasi pipa CI/CD?

  Manfaat utama mengotomatisasi pipa CI/CD adalah peningkatan efisiensi dan konsistensi dalam pengiriman perangkat lunak. Otomasi mengurangi upaya manual dan memungkinkan pengembang untuk fokus pada pengkodean daripada melakukan tugas yang berulang. Ini juga memastikan bahwa setiap perubahan kode melalui set tes dan langkah penyebaran yang sama, menghasilkan perangkat lunak yang lebih andal dan stabil.

  6. Bagaimana suatu organisasi mendapat manfaat dari menerapkan pipa CI/CD?

  Dengan menerapkan pipa CI/CD, organisasi dapat mengambil manfaat dari pengiriman perangkat lunak yang lebih cepat, mengurangi waktu ke pasar, kualitas kode yang lebih baik, dan peningkatan produktivitas pengembang. Ini memungkinkan tim untuk mengulang dan melepaskan perangkat lunak lebih sering, menanggapi umpan balik pelanggan dengan cepat, dan memberikan fitur dan pembaruan baru dengan waktu henti minimal.

  7. Apa prasyarat untuk membangun pipa CI/CD kepingan salju menggunakan Azure DevOps dan Flyway?

  Prasyarat untuk membangun pipa CI/CD kepingan salju menggunakan Azure DevOps dan Flyway termasuk pengalaman langsung dengan GIT, akun Snowflake yang aktif, dan akun Azure DevOps Services yang aktif.

  8. Apa saja fitur utama dari kepingan salju?

  Beberapa fitur utama dari kepingan salju termasuk skalabilitas, tidak diperlukan administrasi, langkah-langkah keamanan yang kuat, dan dukungan untuk data semi-terstruktur. Ini menawarkan penskalaan otomatis sumber daya komputasi dan penyimpanan, menyederhanakan manajemen. Snowflake juga menyediakan fitur keamanan yang kuat untuk akses data dan mendukung penyimpanan data terstruktur dan semi-terstruktur.

  9. Bagaimana perbedaan salju berbeda dari gudang data lainnya?

  Snowflake membedakan dirinya dari gudang data lain dengan memisahkan komputasi dari penyimpanan. Tidak seperti gudang data lainnya, seperti Amazon Redshift, yang menggabungkan komputasi dan penyimpanan, Snowflake memungkinkan pengguna untuk mengukur komputasi dan penyimpanan secara mandiri. Fleksibilitas ini memungkinkan pengguna untuk mengoptimalkan biaya dan kinerja berdasarkan kebutuhan beban kerja spesifik mereka.

  10. Keuntungan apa yang ditawarkan kepingan salju untuk menangani beban data real-time dan pertanyaan yang kompleks?

  Snowflake memberikan keuntungan untuk menangani beban data real-time dan permintaan kompleks dengan memungkinkan pengguna untuk membuat skrip gudang kepingan salju besar untuk beban data dan kemudian meningkatkannya kembali setelah selesai, semuanya secara real-time. Pendekatan ini menghemat biaya yang signifikan sambil memastikan pemrosesan beban data real-time yang efisien dan kueri yang kompleks.

  Lulus KTT Komunitas Data

  Pipa CI/CD adalah serangkaian prosedur yang harus diikuti untuk memberikan versi baru dari perangkat lunak. Integrasi Berkelanjutan/Pengiriman Berkelanjutan (CI/CD) Pipa adalah serangkaian praktik yang bertujuan meningkatkan pengiriman perangkat lunak melalui penggunaan baik a Devop atau a Teknik Keandalan Situs (SRE) mendekati. Pipa CI/CD menggabungkan pemantauan dan otomatisasi untuk meningkatkan proses pengembangan aplikasi, terutama selama Integrasi Dan Pengujian fase, serta selama Pengiriman Dan Penyebaran. Meskipun setiap langkah pipa CI/CD dapat dilakukan secara manual, nilai sebenarnya dari pipa CI/CD direalisasikan melalui otomatisasi.

  Membangun Snowflake CI CD Pipeline Menggunakan Azure DevOps & Flyway Sederhanakan: 4 Langkah Kritis

  Akronim CI dan CD sering digunakan dalam praktik pengembangan modern dan DevOps. Integrasi kontinu (CI) mengacu pada praktik terbaik DevOps mendasar di mana pengembang sering menggabungkan perubahan kode menjadi repositori pusat di mana build dan tes otomatis dijalankan. Di samping itu, Pengiriman Berkelanjutan (CD) adalah perpanjangan integrasi kontinu karena secara otomatis menyebarkan semua perubahan kode pada lingkungan pengujian dan/atau produksi setelah tahap pembangunan.

  Daftar isi

  Setelah walk-through dari artikel ini, Anda akan mendapatkan pemahaman yang layak tentang kepingan salju bersama dengan fitur-fitur utama yang ditawarkannya. Artikel ini juga akan memberi Anda panduan langkah demi langkah tentang cara membangun a CD Snowflake CI Pipa dengan cara yang mulus. Baca bersama untuk mempelajari lebih lanjut tentang saluran pipa Snowflake CI CD.

  Daftar isi

  • Prasyarat
  • Apa itu Snowflake?
    • Fitur utama dari kepingan salju
    • Langkah 1: Buat proyek demo
    • Langkah 2: Siapkan lingkungan produksi
    • Langkah 3: Buat grup variabel perpustakaan
    • Langkah 4: Buat dan jalankan pipa penyebaran CD CI kepingan salju

    Prasyarat

    • Pengalaman langsung dengan git.
    • Akun kepingan salju yang aktif.
    • Akun Layanan DevOps Azure Aktif.

    Apa itu Snowflake?

    Kepingan salju adalah salah satu yang paling populer Gudang Data Cloud yang menawarkan sejumlah besar fitur tanpa mengurangi kesederhanaan. Itu berskala secara otomatis, baik naik dan turun, untuk menawarkan yang terbaik Kinerja-ke-biaya perbandingan. Fitur pembeda dari kepingan salju adalah memisahkan Komputasi dari Penyimpanan. Ini penting karena hampir setiap gudang data lainnya, termasuk Amazon Redshift, menggabungkan keduanya, menyiratkan bahwa Anda harus mempertimbangkan ukurannya dari beban kerja tertinggi Anda dan kemudian mengeluarkan biaya yang terkait dengannya.

    Kepingan salju tidak memerlukan perangkat keras atau perangkat lunak Dipilih, diinstal, dikonfigurasi, atau dikelola, menjadikannya ideal untuk organisasi yang tidak ingin mendedikasikan sumber daya untuk Pengaturan, Pemeliharaan, dan Dukungan dari server in-house. Ini memungkinkan Anda untuk menyimpan semua data Anda di lokasi terpusat dan mengukur komputasi Anda secara mandiri. Misalnya, jika Anda membutuhkannya waktu sebenarnya memuat data Untuk transformasi yang kompleks tetapi hanya memiliki beberapa pertanyaan kompleks dalam pelaporan Anda, Anda dapat membuat skrip gudang kepingan salju besar untuk beban data dan kemudian skala kembali setelahnya’S selesai – Semua secara real-time. Ini akan menghemat sejumlah besar uang tanpa membahayakan tujuan solusi Anda.

    Fitur utama dari kepingan salju

    Beberapa fitur utama dari kepingan salju adalah sebagai berikut:

    • Skalabilitas: Itu Menghitung Dan Penyimpanan Sumber daya dipisahkan dalam kepingan salju’ Multi-cluster Arsitektur data yang dibagikan. Strategi ini memberi pengguna kemampuan untuk meningkatkan sumber daya ketika sejumlah besar data harus dimuat dengan cepat dan meningkatkan kembali ketika proses selesai tanpa mengganggu operasi apa pun.
    • Tidak ada administrasi yang diperlukan: Ini memungkinkan bisnis untuk mengatur dan mengelola solusi tanpa memerlukan keterlibatan luas dari administrator database atau tim TI. Itu tidak mengharuskan pemasangan perangkat lunak atau commissioning perangkat keras.
    • Keamanan: Snowflake menampung berbagai fitur keamanan, mulai dari bagaimana pengguna mengakses kepingan salju hingga bagaimana data disimpan. Untuk membatasi akses ke akun Anda, Anda dapat mengelola kebijakan jaringan dengan daftar putih alamat IP. Snowflake mendukung berbagai metode otentikasi, termasuk Otentikasi dua faktor Dan Sso melalui Otentikasi federasi.
    • Dukungan untuk data semi-terstruktur: Kepingan salju’Arsitektur S memungkinkan penyimpanan Tersusun Dan Semi-terstruktur data di lokasi yang sama dengan memanfaatkan VARIAN skema di Membaca tipe data. VARIAN dapat menyimpan data terstruktur dan semi-terstruktur. Setelah data dimuat, Snowflake secara otomatis menguraikannya, mengekstrak atributnya, dan menyimpannya dalam format kolom.

    Apa itu pipa CI/CD?

    Pipa CI/CD adalah serangkaian prosedur yang harus diikuti untuk memberikan versi baru dari perangkat lunak. Integrasi Berkelanjutan/Pengiriman Berkelanjutan (CI/CD) Pipa adalah serangkaian praktik yang bertujuan meningkatkan pengiriman perangkat lunak melalui penggunaan baik a Devop atau a Teknik Keandalan Situs (SRE) mendekati. Pipa CI/CD menggabungkan pemantauan dan otomatisasi untuk meningkatkan proses pengembangan aplikasi, terutama selama Integrasi Dan Pengujian fase, serta selama Pengiriman Dan Penyebaran. Meskipun setiap langkah pipa CI/CD dapat dilakukan secara manual, nilai sebenarnya dari pipa CI/CD direalisasikan melalui otomatisasi.

    Banyak tim pengembangan perangkat lunak tersebar secara geografis atau terisolasi, tetapi integrasi berkelanjutan (CI) memungkinkan pengembangan yang cepat sambil menghindari Gabungkan konflik, bug, dan duplikasi. Integrasi berkelanjutan selalu membuat cabang utama tetap up to date, tetapi juga dapat memungkinkan untuk sisi terpencil jangka pendek atau cabang fitur untuk perubahan kecil yang pada akhirnya dapat digabungkan ke cabang utama.

    Pengiriman berkelanjutan memungkinkan pengembangan tambahan yang cepat dan memungkinkan tim pengembangan untuk membangun dan melepaskan perangkat lunak kapan saja. Ini juga membantu tim DevOps dalam menurunkan biaya dan meningkatkan kecepatan rilis baru digunakan. Pengiriman berkelanjutan memerlukan struktur yang sangat berulang dan sering dianggap sebagai perpanjangan integrasi kontinu. Nanti di artikel ini, Anda akan belajar cara membangun a Snowflake CI CD Pipeline.

    Apa Azure Devops?

    Azure DevOps adalah a Perangkat Lunak sebagai Layanan (SaaS) Platform yang ditawarkan oleh Microsoft yang menyediakan alat devops ujung ke ujung untuk mengembangkan dan menggunakan perangkat lunak. Itu juga terintegrasi dengan sebagian besar pasar’alat terkemuka dan merupakan pilihan yang sangat baik untuk mengatur devops toolchain. Azure DevOps menawarkan layanan pengembang yang memungkinkan tim untuk merencanakan pekerjaan mereka, berkolaborasi dalam pengembangan kode, dan membangun dan menggunakan aplikasi. Azure DevOps mendorong budaya dan serangkaian prosedur yang menyatukan pengembang, manajer proyek, dan kontributor untuk berkolaborasi dalam pengembangan perangkat lunak. Ini memungkinkan organisasi untuk membuat dan meningkatkan produk dengan kecepatan yang jauh lebih cepat daripada pendekatan pengembangan perangkat lunak tradisional.

    Apa itu Flyway?

    PLAYWAY ADALAH Open-source alat berlisensi di bawah Lisensi Apache 2.0 yang memungkinkan pengguna untuk mengimplementasikan otomatis dan berbasis versi Migrasi Basis Data. Ini memungkinkan Anda untuk menentukan operasi pembaruan yang diperlukan di a Skrip SQL atau Kode Java. Anda dapat menjalankan migrasi basis data dari klien baris perintah, sebagai bagian dari proses pembuatan Anda, atau sebagai bagian dari aplikasi Java Anda.

    Keuntungan utama dari proses ini adalah bahwa Flyway mendeteksi dan menjalankan operasi pembaruan yang diperlukan. Akibatnya, Anda tidak’t perlu mengetahui pernyataan pembaruan SQL mana yang harus dieksekusi untuk memperbarui database Anda saat ini. Anda dan kolega Anda dapat dengan mudah mendefinisikan operasi pembaruan yang akan digunakan untuk memigrasi database dari satu versi ke versi berikutnya dan Flyway akan mendeteksi versi saat ini dan menjalankan operasi pembaruan yang diperlukan untuk memperbarui database.

    Andal SAYAntegrate DATA dengan Hevo’S Pipa Data Kode No sepenuhnya otomatis

    Jika milik Anda seperti 1000+ perusahaan berbasis data yang menggunakan Hevo, lebih dari 70% aplikasi bisnis yang Anda gunakan adalah aplikasi SaaS. Mengintegrasikan data dari sumber -sumber ini secara tepat waktu sangat penting untuk bahan bakar analitik dan keputusan yang diambil darinya. Tetapi mengingat seberapa cepat titik akhir API dll dapat berubah, menciptakan dan mengelola pipa-pipa ini bisa menjadi latihan penghisap jiwa.
    Hevo’Platform pipa data no-code memungkinkan Anda menghubungkan lebih dari 150+ sumber dalam hitungan menit untuk mengirimkan data dalam waktu dekat ke gudang Anda seperti Kepingan salju. Apa’Lebih lanjut, kemampuan transformasi yang dibangun dan UI intuitif bahkan non-rekayasa dapat mengatur pipa dan mencapai data yang siap analitik dalam hitungan menit.

    Semua ini dikombinasikan dengan harga transparan dan dukungan 24 × 7 menjadikan kami perangkat lunak pipa data yang paling dicintai dalam hal ulasan pengguna.

    Ikuti uji coba gratis 14 hari kami untuk mengalami cara yang lebih baik untuk mengelola pipa data.

    Cara membangun pipa CI/CD kepingan salju menggunakan Azure DevOps dan Flyway?

    Membangun Pipa CD Snowflake CI secara luas merupakan proses 4 langkah. Ikuti langkah -langkah yang diberikan di bawah ini untuk menjalankan dan dalam pipa CD CI kepingan salju:

    Langkah 1: Buat proyek demo

    Langkah pertama yang terlibat dalam membangun pipa CD CI kepingan salju mengharuskan Anda membuat proyek demo Azure DevOps. Ikuti langkah -langkah yang diberikan di bawah ini untuk melakukannya:

    • Buat database dan pengguna dengan memanfaatkan skrip berikut:

    -- Buat database Buat database flyway_demo comment = 'Azure DevOps Deployment Test'; Buat database flyway_demo_dev comment = 'Azure DevOps Deployment Test'; Buat database flyway_demo_qa comment = 'Azure DevOps Deployment Test'; - Buat Pengguna Deploy Buat Pengguna DevopSususer Password = '' Default_Role = sysadmin;

    • Masuk ke akun Azure DevOps Anda menggunakan kredensial yang sesuai.
    • Memilih Organisasi dan klik warna biru +Proyek baru tombol.

    

    • Berikan nama yang unik dan ringkas untuk proyek Anda. Anda juga dapat menambahkan deskripsi untuk itu. Membiarkan’S Nama proyek sebagai Snowflake_flyway Demi tutorial ini.
    • Sekarang, pilih Visibilitas Opsi untuk proyek Anda dan klik Membuat tombol.

    

    Langkah 2: Siapkan lingkungan produksi

    Anda harus memiliki lingkungan untuk menambahkan langkah persetujuan. Ikuti langkah -langkah yang diberikan di bawah ini untuk membuat lingkungan dan persetujuan yang diperlukan:

    • Kembali ke halaman beranda Azure DevOps.
    • Arahkan ke bilah navigasi sisi kiri dan klik pada Lingkungan pilihan.
    • Berikan nama unik untuk lingkungan produksi dan klik pada Membuat tombol.

    

    • Untuk membuat persetujuan untuk lingkungan produksi, klik tiga titik vertikal yang terletak di sebelah Tambahkan sumber daya tombol.
    • Klik pada Persetujuan dan cek Opsi untuk menambahkan daftar persetujuan.

    

    Langkah 3: Buat grup variabel perpustakaan

    Saat Anda memiliki satu set variabel yang akan digunakan di beberapa pipa, Anda dapat membuat grup variabel sekali dan merujuknya dalam beberapa grup. Perpustakaan digunakan untuk menyimpan variabel dan file yang akan digunakan secara aman. Ikuti langkah -langkah yang diberikan di bawah ini untuk membuat grup variabel perpustakaan:

    

    • Di bilah navigasi kiri, klik Perpustakaan hadir di bawah Saluran pipa pilihan.
    • Di Perpustakaan halaman, navigasikan ke Grup variabel tab.
    • Klik pada +Grup variabel Tombol untuk Membuat Grup Variabel Perpustakaan Baru.
    • Berikan nama unik untuk grup dan tambahkan variabel berikut.

    Snowflake_jdbc_url = jdbc: Snowflake: // snowflake_account_name =..Snowflakecomputing.com snowflake_warehouse = snowflake_rolename = sysadmin snowflake_devops_username = # mark sebagai tipe variabel rahasia snowflake_devops_secret = snowflake_authenticator = Snowflake

    

    • Setelah Anda berhasil menambahkan semua variabel, jangan lupa untuk mengklik pada Menyimpan Tombol di sebelah kanan grup variabel’nama S. Beginilah penampilan grup variabel Anda:

    Langkah 4: Buat dan jalankan pipa penyebaran CD CI kepingan salju

    Sekarang, untuk membuat pipa CD CI kepingan salju, ikuti langkah -langkah yang diberikan di bawah ini:

    • Di bilah navigasi kiri, klik pada Saluran pipa pilihan.
    • Jika Anda membuat pipa untuk pertama kalinya, klik pada Buat pipa tombol. Jika Anda sudah memiliki pipa lain yang ditentukan kemudian klik pada Pipa baru tombol.
    • Di Menghubung tab, pilih Azure repo git opsi, dan pilih repositori yang diinginkan (Snowflake_flyway) di layar berikutnya.

    

    • Di Konfigurasikan pipa Anda halaman, pilih Pipa starter pilihan.

    

    • Terakhir, tempel sepotong kode berikut ke dalam Tinjau YAML terakhir Anda halaman.

    Variabel: - Grup: Snowflake.Database - Nama: DBNAME Nilai: flyway_demo - Nama: flywayartifactname Nilai: databaseArtifacts - Nama: FlywayVMimage Nilai: 'Ubuntu -16.04 ' - Nama: FlywayContainerImage Nilai:' Kulmam92/Flyway -Azure: 6.2.3 'Trigger: - Master Stages: - Tahap: Bangun Variabel: - Nama: DBName_Postfix Nilai: _Dev Jobs: - Templat: Templat/SnowflakeflywayBuild.Parameter YML: JobName: DatabaseName 'buildDatabase': $ (dbname) databasepostfix: $ (dbname_postfix) arttifactname: $ (flywayartifactname) varabs -dev: fyrayvmimage) contontererimage: $waycontinContainerererer: $ pangkas: fyrayvmimage) contontererimage: $ ($ flywaycontainer): $ pangkas: fallwayvmimage) contontererimage: $ ($ flywaycontainererererex: fyrayvmimage) ContontanerImage: $ flywaycontainererer Pekerjaan: - Template: Templat/SnowflakeflywayDeploy.Parameter YML: JobName: dev databasename: $ (dbname) databasepostfix: $ (dbname_postfix) arttifactname: $ (flywayartifactname) varabsamage: devix -devix: containerimage: $ ($ flywaycontainererimage) lingkungan: containermage: $ ($ flywaycontainerimage) lingkungan: devixname: contontoner -tevels: $ (flywaycontainerimage) Environmersname): varabire: quallay: quallArAbabels: $ (flywaycontainerimage) Environmage): varable: deviBle: quallArabs: $ name -name: $ (flywaycontainererimage) Environmage) q. Pekerjaan: - Template: Templat/SnowflakeflywayDeploy.yml parameters: jobName: QA databaseName: $(DBNAME) databasePostfix: $(DBNAME_POSTFIX) artifactName: $(flywayartifactName) vmImage: $(flywayVmImage) containerImage: $(flywayContainerImage) environmentName: QA - stage: PROD variables: - name: DBNAME_POSTFIX value: '' # Empty string for PROD jobs: - template: templates/snowflakeFlywayDeploy.yml parameters: jobName: PROD databaseName: $(DBNAME) databasePostfix: $(DBNAME_POSTFIX) artifactName: $(flywayartifactName) vmImage: $(flywayVmImage) containerImage: $(flywayContainerImage) environmentName: PROD

    

    • Setelah Anda berhasil menambahkan kode ke editor, klik pada Simpan dan jalankan tombol.

    Setelah Anda mengikuti semua langkah yang dijelaskan di atas dalam urutan yang benar, Anda akan dapat membangun pipa CD CI Snowflake dari awal!

    Kesimpulan

    Blog ini memperkenalkan Anda pada kepingan salju bersama dengan fitur -fitur menonjol yang ditawarkannya. Selanjutnya, ia memperkenalkan Anda pada langkah -langkah yang diperlukan untuk membangun a CD Snowflake CI Pipa dari awal menggunakan Azure DevOps dan Flyway.

    Saat bisnis Anda mulai tumbuh, data dihasilkan pada tingkat eksponensial di semua perusahaan Anda’Aplikasi SaaS, database, dan sumber lainnya. Untuk memenuhi kebutuhan penyimpanan dan komputasi data yang terus meningkat ini, Anda perlu menginvestasikan sebagian dari bandwidth teknik Anda untuk mengintegrasikan data dari semua sumber, membersihkan & mengubahnya, dan akhirnya memuatnya ke gudang data cloud seperti Kepingan salju untuk analisis bisnis lebih lanjut. Semua tantangan ini dapat ditangani secara efisien oleh a Alat ETL berbasis cloud seperti data HEVO.

    Hevo Data, pipa data no-kode memberi Anda solusi yang konsisten dan andal untuk mengelola transfer data antara berbagai sumber dan berbagai tujuan yang diinginkan seperti Kepingan salju, dengan beberapa klik. Data hevo dengan integrasi yang kuat dengan 100+ sumber (termasuk 40+ sumber bebas) memungkinkan Anda untuk tidak hanya mengekspor data dari sumber data yang Anda inginkan & memuatnya ke tujuan pilihan Anda, tetapi juga mengubah & memperkaya data Anda untuk membuatnya siap analisis sehingga Anda dapat fokus pada kebutuhan bisnis utama Anda dan melakukan analisis yang mendalam menggunakan BI Tool.

    Ingin mengambil hevo untuk putaran? Daftar di sini untuk a Uji coba gratis 14 hari dan mengalami hevo suite yang kaya fitur secara langsung. Anda juga dapat melihat harga kami yang tidak ada duanya yang akan membantu Anda memilih rencana yang tepat untuk kebutuhan bisnis Anda!

    Bagikan pengalaman Anda membangun a Snowflake CI CD Pipeline Di komentar di bawah!

    Kepingan salju

    Level Dukungan Menentukan Tingkat Dukungan yang Tersedia untuk Basis Data ini (Pelajari Lebih Lanjut).

    Pengemudi

    Format URL	JDBC: Snowflake: //akun.Snowflakecomputing.com/?db =database& gudang =gudang& peran =peran (Opsial & Schema =skema untuk menentukan skema saat ini)
    Kapal dengan baris perintah terbang	Ya
    Koordinat pusat Maven	bersih.Snowflake: Snowflake-JDBC: 3.6.23
    Versi yang didukung	3.6.23 dan yang lebih baru
    Kelas Java default	bersih.kepingan salju.klien.jdbc.Snowflakedriver

    Sintaks skrip SQL

    • Sintaks SQL standar dengan pembatas pernyataan ;

    Kesesuaian

    • DDL Diekspor oleh Web Snowflake GUI dapat digunakan tidak berubah dalam migrasi jalur terbang
    • Setiap skrip SQL yang dieksekusi oleh Flyway, dapat dieksekusi oleh Web GUI kepingan salju (setelah placeholder diganti)
    • Pengemudi kepingan salju membutuhkan Java 8+. Tidak ada dukungan dari Snowflake untuk pengguna Java 7.

    Contoh

    / * Komentar baris tunggal */ buat tabel test_data (nilai varchar (25) bukan null kunci primer); / * Komentar multi-line */-Komentar bergaya SQL-Placeholder Insert Into $ (Name) Values ​​('MR. T');

    Otentikasi Berbasis Kunci

    Snowflake JDBC mendukung otentikasi berbasis kunci. Untuk menggunakan ini, Anda harus:

    • Pastikan Anda menggunakan setidaknya V3.11 dari pengemudi JDBC Snowflake (Flyway saat ini dikirimkan dengan versi ini)
    • menghasilkan pasangan kunci publik/pribadi
    • Tetapkan kunci publik ke akun pengguna Snowflake yang relevan menggunakan Ubah Pengguna – untuk instruksi lengkap pada langkah -langkah ini, lihat Snowflake’Dokumentasi S

    Akhirnya, ubah string koneksi JDBC Anda dengan parameter tambahan untuk mengaktifkan auth berbasis kunci dan merujuk ke lokasi kunci pribadi: authenticator = snowflake_jwt & private_key_file = .

    Batasan

    • Migrasi paralel seperti yang dijelaskan di sini tidak tersedia dalam kepingan salju. Anda dapat melacak status fitur ini dalam masalah GitHub kami di sini.

    Integrasi terbang dengan git dan menghubungkan ke kepingan salju

    Kami memiliki database yang ada dengan beberapa tabel dan setiap kali kami melakukan perubahan pada skema beberapa tabel kami harus menjalankan beberapa skrip manual untuk menghindari kehilangan data apa pun. Kami mencari perangkat lunak yang dapat berintegrasi dengan repo git kami dan menghasilkan DDL yang diperbarui untuk database. Saya menemukan alat migrasi basis data terbang dan melalui dokumentasi memiliki pertanyaan ini tentang integrasi dengan kode repo di mana perubahan skema database didorong. Juga melakukan pekerjaan terbang dengan kepingan salju. Jika ya, di mana saya bisa menambahkan driver JDBC yang diperlukan untuk terhubung ke database dan apa yang akan menjadi .File conf untuk koneksi kepingan salju.

    Ditanya 22 Feb 2019 pukul 20:12

    67 4 4 Lencana Perak 18 18 Lencana Perunggu

    3 Jawaban 3

    Secara resmi terbang tidak bekerja dengan kepingan salju saat ini (seperti yang Anda lihat di sana https: // github.com/flyway/flyway/pull/2274). Menurut diskusi ini tampaknya ada garpu yang kompatibel dengan kepingan salju yang ada, namun saya tidak akan merekomendasikan untuk melakukannya pada sistem produksi tanpa memeriksanya, tetapi jika Anda benar-benar membutuhkannya, mungkin ada baiknya melihatnya.

    Mengenai integrasi terbang dengan GIT, Anda dapat mengintegrasikan Flyway dalam proses CI Anda, dengan menarik gambar Docker Flyway (https: // github.com/flyway/flyway -docker) – atau menggunakan gambar Anda sendiri jika Anda memutuskan untuk mencari garpu yang kompatibel dengan kepingan salju – dan menjalankan perintah migrasi terhadap database target Anda.

    Dijawab 12 Mar 2019 jam 16:02

    11 1 1 Lencana Perak 2 2 Lencana Perunggu

    Terima kasih balasannya. Kompatibilitas terbang dengan database lain bagus. Kami sedang melihat opsinya. Menantikan Anda untuk menambahkan opsi kepingan salju

    13 Mar 2019 jam 5:55

    Saya bukan orang yang mengerjakan permintaan tarik ini sayangnya 🙂 Tapi tim saya berlari dalam masalah yang sama persis seperti Anda. Saya pikir Anda dapat memeriksa Liquibase dan Sqitch !

    Kepingan salju

    Level Dukungan Menentukan Tingkat Dukungan yang Tersedia untuk Basis Data ini (Pelajari Lebih Lanjut).

    Pengemudi

    Format URL	JDBC: Snowflake: //akun.Snowflakecomputing.com/?db =database& gudang =gudang& peran =peran (Opsial & Schema =skema untuk menentukan skema saat ini)
    Kapal dengan baris perintah terbang	Ya
    Koordinat pusat Maven	bersih.Snowflake: Snowflake-JDBC
    Versi yang didukung	3.6.23 dan yang lebih baru
    Kelas Java default	bersih.kepingan salju.klien.jdbc.Snowflakedriver

    Sintaks skrip SQL

    • Sintaks SQL standar dengan pembatas pernyataan ;

    Kesesuaian

    • DDL Diekspor oleh Web Snowflake GUI dapat digunakan tidak berubah dalam migrasi jalur terbang
    • Setiap skrip SQL yang dieksekusi oleh Flyway, dapat dieksekusi oleh Web GUI kepingan salju (setelah placeholder diganti)
    • Pengemudi kepingan salju membutuhkan Java 8+. Tidak ada dukungan dari Snowflake untuk pengguna Java 7.

    Contoh

    / * Komentar baris tunggal */ buat tabel test_data (nilai varchar (25) bukan null kunci primer); / * Komentar multi-line */-Komentar bergaya SQL-Placeholder Insert Into $ (Name) Values ​​('MR. T');

    Otentikasi Berbasis Kunci

    Snowflake JDBC mendukung otentikasi berbasis kunci. Untuk menggunakan ini, Anda harus:

    • Pastikan Anda menggunakan setidaknya V3.11 dari pengemudi JDBC Snowflake (Flyway saat ini dikirimkan dengan versi ini)
    • menghasilkan pasangan kunci publik/pribadi
    • Tetapkan kunci publik ke akun pengguna Snowflake yang relevan menggunakan Alter User – untuk instruksi lengkap pada langkah -langkah ini, lihat dokumentasi Snowflake

    Akhirnya, ubah string koneksi JDBC Anda dengan parameter tambahan untuk mengaktifkan auth berbasis kunci dan merujuk ke lokasi kunci pribadi: authenticator = snowflake_jwt & private_key_file = .

    Batasan

    • Migrasi paralel seperti yang dijelaskan di sini tidak tersedia dalam kepingan salju. Anda dapat melacak status fitur ini dalam masalah GitHub kami di sini.
    • Pengguna yang menggunakan Java 16 atau lebih, yang termasuk JRE yang dikirim dalam baris perintah Java, perlu menambahkan argumen JVM berikut ke java_args –add-opens Java.Base/Java.Lang = All-Nams . Ini dapat dilakukan melalui baris perintah atau variabel lingkungan ini karena perubahan dalam runtime Java 16 yang menyebabkan kesalahan dalam pengemudi JDBC kepingan salju.

    Tidak menemukan apa yang Anda cari?

    • Kunjungi Forum Redgate
    • Dukungan kontak