DSL deployment yang aman memberi agen LLM cara terbatas untuk mengusulkan dan menjalankan perubahan infrastruktur tanpa akses ke shell bebas. Kuncinya bukan membuat model selalu benar, melainkan memastikan setiap rencana divalidasi, ditinjau, dan dijalankan oleh executor deterministik dengan aksi yang diizinkan secara eksplisit.

Bahasa khusus domain (DSL) juga membantu operator membaca maksud rilis tanpa menafsirkan skrip umum. Artikel ini merancang DSL kecil untuk deployment bertahap, pemeriksaan kesehatan, dan rollback, termasuk batas keamanan serta prosedur pascainsiden.

Mengapa DSL lebih aman daripada perintah bebas

Jika agen dapat mengeluarkan perintah shell arbitrer, batas antara usulan dan eksekusi menjadi kabur. Prompt, keluaran model, atau data yang tidak tepercaya dapat memicu perintah di luar maksud rilis. Perintah bebas juga sulit diaudit secara konsisten karena efeknya bergantung pada lingkungan, variabel, dan interpretasi shell.

DSL mengganti ruang perintah yang luas dengan kontrak kecil. Misalnya, agen boleh memilih versi artefak, jumlah replika bertahap, pemeriksaan kesehatan yang sudah terdaftar, dan kebijakan rollback. Agen tidak boleh menentukan executable, menulis skrip, atau mengubah target produksi sesuka hati.

  • Kontrak eksplisit: skema menjelaskan field wajib, tipe data, nilai yang diizinkan, dan batas input.
  • Perilaku deterministik: executor menafsirkan konfigurasi dengan aturan tetap, bukan menebak maksud teks bebas.
  • Audit yang jelas: rencana, persetujuan, aksi, dan hasil dapat dicatat sebagai kejadian terstruktur.
  • Pemisahan tanggung jawab: model menyusun rencana; validator, kebijakan, dan executor menentukan apakah rencana boleh dijalankan.

Tren DSL khusus untuk alur kerja yang melibatkan LLM, seperti dibahas dalam artikel William Cotton, berguna sebagai konteks: DSL tetap bernilai ketika memperjelas batas dan kontrak domain. DSL deployment tidak perlu menjadi bahasa tujuan umum. Semakin kecil permukaan ekspresinya, semakin mudah aturan keamanan dan perilakunya diperiksa.

Rancang permukaan DSL yang kecil dan terbatas

Mulai dari operasi yang benar-benar dibutuhkan. Hindari fitur seperti ekspresi arbitrer, interpolasi string, plugin yang dapat menjalankan kode, atau pemanggilan shell. Gunakan nama layanan, lingkungan, pemeriksaan, dan strategi yang dipetakan ke nilai yang telah dikonfigurasi di sisi server.

Contoh berikut mendefinisikan rilis bertahap. Nama pemeriksaan kesehatan merujuk pada pemeriksaan yang sudah terdaftar; konfigurasi tidak membawa URL atau perintah baru yang akan dijalankan langsung.

apiVersion: deploy.example/v1
release:
  service: payments
  environment: production
  artifact: sha256:8f2c...
  rollout:
    steps:
      - replicas: 1
        observe: 5m
      - replicas: 3
        observe: 10m
      - replicas: 6
        observe: 15m
  health:
    checks: [http_success_rate, error_rate, latency_p95]
    thresholds:
      error_rate_max: 0.02
      latency_p95_max_ms: 500
  rollback:
    on_threshold_breach: previous_stable

Contoh ini mengasumsikan bahwa payments, production, pemeriksaan metrik, serta arti previous_stable ditetapkan oleh sistem deployment. DSL hanya memilih dari katalog tersebut. Ambang di atas adalah contoh kebijakan, bukan rekomendasi universal; tetapkan nilai berdasarkan SLO dan karakteristik layanan.

Tetapkan batas input sebelum eksekusi

Validasi sintaks saja tidak cukup. Validator perlu memeriksa skema dan batas semantik, seperti jumlah langkah maksimum, rentang durasi observasi, jenis artefak yang diterima, serta apakah layanan dan lingkungan boleh dipasangkan. Tolak field yang tidak dikenal agar salah ketik atau percobaan memperluas kemampuan tidak diabaikan diam-diam.

  • Batasi ukuran dokumen, panjang string, jumlah langkah, dan rentang angka.
  • Terima hanya referensi artefak yang dapat diverifikasi, misalnya digest yang cocok dengan format dan kebijakan registry.
  • Pastikan nama layanan, lingkungan, pemeriksaan, dan strategi rollback termasuk allowlist.
  • Tolak nilai duplikat atau konflik yang dapat membuat interpretasi berbeda antar-komponen.
  • Jangan memasukkan nilai DSL ke shell atau membangun perintah dengan konkatenasi string.

Jalankan alur rilis dengan gerbang yang dapat diaudit

  1. Validasi. Parse dokumen dengan parser yang sesuai format, validasi skema, lalu periksa batas semantik dan otorisasi terhadap identitas peminta. Data valid belum tentu berwenang untuk dijalankan.
  2. Tampilkan rencana. Ubah DSL menjadi rencana kanonis yang memuat target, digest artefak, tahap, pemeriksaan, ambang, dan tindakan rollback. Tampilkan rencana tersebut sebelum eksekusi. Persetujuan harus terikat pada rencana kanonis, bukan sekadar teks percakapan.
  3. Batasi aksi. Executor hanya menyediakan operasi terdaftar, misalnya mengatur replika layanan tertentu atau membaca metrik yang ditentukan. Terapkan autentikasi, otorisasi, dan cakupan lingkungan pada executor; jangan mengandalkan prompt sebagai kontrol keamanan.
  4. Amati hasil. Setelah setiap tahap, evaluasi metrik dan pemeriksaan kesehatan selama jendela yang ditetapkan. Gunakan sumber data dan aturan agregasi yang konsisten, serta catat nilai, waktu, dan alasan keputusan.
  5. Hentikan atau rollback. Jika ambang gagal, jangan lanjutkan tahap berikutnya. Jalankan kebijakan rollback yang telah diotorisasi, lalu verifikasi kondisi layanan. Jika status observasi tidak tersedia atau tidak dapat dipercaya, perlakukan hasil sebagai tidak diketahui dan hentikan promosi.

Executor sebaiknya menjadi satu-satunya komponen yang melakukan perubahan. Rencana yang sama harus menghasilkan aksi yang sama untuk keadaan awal dan kebijakan yang sama. Untuk mengurangi efek duplikat saat percobaan ulang, gunakan ID operasi atau kunci idempotensi pada batas eksekusi, dan simpan status tahap secara persisten.

Pemisahan keamanan, kegagalan, dan debugging

Jangan anggap keluaran model sebagai otorisasi

Model dapat membuat konfigurasi yang tampak masuk akal tetapi salah, atau menerima instruksi bermusuhan dari konteks. Perlakukan seluruh keluarannya sebagai input yang tidak tepercaya. Validasi ulang di server, terapkan kebijakan akses berdasarkan identitas manusia atau layanan yang meminta, dan pisahkan kredensial deployment dari konteks model. Jangan berikan rahasia kepada model jika rencana dapat dibuat tanpa rahasia.

Gunakan batas lingkungan yang jelas. Kredensial untuk satu layanan atau lingkungan tidak boleh memberi akses ke target lain. Tindakan berdampak besar dapat memerlukan persetujuan manusia, tetapi persetujuan tidak menggantikan validasi dan pemeriksaan otorisasi.

Rancang kegagalan agar terlihat

Catat ID permintaan, versi DSL, hash rencana, identitas peminta, keputusan validasi, persetujuan, aksi executor, dan hasil pemeriksaan. Hindari mencatat token, kredensial, atau data sensitif. Pesan kesalahan perlu menyebut field dan aturan yang gagal tanpa membocorkan rahasia internal.

Untuk debugging, bandingkan dokumen sumber dengan rencana kanonis, periksa versi kebijakan yang digunakan, lalu telusuri kejadian setiap tahap. Bedakan kegagalan deployment dari kegagalan sistem observabilitas: keduanya tidak boleh menghasilkan keputusan promosi yang sama.

Prosedur pascainsiden dan batasan

Setelah insiden, pertahankan log dan rencana yang relevan, pastikan layanan berada pada kondisi aman, lalu tentukan apakah pemicu berasal dari artefak, ambang, data metrik, executor, atau proses persetujuan. Catat garis waktu keputusan, perubahan yang benar-benar terjadi, dan hasil rollback. Setelah penyebab diketahui, perbarui kebijakan atau DSL melalui perubahan yang ditinjau dan diuji; jangan memperluas aksi yang diizinkan sebagai respons darurat tanpa kontrol.

DSL tidak menjamin deployment bebas insiden. Ambang dapat keliru, metrik dapat terlambat, rollback dapat gagal, dan konfigurasi yang valid tetap dapat membawa perubahan aplikasi yang rusak. Rollback juga tidak selalu membalikkan efek samping seperti migrasi skema atau pengiriman pesan. Rancang kompatibilitas perubahan data, prosedur pemulihan, serta pengujian kebijakan secara terpisah.

Sebelum produksi, uji parser, validator, evaluator ambang, dan transisi status dengan kasus valid maupun tidak valid. Jalankan mode simulasi yang menghasilkan rencana tanpa mengubah sistem, lalu uji kegagalan observasi dan pengulangan permintaan. Mulailah dengan daftar operasi yang sempit; tambahkan kemampuan hanya saat ada kebutuhan operasional yang jelas dan kontrolnya dapat diaudit.