Testing

Pengujian: pembaruan dan plugin

Daftar periksa untuk validasi pembaruan dan plugin: buktikan bahwa paket yang dapat diinstal bisa memperbarui status pengguna nyata, memperbaiki status legasi yang usang melalui doctor, dan tetap dapat menginstal, memuat, memperbarui, serta menghapus instalasi plugin dari setiap sumber yang didukung.

Untuk peta runner pengujian yang lebih luas, lihat Pengujian. Untuk kunci penyedia langsung dan rangkaian pengujian yang mengakses jaringan, lihat Pengujian langsung.

Yang kami lindungi

  • Tarball paket lengkap, memiliki dist/postinstall-inventory.json yang valid, dan tidak bergantung pada berkas repositori yang belum dikemas.
  • Pengguna dapat berpindah dari paket lama yang telah dipublikasikan ke paket kandidat tanpa kehilangan konfigurasi, agen, sesi, ruang kerja, daftar izin plugin, atau konfigurasi kanal.
  • openclaw doctor --fix --non-interactive menangani jalur pembersihan dan perbaikan legasi. Proses startup tidak boleh menambahkan migrasi kompatibilitas tersembunyi untuk status plugin yang usang.
  • Instalasi plugin berfungsi dari direktori lokal, repositori git, paket npm, dan jalur registri ClawHub.
  • Dependensi npm plugin diinstal dalam satu proyek npm terkelola per plugin, dipindai sebelum dipercaya, dan dihapus melalui npm uninstall saat penghapusan instalasi plugin agar dependensi yang dinaikkan tidak tertinggal.
  • Pembaruan plugin tidak melakukan apa pun ketika tidak ada perubahan: catatan instalasi, sumber yang diselesaikan, tata letak dependensi yang terinstal, dan status aktif tetap utuh.

Pembuktian lokal selama pengembangan

Mulai dari lingkup sempit:

bash
pnpm changed:lanes --jsonpnpm check:changedpnpm test:changed

Untuk perubahan instalasi, penghapusan instalasi, dependensi, atau inventaris paket plugin, jalankan juga pengujian terfokus yang mencakup batas yang diedit:

bash
pnpm test src/plugins/uninstall.test.ts src/infra/package-dist-inventory.test.ts test/scripts/package-acceptance-workflow.test.ts

Sebelum jalur Docker paket menggunakan tarball, buktikan artefak paket:

bash
pnpm release:check

release:check menjalankan pemeriksaan penyimpangan konfigurasi/dokumentasi/API (skema konfigurasi, garis dasar dokumentasi konfigurasi, garis dasar API dan ekspor SDK plugin, versi/inventaris plugin), menulis inventaris distribusi paket, menjalankan npm pack --dry-run, menolak berkas terlarang yang dikemas, menginstal tarball ke prefiks sementara, menjalankan pascainstalasi, dan melakukan uji asap terhadap titik masuk kanal bawaan.

Jalur Docker

Jalur Docker merupakan pembuktian tingkat produk. Jalur ini menginstal atau memperbarui paket nyata di dalam kontainer Linux dan memverifikasi perilaku melalui perintah CLI, startup Gateway, pemeriksaan HTTP, status RPC, dan status sistem berkas.

Gunakan jalur terfokus selama iterasi:

bash
pnpm test:docker:pluginspnpm test:docker:plugin-lifecycle-matrixpnpm test:docker:plugin-updatepnpm test:docker:upgrade-survivorpnpm test:docker:published-upgrade-survivorpnpm test:docker:update-restart-authpnpm test:docker:update-migration

Jalur penting:

  • test:docker:plugins mencakup uji asap instalasi plugin, instalasi folder lokal, perilaku melewati pembaruan folder lokal, folder lokal dengan dependensi yang telah diinstal, instalasi paket file:, instalasi git dengan eksekusi CLI, pembaruan referensi bergerak git, instalasi registri npm dengan dependensi transitif yang dinaikkan, pembaruan npm tanpa operasi, penolakan metadata paket npm yang rusak, instalasi fixture ClawHub lokal dan pembaruan tanpa operasi, perilaku pembaruan marketplace, serta pengaktifan/pemeriksaan bundel Claude. Tetapkan OPENCLAW_PLUGINS_E2E_CLAWHUB=0 untuk menjaga blok ClawHub tetap hermetis/luring.
  • test:docker:plugin-lifecycle-matrix menginstal paket kandidat dalam kontainer kosong, menjalankan plugin npm melalui instalasi, pemeriksaan, penonaktifan, pengaktifan, peningkatan eksplisit, penurunan versi eksplisit, dan penghapusan instalasi setelah menghapus kode plugin. Jalur ini mencatat metrik RSS dan CPU per fase.
  • test:docker:plugin-update memvalidasi bahwa plugin terinstal yang tidak berubah tidak diinstal ulang atau kehilangan metadata instalasi selama openclaw plugins update.
  • test:docker:upgrade-survivor menginstal tarball kandidat di atas fixture pengguna lama yang kotor, menjalankan pembaruan paket beserta doctor noninteraktif, kemudian memulai Gateway local loopback dan memeriksa preservasi status.
  • test:docker:published-upgrade-survivor terlebih dahulu menginstal garis dasar yang dipublikasikan, mengonfigurasinya melalui resep openclaw config set bawaan, memperbaruinya ke tarball kandidat, menjalankan doctor, memeriksa pembersihan legasi, memulai Gateway, dan memeriksa /healthz, /readyz, serta status RPC.
  • test:docker:update-restart-auth menginstal paket kandidat, memulai Gateway autentikasi token terkelola, menghapus env autentikasi gateway pemanggil untuk openclaw update --yes --json, dan mengharuskan perintah pembaruan kandidat untuk memulai ulang Gateway sebelum pemeriksaan normal.
  • test:docker:update-migration adalah jalur pembaruan terpublikasi yang sarat pembersihan. Jalur ini dimulai dari status pengguna bergaya Discord/Telegram yang telah dikonfigurasi, menjalankan doctor garis dasar agar dependensi plugin yang dikonfigurasi mendapat kesempatan untuk terbentuk, menanam sisa dependensi plugin legasi untuk plugin terkemas yang dikonfigurasi, memperbarui ke tarball kandidat, dan mengharuskan doctor pascapembaruan menghapus akar dependensi legasi.

Varian survivor peningkatan terpublikasi yang berguna:

bash
OPENCLAW_UPGRADE_SURVIVOR_BASELINE_SPEC=openclaw@2026.4.23 \OPENCLAW_UPGRADE_SURVIVOR_SCENARIO=versioned-runtime-deps \pnpm test:docker:published-upgrade-survivor OPENCLAW_UPGRADE_SURVIVOR_BASELINE_SPEC=openclaw@latest \OPENCLAW_UPGRADE_SURVIVOR_SCENARIO=bootstrap-persona \pnpm test:docker:published-upgrade-survivor

Skenario yang tersedia: base, acpx-openclaw-tools-bridge, feishu-channel, bootstrap-persona, channel-post-core-restore, plugin-deps-cleanup, configured-plugin-installs, stale-source-plugin-shadow, tilde-log-path, dan versioned-runtime-deps. Dalam proses agregat, OPENCLAW_UPGRADE_SURVIVOR_SCENARIOS=reported-issues (alias far-reaching) diperluas ke semua skenario, termasuk migrasi instalasi plugin yang dikonfigurasi.

Migrasi pembaruan penuh sengaja dipisahkan dari CI Rilis Penuh. Gunakan alur kerja manual Update Migration ketika pertanyaan rilisnya adalah "dapatkah setiap rilis stabil yang dipublikasikan sejak 2026.4.23 diperbarui ke kandidat ini dan membersihkan sisa dependensi plugin?":

bash
gh workflow run update-migration.yml \  --ref main \  -f workflow_ref=main \  -f package_ref=main \  -f baselines=all-since-2026.4.23 \  -f scenarios=plugin-deps-cleanup

Penerimaan Paket

Penerimaan Paket adalah gerbang paket bawaan GitHub. Proses ini menyelesaikan satu paket kandidat menjadi tarball package-under-test, mencatat versi dan SHA-256, kemudian menjalankan jalur E2E Docker yang dapat digunakan kembali terhadap tarball persis tersebut. Referensi harness alur kerja terpisah dari referensi sumber paket, sehingga logika pengujian saat ini dapat memvalidasi rilis tepercaya yang lebih lama.

Sumber kandidat:

  • source=npm: validasi openclaw@extended-stable, openclaw@beta, openclaw@latest, atau versi terpublikasi yang tepat.
  • source=ref: kemas cabang, tag, atau commit tepercaya dengan harness saat ini yang dipilih.
  • source=url: validasi tarball HTTPS publik dengan package_sha256 wajib. Jalur ini menolak kredensial URL, port HTTPS nonbawaan, nama host atau hasil DNS/IP privat/internal, ruang IP penggunaan khusus, dan pengalihan yang tidak aman.
  • source=trusted-url: validasi tarball HTTPS dengan package_sha256 dan trusted_source_id wajib terhadap kebijakan milik pengelola di .github/package-trusted-sources.json. Gunakan ini untuk mirror perusahaan/privat alih-alih melemahkan source=url dengan sakelar izinkan-privat pada tingkat input. Autentikasi bearer, ketika dikonfigurasi oleh kebijakan, menggunakan rahasia tetap OPENCLAW_TRUSTED_PACKAGE_TOKEN.
  • source=artifact: gunakan kembali tarball yang diunggah oleh proses Actions lain.

Validasi Rilis Penuh menggunakan source=artifact secara bawaan, yang dibangun dari SHA rilis yang diselesaikan. Untuk pembuktian pascapublikasi, teruskan package_acceptance_package_spec=openclaw@YYYY.M.PATCH agar matriks peningkatan yang sama menargetkan paket npm yang telah dirilis.

Pemeriksaan rilis memanggil Penerimaan Paket dengan kumpulan paket/pembaruan/mulai ulang/plugin:

text
doctor-switch update-channel-switch skill-install update-corrupt-plugin upgrade-survivor published-upgrade-survivor root-managed-vps-upgrade update-restart-auth plugins-offline plugin-update plugin-binding-command-escape

Ketika perendaman rilis diaktifkan (dipaksakan aktif untuk release_profile=stable dan full), pemeriksaan juga meneruskan:

text
published_upgrade_survivor_baselines=last-stable-4 2026.4.23 2026.5.2 2026.4.15published_upgrade_survivor_scenarios=reported-issuestelegram_mode=mock-openai

Hal ini menjaga migrasi paket, peralihan kanal pembaruan, toleransi terhadap plugin terkelola yang rusak, pembersihan dependensi plugin usang, cakupan plugin luring, perilaku pembaruan plugin, dan QA paket Telegram pada artefak terselesaikan yang sama tanpa mengharuskan gerbang paket rilis bawaan melewati setiap rilis terpublikasi.

last-stable-4 diselesaikan menjadi empat rilis OpenClaw stabil terbaru yang dipublikasikan di npm. Penerimaan paket rilis menetapkan 2026.4.23 sebagai batas kompatibilitas pembaruan plugin pertama, 2026.5.2 sebagai batas perubahan besar arsitektur plugin, dan 2026.4.15 sebagai garis dasar pembaruan terpublikasi 2026.4.1x yang lebih lama; resolver menghapus duplikasi sematan yang sudah termasuk dalam empat versi terbaru. Untuk cakupan migrasi pembaruan terpublikasi yang menyeluruh, gunakan all-since-2026.4.23 dalam alur kerja Migrasi Pembaruan terpisah, bukan CI Rilis Penuh. release-history tetap tersedia untuk pengambilan sampel manual yang lebih luas ketika Anda juga menginginkan jangkar legasi sebelum tanggal tersebut.

Ketika beberapa garis dasar survivor peningkatan terpublikasi dipilih, alur kerja Docker yang dapat digunakan kembali membagi setiap garis dasar menjadi tugas runner tertarget tersendiri. Setiap shard garis dasar tetap menjalankan kumpulan skenario yang dipilih, tetapi log dan artefak tetap terpisah per garis dasar dan waktu keseluruhan dibatasi oleh shard paling lambat, bukan oleh satu tugas serial besar.

Jalankan profil paket secara manual saat memvalidasi kandidat sebelum rilis:

bash
gh workflow run package-acceptance.yml \  --ref main \  -f workflow_ref=main \  -f source=npm \  -f package_spec=openclaw@beta \  -f suite_profile=package \  -f published_upgrade_survivor_baselines="last-stable-4 2026.4.23 2026.5.2 2026.4.15" \  -f published_upgrade_survivor_scenarios=reported-issues \  -f telegram_mode=mock-openai

Untuk canary extended-stable terpublikasi, tetapkan package_spec=openclaw@extended-stable. Penerimaan Paket menyelesaikan pemilih tersebut menjadi tarball yang tepat sebelum jalur Docker dijalankan.

Gunakan suite_profile=product ketika pertanyaan rilis mencakup kanal MCP, pembersihan cron/subagen, pencarian web OpenAI, atau OpenWebUI. Gunakan suite_profile=full hanya ketika Anda memerlukan cakupan penuh jalur rilis Docker.

Bawaan rilis

Untuk kandidat rilis, tumpukan pembuktian bawaan adalah:

  1. pnpm check:changed dan pnpm test:changed untuk regresi tingkat sumber.
  2. pnpm release:check untuk integritas artefak paket.
  3. Profil package Penerimaan Paket atau jalur paket khusus pemeriksaan rilis untuk kontrak instalasi/pembaruan/mulai ulang/plugin.
  4. Pemeriksaan rilis lintas OS untuk perilaku penginstal, orientasi awal, dan platform khusus OS.
  5. Rangkaian langsung hanya ketika permukaan yang diubah menyentuh perilaku penyedia atau layanan terhost.

Pada mesin pengelola, gerbang luas dan pembuktian produk Docker/paket sebaiknya dijalankan di Testbox kecuali secara eksplisit melakukan pembuktian lokal.

Kompatibilitas legasi

Kelonggaran kompatibilitas bersifat sempit dan dibatasi waktu:

  • Paket hingga 2026.4.25, termasuk 2026.4.25-beta.*, dapat menoleransi kekurangan metadata paket yang telah dirilis dalam Penerimaan Paket.
  • Paket 2026.4.26 yang dipublikasikan dapat memperingatkan tentang berkas stempel metadata build lokal yang telah dirilis.
  • Paket yang lebih baru harus memenuhi kontrak modern. Kekurangan yang sama akan gagal alih-alih hanya memperingatkan atau dilewati.

Jangan tambahkan migrasi startup baru untuk bentuk lama ini. Tambahkan atau perluas perbaikan doctor, lalu buktikan dengan upgrade-survivor, published-upgrade-survivor, atau update-restart-auth ketika perintah pembaruan menangani mulai ulang.

Menambahkan cakupan

Saat mengubah perilaku pembaruan atau plugin, tambahkan cakupan pada lapisan terendah yang dapat gagal karena alasan yang tepat:

  • Logika jalur atau metadata murni: pengujian unit di samping sumber.
  • Inventaris paket atau perilaku berkas yang dikemas: pengujian pemeriksa package-dist-inventory atau tarball.
  • Perilaku pemasangan/pembaruan CLI: asersi jalur Docker atau fixture.
  • Perilaku migrasi rilis yang telah dipublikasikan: skenario published-upgrade-survivor.
  • Perilaku mulai ulang yang dimiliki pembaruan: update-restart-auth.
  • Perilaku sumber registri/paket: fixture test:docker:plugins atau server fixture ClawHub.
  • Tata letak dependensi atau perilaku pembersihan: asersikan eksekusi runtime dan batas sistem berkas. Dependensi npm dapat dinaikkan ke dalam proyek npm terkelola milik plugin, sehingga pengujian harus membuktikan bahwa proyek tersebut dipindai/dibersihkan alih-alih mengasumsikan hanya pohon node_modules lokal paket plugin.

Secara default, pertahankan fixture Docker baru agar terisolasi. Gunakan registri fixture lokal dan paket palsu, kecuali tujuan pengujian adalah perilaku registri langsung.

Triase kegagalan

Mulailah dengan identitas artefak:

  • Ringkasan resolve_package Package Acceptance: sumber, versi, SHA-256, dan nama artefak.
  • Artefak Docker: .artifacts/docker-tests/**/summary.json, failures.json, log jalur, dan perintah untuk menjalankan ulang.
  • Ringkasan kelangsungan pemutakhiran: .artifacts/upgrade-survivor/summary.json, termasuk versi dasar, versi kandidat, skenario, waktu setiap fase, dan cakupan resep konfigurasi.

Utamakan menjalankan ulang jalur spesifik yang gagal dengan artefak paket yang sama daripada menjalankan ulang seluruh rangkaian rilis.

Was this useful?
On this page

On this page