Testing
Pengujian: pembaruan dan plugin
Daftar periksa untuk validasi pembaruan dan plugin: buktikan bahwa paket yang dapat diinstal bisa
memperbarui status pengguna nyata, memperbaiki status legasi yang usang melalui doctor, dan tetap
dapat menginstal, memuat, memperbarui, serta menghapus instalasi plugin dari setiap sumber yang didukung.
Untuk peta runner pengujian yang lebih luas, lihat Pengujian. Untuk kunci penyedia langsung dan rangkaian pengujian yang mengakses jaringan, lihat Pengujian langsung.
Yang kami lindungi
- Tarball paket lengkap, memiliki
dist/postinstall-inventory.jsonyang valid, dan tidak bergantung pada berkas repositori yang belum dikemas. - Pengguna dapat berpindah dari paket lama yang telah dipublikasikan ke paket kandidat tanpa kehilangan konfigurasi, agen, sesi, ruang kerja, daftar izin plugin, atau konfigurasi kanal.
openclaw doctor --fix --non-interactivemenangani jalur pembersihan dan perbaikan legasi. Proses startup tidak boleh menambahkan migrasi kompatibilitas tersembunyi untuk status plugin yang usang.- Instalasi plugin berfungsi dari direktori lokal, repositori git, paket npm, dan jalur registri ClawHub.
- Dependensi npm plugin diinstal dalam satu proyek npm terkelola per plugin,
dipindai sebelum dipercaya, dan dihapus melalui
npm uninstallsaat penghapusan instalasi plugin agar dependensi yang dinaikkan tidak tertinggal. - Pembaruan plugin tidak melakukan apa pun ketika tidak ada perubahan: catatan instalasi, sumber yang diselesaikan, tata letak dependensi yang terinstal, dan status aktif tetap utuh.
Pembuktian lokal selama pengembangan
Mulai dari lingkup sempit:
pnpm changed:lanes --jsonpnpm check:changedpnpm test:changedUntuk perubahan instalasi, penghapusan instalasi, dependensi, atau inventaris paket plugin, jalankan juga pengujian terfokus yang mencakup batas yang diedit:
pnpm test src/plugins/uninstall.test.ts src/infra/package-dist-inventory.test.ts test/scripts/package-acceptance-workflow.test.tsSebelum jalur Docker paket menggunakan tarball, buktikan artefak paket:
pnpm release:checkrelease:check menjalankan pemeriksaan penyimpangan konfigurasi/dokumentasi/API (skema konfigurasi, garis dasar
dokumentasi konfigurasi, garis dasar API dan ekspor SDK plugin, versi/inventaris plugin),
menulis inventaris distribusi paket, menjalankan npm pack --dry-run, menolak
berkas terlarang yang dikemas, menginstal tarball ke prefiks sementara, menjalankan pascainstalasi, dan
melakukan uji asap terhadap titik masuk kanal bawaan.
Jalur Docker
Jalur Docker merupakan pembuktian tingkat produk. Jalur ini menginstal atau memperbarui paket nyata di dalam kontainer Linux dan memverifikasi perilaku melalui perintah CLI, startup Gateway, pemeriksaan HTTP, status RPC, dan status sistem berkas.
Gunakan jalur terfokus selama iterasi:
pnpm test:docker:pluginspnpm test:docker:plugin-lifecycle-matrixpnpm test:docker:plugin-updatepnpm test:docker:upgrade-survivorpnpm test:docker:published-upgrade-survivorpnpm test:docker:update-restart-authpnpm test:docker:update-migrationJalur penting:
test:docker:pluginsmencakup uji asap instalasi plugin, instalasi folder lokal, perilaku melewati pembaruan folder lokal, folder lokal dengan dependensi yang telah diinstal, instalasi paketfile:, instalasi git dengan eksekusi CLI, pembaruan referensi bergerak git, instalasi registri npm dengan dependensi transitif yang dinaikkan, pembaruan npm tanpa operasi, penolakan metadata paket npm yang rusak, instalasi fixture ClawHub lokal dan pembaruan tanpa operasi, perilaku pembaruan marketplace, serta pengaktifan/pemeriksaan bundel Claude. TetapkanOPENCLAW_PLUGINS_E2E_CLAWHUB=0untuk menjaga blok ClawHub tetap hermetis/luring.test:docker:plugin-lifecycle-matrixmenginstal paket kandidat dalam kontainer kosong, menjalankan plugin npm melalui instalasi, pemeriksaan, penonaktifan, pengaktifan, peningkatan eksplisit, penurunan versi eksplisit, dan penghapusan instalasi setelah menghapus kode plugin. Jalur ini mencatat metrik RSS dan CPU per fase.test:docker:plugin-updatememvalidasi bahwa plugin terinstal yang tidak berubah tidak diinstal ulang atau kehilangan metadata instalasi selamaopenclaw plugins update.test:docker:upgrade-survivormenginstal tarball kandidat di atas fixture pengguna lama yang kotor, menjalankan pembaruan paket beserta doctor noninteraktif, kemudian memulai Gateway local loopback dan memeriksa preservasi status.test:docker:published-upgrade-survivorterlebih dahulu menginstal garis dasar yang dipublikasikan, mengonfigurasinya melalui resepopenclaw config setbawaan, memperbaruinya ke tarball kandidat, menjalankan doctor, memeriksa pembersihan legasi, memulai Gateway, dan memeriksa/healthz,/readyz, serta status RPC.test:docker:update-restart-authmenginstal paket kandidat, memulai Gateway autentikasi token terkelola, menghapus env autentikasi gateway pemanggil untukopenclaw update --yes --json, dan mengharuskan perintah pembaruan kandidat untuk memulai ulang Gateway sebelum pemeriksaan normal.test:docker:update-migrationadalah jalur pembaruan terpublikasi yang sarat pembersihan. Jalur ini dimulai dari status pengguna bergaya Discord/Telegram yang telah dikonfigurasi, menjalankan doctor garis dasar agar dependensi plugin yang dikonfigurasi mendapat kesempatan untuk terbentuk, menanam sisa dependensi plugin legasi untuk plugin terkemas yang dikonfigurasi, memperbarui ke tarball kandidat, dan mengharuskan doctor pascapembaruan menghapus akar dependensi legasi.
Varian survivor peningkatan terpublikasi yang berguna:
OPENCLAW_UPGRADE_SURVIVOR_BASELINE_SPEC=openclaw@2026.4.23 \OPENCLAW_UPGRADE_SURVIVOR_SCENARIO=versioned-runtime-deps \pnpm test:docker:published-upgrade-survivor OPENCLAW_UPGRADE_SURVIVOR_BASELINE_SPEC=openclaw@latest \OPENCLAW_UPGRADE_SURVIVOR_SCENARIO=bootstrap-persona \pnpm test:docker:published-upgrade-survivorSkenario yang tersedia: base, acpx-openclaw-tools-bridge, feishu-channel,
bootstrap-persona, channel-post-core-restore, plugin-deps-cleanup,
configured-plugin-installs, stale-source-plugin-shadow, tilde-log-path,
dan versioned-runtime-deps. Dalam proses agregat, OPENCLAW_UPGRADE_SURVIVOR_SCENARIOS=reported-issues
(alias far-reaching) diperluas ke semua skenario, termasuk migrasi
instalasi plugin yang dikonfigurasi.
Migrasi pembaruan penuh sengaja dipisahkan dari CI Rilis Penuh. Gunakan alur kerja
manual Update Migration ketika pertanyaan rilisnya adalah "dapatkah setiap
rilis stabil yang dipublikasikan sejak 2026.4.23 diperbarui ke kandidat ini dan
membersihkan sisa dependensi plugin?":
gh workflow run update-migration.yml \ --ref main \ -f workflow_ref=main \ -f package_ref=main \ -f baselines=all-since-2026.4.23 \ -f scenarios=plugin-deps-cleanupPenerimaan Paket
Penerimaan Paket adalah gerbang paket bawaan GitHub. Proses ini menyelesaikan satu paket
kandidat menjadi tarball package-under-test, mencatat versi dan SHA-256, kemudian
menjalankan jalur E2E Docker yang dapat digunakan kembali terhadap tarball persis tersebut. Referensi harness alur kerja
terpisah dari referensi sumber paket, sehingga logika pengujian saat ini dapat memvalidasi
rilis tepercaya yang lebih lama.
Sumber kandidat:
source=npm: validasiopenclaw@extended-stable,openclaw@beta,openclaw@latest, atau versi terpublikasi yang tepat.source=ref: kemas cabang, tag, atau commit tepercaya dengan harness saat ini yang dipilih.source=url: validasi tarball HTTPS publik denganpackage_sha256wajib. Jalur ini menolak kredensial URL, port HTTPS nonbawaan, nama host atau hasil DNS/IP privat/internal, ruang IP penggunaan khusus, dan pengalihan yang tidak aman.source=trusted-url: validasi tarball HTTPS denganpackage_sha256dantrusted_source_idwajib terhadap kebijakan milik pengelola di.github/package-trusted-sources.json. Gunakan ini untuk mirror perusahaan/privat alih-alih melemahkansource=urldengan sakelar izinkan-privat pada tingkat input. Autentikasi bearer, ketika dikonfigurasi oleh kebijakan, menggunakan rahasia tetapOPENCLAW_TRUSTED_PACKAGE_TOKEN.source=artifact: gunakan kembali tarball yang diunggah oleh proses Actions lain.
Validasi Rilis Penuh menggunakan source=artifact secara bawaan, yang dibangun dari
SHA rilis yang diselesaikan. Untuk pembuktian pascapublikasi, teruskan
package_acceptance_package_spec=openclaw@YYYY.M.PATCH agar matriks peningkatan yang sama
menargetkan paket npm yang telah dirilis.
Pemeriksaan rilis memanggil Penerimaan Paket dengan kumpulan paket/pembaruan/mulai ulang/plugin:
doctor-switch update-channel-switch skill-install update-corrupt-plugin upgrade-survivor published-upgrade-survivor root-managed-vps-upgrade update-restart-auth plugins-offline plugin-update plugin-binding-command-escapeKetika perendaman rilis diaktifkan (dipaksakan aktif untuk release_profile=stable dan
full), pemeriksaan juga meneruskan:
published_upgrade_survivor_baselines=last-stable-4 2026.4.23 2026.5.2 2026.4.15published_upgrade_survivor_scenarios=reported-issuestelegram_mode=mock-openaiHal ini menjaga migrasi paket, peralihan kanal pembaruan, toleransi terhadap plugin terkelola yang rusak, pembersihan dependensi plugin usang, cakupan plugin luring, perilaku pembaruan plugin, dan QA paket Telegram pada artefak terselesaikan yang sama tanpa mengharuskan gerbang paket rilis bawaan melewati setiap rilis terpublikasi.
last-stable-4 diselesaikan menjadi empat rilis OpenClaw stabil terbaru yang dipublikasikan di npm.
Penerimaan paket rilis menetapkan 2026.4.23 sebagai batas kompatibilitas pembaruan
plugin pertama, 2026.5.2 sebagai batas perubahan besar arsitektur plugin, dan
2026.4.15 sebagai garis dasar pembaruan terpublikasi 2026.4.1x yang lebih lama; resolver
menghapus duplikasi sematan yang sudah termasuk dalam empat versi terbaru. Untuk cakupan migrasi
pembaruan terpublikasi yang menyeluruh, gunakan all-since-2026.4.23 dalam alur kerja Migrasi
Pembaruan terpisah, bukan CI Rilis Penuh. release-history tetap
tersedia untuk pengambilan sampel manual yang lebih luas ketika Anda juga menginginkan jangkar legasi
sebelum tanggal tersebut.
Ketika beberapa garis dasar survivor peningkatan terpublikasi dipilih, alur kerja Docker yang dapat digunakan kembali membagi setiap garis dasar menjadi tugas runner tertarget tersendiri. Setiap shard garis dasar tetap menjalankan kumpulan skenario yang dipilih, tetapi log dan artefak tetap terpisah per garis dasar dan waktu keseluruhan dibatasi oleh shard paling lambat, bukan oleh satu tugas serial besar.
Jalankan profil paket secara manual saat memvalidasi kandidat sebelum rilis:
gh workflow run package-acceptance.yml \ --ref main \ -f workflow_ref=main \ -f source=npm \ -f package_spec=openclaw@beta \ -f suite_profile=package \ -f published_upgrade_survivor_baselines="last-stable-4 2026.4.23 2026.5.2 2026.4.15" \ -f published_upgrade_survivor_scenarios=reported-issues \ -f telegram_mode=mock-openaiUntuk canary extended-stable terpublikasi, tetapkan
package_spec=openclaw@extended-stable. Penerimaan Paket menyelesaikan
pemilih tersebut menjadi tarball yang tepat sebelum jalur Docker dijalankan.
Gunakan suite_profile=product ketika pertanyaan rilis mencakup kanal MCP,
pembersihan cron/subagen, pencarian web OpenAI, atau OpenWebUI. Gunakan suite_profile=full
hanya ketika Anda memerlukan cakupan penuh jalur rilis Docker.
Bawaan rilis
Untuk kandidat rilis, tumpukan pembuktian bawaan adalah:
pnpm check:changeddanpnpm test:changeduntuk regresi tingkat sumber.pnpm release:checkuntuk integritas artefak paket.- Profil
packagePenerimaan Paket atau jalur paket khusus pemeriksaan rilis untuk kontrak instalasi/pembaruan/mulai ulang/plugin. - Pemeriksaan rilis lintas OS untuk perilaku penginstal, orientasi awal, dan platform khusus OS.
- Rangkaian langsung hanya ketika permukaan yang diubah menyentuh perilaku penyedia atau layanan terhost.
Pada mesin pengelola, gerbang luas dan pembuktian produk Docker/paket sebaiknya dijalankan di Testbox kecuali secara eksplisit melakukan pembuktian lokal.
Kompatibilitas legasi
Kelonggaran kompatibilitas bersifat sempit dan dibatasi waktu:
- Paket hingga
2026.4.25, termasuk2026.4.25-beta.*, dapat menoleransi kekurangan metadata paket yang telah dirilis dalam Penerimaan Paket. - Paket
2026.4.26yang dipublikasikan dapat memperingatkan tentang berkas stempel metadata build lokal yang telah dirilis. - Paket yang lebih baru harus memenuhi kontrak modern. Kekurangan yang sama akan gagal alih-alih hanya memperingatkan atau dilewati.
Jangan tambahkan migrasi startup baru untuk bentuk lama ini. Tambahkan atau perluas perbaikan
doctor, lalu buktikan dengan upgrade-survivor, published-upgrade-survivor, atau
update-restart-auth ketika perintah pembaruan menangani mulai ulang.
Menambahkan cakupan
Saat mengubah perilaku pembaruan atau plugin, tambahkan cakupan pada lapisan terendah yang dapat gagal karena alasan yang tepat:
- Logika jalur atau metadata murni: pengujian unit di samping sumber.
- Inventaris paket atau perilaku berkas yang dikemas: pengujian pemeriksa
package-dist-inventoryatau tarball. - Perilaku pemasangan/pembaruan CLI: asersi jalur Docker atau fixture.
- Perilaku migrasi rilis yang telah dipublikasikan: skenario
published-upgrade-survivor. - Perilaku mulai ulang yang dimiliki pembaruan:
update-restart-auth. - Perilaku sumber registri/paket: fixture
test:docker:pluginsatau server fixture ClawHub. - Tata letak dependensi atau perilaku pembersihan: asersikan eksekusi runtime dan batas sistem berkas. Dependensi npm dapat dinaikkan ke dalam proyek npm terkelola milik plugin, sehingga pengujian harus membuktikan bahwa proyek tersebut dipindai/dibersihkan alih-alih mengasumsikan hanya pohon
node_moduleslokal paket plugin.
Secara default, pertahankan fixture Docker baru agar terisolasi. Gunakan registri fixture lokal dan paket palsu, kecuali tujuan pengujian adalah perilaku registri langsung.
Triase kegagalan
Mulailah dengan identitas artefak:
- Ringkasan
resolve_packagePackage Acceptance: sumber, versi, SHA-256, dan nama artefak. - Artefak Docker:
.artifacts/docker-tests/**/summary.json,failures.json, log jalur, dan perintah untuk menjalankan ulang. - Ringkasan kelangsungan pemutakhiran:
.artifacts/upgrade-survivor/summary.json, termasuk versi dasar, versi kandidat, skenario, waktu setiap fase, dan cakupan resep konfigurasi.
Utamakan menjalankan ulang jalur spesifik yang gagal dengan artefak paket yang sama daripada menjalankan ulang seluruh rangkaian rilis.