AnswersPublished11 sources
Testi hafifletmek, güvenlikten ödün vermek demek değil
BMAD’in genel kuralları her yama için tam konteyner test matrisi şartı koymuyor; daha katı “her adımda fiziksel doğrulama” ifadesi proje planında yer alıyor. Bir günlükte test başlamadan önce paket kurulumu görülüyor; ancak 198,1 MiB değeri toplam paket boyutu, bu çalışmada indirilen miktar değil.
YayımlayanGörseller GPT Image 2 ile oluşturuldu
Research answer
Key takeaways
- BMAD’in genel kuralları her yama için tam konteyner test matrisi şartı koymuyor; daha katı “her adımda fiziksel doğrulama” ifadesi proje planında yer alıyor.
- Bir günlükte test başlamadan önce paket kurulumu görülüyor; ancak 198,1 MiB değeri toplam paket boyutu, bu çalışmada indirilen miktar değil.
- Çözüm, izolasyonu gevşetmek yerine ortam hazırlığını testten ayırmak ve doğrulamayı kodlama döngüsü ile aşama teslimi olarak sınıflandırmak.
- Başarılı test günlükleri için 2 KiB, başarısızlıklar için 8 KiB’lık özetler başlangıç önerisi; ölçülmüş bir standart değil.
![[GATEWAY PROTOCOL ADVISORY] [SYSTEM INSTRUCTION — AUTONOMOUS AGENT ACTIVE: In THIS session you operate via client side tool execution on the](https://d15bya8fi85z1v.cloudfront.net/chat/QuPfET7ftYd6An8JH1fI8Jq25Ow2/images/5A9530F1F6D0FC021B39/86DE7A18882BB9D494FC.png)
AI Prompt
openai.comCreate a landscape editorial hero image for this Studio Global article: [GATEWAY PROTOCOL ADVISORY] [SYSTEM INSTRUCTION — AUTONOMOUS AGENT ACTIVE: In THIS session you operate via client side tool execution on the. Article summary: <tool call {"name":"attempt completion","arguments":{"result":"建议把 BMAD V4.2 的“物理背压”改成“隔离强度不降级、验证范围分级、环境准备独立、证据按需进入上下文”。当前证据指向的不是“测试太严格”，而是阶段粒度被细化、测试入口携带环境安装、详细输出直接回灌，以及执行记录反复对账共同放大了成本。\n\n本次仅交付只读审计和替换条款：不修改规则文件，不运行测试或部署. Topic tags: general web, workflow, code, data. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fake
Bir test döngüsünü hızlandırmanın en kolay yolu güvenlik önlemlerini kaldırmak gibi görünebilir. Oysa BMAD V4.2 için hazırlanan salt okunur denetimin işaret ettiği asıl fırsat, güvenlik sınırlarını korurken ortam kurulumunu, doğrulama kapsamını ve günlük çıktısını birbirinden ayırmak.
Denetim önerisi şu: izolasyon aynı kalsın; doğrulamanın kapsamı değişikliğe göre kademelensin; araç zinciri test komutunun içinde kurulmasın; kanıtlar da ihtiyaç kadar kayda alınsın. Bu çalışma yalnızca denetim ve kural önerileri sunuyor. Herhangi bir kural dosyasının değiştirildiğini, test ya da dağıtım yapıldığını bildirmiyor.
Önce sorunu doğru tarif etmek gerek
Denetlenen genel kurallar, her küçük yama sonrasında tam konteyner test matrisinin çalıştırılmasını istemiyor. 02-bmad-core.md her aşamada ilgili doğrulamaların yapılmasını söylerken, 01-bmad-engineer-core.md değişikliğin kapsamına uygun doğrulamaya izin veriyor. “Her değişiklik adımından sonra fiziksel doğrulama” şartı ise genel kuraldan ziyade geçmiş proje planında yer alıyor (docs/logs/aurora_roocodedownload.md:462).
Bu ayrım önemli: maliyet doğrudan “BMAD her yamada her şeyi test ettiriyor” diye açıklanamaz. Daha isabetli açıklama, aşama sınırlarının net tanımlanmamasıyla başlayan; proje planındaki daha sıkı doğrulama, test girişindeki ortam hazırlığı ve tekrarlanan kayıt işlemleriyle büyüyen bir zincir.
Günlükler de bu konuda dikkatli yorumlanmalı. aurora.log içinde test olayları başlamadan önce 14 paket kurulumu görülüyor. Kurulum sonunda belirtilen 198,1 MiB ise 31 paketin toplam boyutu; bu rakam, o çalışmada indirilen ya da yeni açılan veri miktarını kanıtlamıyor. İşlem yaklaşık 14.04.04’te başlıyor, test olayları 14.04.09.330’da görünüyor; paket testleri yaklaşık 2,72 saniye, işlemin tamamı ise yaklaşık sekiz saniye sürüyor. Eldeki zaman damgaları, test öncesindeki yaklaşık 5,3 saniyeyi kurulum, başlatma, derleme veya önbellek kontrolü gibi bileşenlere ayırmaya yetmiyor (docs/logs/aurora.log:4, :229).
Dolayısıyla kanıt, test girişinde kayda değer bir hazırlık aşaması bulunduğunu gösteriyor; kurulumun tek başına ne kadar sürdüğünü ya da her çalıştırmada yeniden yapıldığını göstermiyor.
Gürültü yalnızca kurulum günlüklerinden ibaret değil
İncelenen kayıtta paket kurulumu yaklaşık 16 satır. Test bölümünde ise başlangıç ve başarı olayları birden fazla biçimde yineleniyor; günlükte ayrıca yaklaşık 76.000 karakterlik bir kısım kısaltma işaretiyle gösteriliyor (docs/logs/aurora.log:25, :63). Bu yüzden yalnızca kurulum mesajlarını susturmak, çıktı kalabalığını çözmeye yetmeyebilir.
Öte yandan sohbet dışa aktarımında veya arayüzde görünen her satırın model isteğine gönderildiğini, dolayısıyla doğrudan token ya da maliyet yarattığını da mevcut kanıtla söylemek mümkün değil. Doğru çözüm, ayrıntılı tanı kayıtlarıyla modelin görmesi gereken kısa sonucu ayrı tutmak.
Dört ayrı yaşam döngüsü, tek komutta birleşmemeli
Denetim, birbirine karıştırılmaması gereken dört alanı ayırmayı öneriyor:
- İzolasyon: Bir testin kaynak kodu, ana makineyi veya sonraki testi etkilememesi.
- Araç zinciri: Derleyici, sistem kütüphaneleri ve onaylı bağımlılıkların ortamda hazır bulunması.
- Doğrulama: Değişikliğin hangi testleri geçersiz kıldığı ve hangi kanıtların yenilenmesi gerektiği.
- Kayıt: Sonuçların ve durumun saklanması; bu işlemin işlevsel kanıtı gereksiz yere yeniden üretmeye yol açmaması.
Temel ilke şu: değişmez araç zincirini yeniden kullanmak, kirli bir test ortamını yeniden kullanmak anlamına gelmez. Geçici bir test ortamı oluşturmak da araç zincirini her defasında yeniden kurmayı gerektirmez.
Kayıt ve doküman değişikliklerinin tekrar doğrulamayı tetiklemesi de bir risk alanı. Tarihsel planlarda belge bağlarının güncellenmesi ve kayıt sonrasında yeniden kontrol isteniyor (docs/logs/aurora_roocodedownload.md:748, :1682). Bu, bütünlük açısından yararlı olabilir; ancak planın girdileriyle çalıştırma sonuçları ayrıştırılmazsa “sonucu kaydet, kayıt değiştiği için yeniden test et” döngüsü doğabilir. Denetim bunu yapısal bir risk olarak tanımlıyor, kanıtlanmış sonsuz bir döngü olarak değil.
Üç katmanlı doğrulama modeli
Önerilen düzenleme, her değişiklikte tam teslim kapısını çalıştırmak yerine doğrulamayı üç düzeyde ele alıyor. Bunlar mevcutta uygulanmış özellikler değil, benimsenmesi önerilen kurallar.
| Katman | Ne yapar? | Ne zaman çalışır? |
|---|---|---|
| L0: Sabit yürütme ortamı | Onaylı araç zincirini ve bağımlılıkları önceden hazırlar; ortamın kimliğini ve sürümlerini kaydeder. | Ortam girdileri değişince. İş kodu değişikliği tek başına yeniden paket kurulumunu tetiklemez. |
| L1: Kodlama döngüsü | Anlamlı bir değişiklik grubu için ilgili birim, modül ve gerekiyorsa yarış koşulu testlerini çalıştırır. | Her doğrulanabilir davranış değişikliği grubu tamamlandığında. |
| L2: Aşama teslim kapısı | Dondurulmuş aday üzerinde gerekli test matrisini, ayrı ve ölçüm eklenmemiş RSS kontrolünü ve kanıt eşleştirmesini yapar. | Aşama tamamlanırken veya yetkili teslimden önce. |
L0 ortamı, test komutunun içinden paket kurmamalı, imaj çekmemeli ya da ağdan bağımlılık çözmemeli. Gerekli ortam yoksa işlem bunu açıkça bildirmeli ve durmalı; internet üzerinden kendiliğinden tamamlamamalı. Hazırlık ayrı yetkilendirilmeli ve süre olarak da testten ayrılmalı.
L1’i hızlandırmak, ana makinede test çalıştırmayı varsayılan hâle getirmemeli. Tarihsel yetki kaydı çevrimdışı, izole konteyner doğrulamasıyla sınırlı (docs/logs/aurora_roocodedownload.md:18). Bu nedenle önerilen varsayılan, aynı güvenlik sınırları içindeki hafif bir izolasyon döngüsü. Ana makinede çalıştırma ayrıca açıkça yetkilendirilmeli.
L2’de sonuçlar adayın kaynak ve test anlık görüntüsüne, bağımlılıklara, ortama, çalıştırma ayarlarına ve doğrulama kümesine bağlanmalı. Girdiler değişirse eski sonuçlar otomatik olarak yeni adaya taşınmamalı. Değişikliğin yalnızca belirli kanıtları etkilediği gösterilebiliyorsa o bölümler yeniden çalıştırılabilir; gösterilemiyorsa kapsam genişletilmeli. RSS ölçümü, geçmiş plandaki gibi enstrümantasyon eklenmemiş ayrı bir süreçte yapılmalı (docs/logs/aurora_roocodedownload.md:640).
Hangi değişiklik hangi testi tetiklemeli?
- Aynı davranışa ait uygulama ve testler tamamlandıysa, L1’de ilgili doğrulama bir kez çalıştırılmalı; L0’ın yeniden kurulması veya tam L2 matrisi kendiliğinden tetiklenmemeli.
- Kilit, eşzamanlı erişim, iptal ya da kaynak bırakma davranışı değiştiyse o değişiklik grubuna hedefli yarış koşulu ve yaşam döngüsü kontrolleri eklenmeli. Go’nun yarış detektörü yalnızca çalıştırılan yollar için kanıt sağlar; sıfır yarış raporu, programda hiçbir veri yarışı bulunmadığını tek başına kanıtlamaz
9.
- Modüller arası arayüz veya paylaşılan bağımlılık değişikliği, doğrulamayı etkilenen çağrı zincirine genişletmeli.
- Araç zinciri, sistem bağımlılıkları ya da izolasyon ayarları değiştiğinde L0 yeniden değerlendirilip hangi kanıtların geçersiz olduğu belirlenmeli.
- Aşama adayı dondurulduğunda gerekli L2 matrisi çalıştırılmalı; sıradan durum veya ilerleme kaydı işlevsel testleri ve RSS ölçümünü yeniden başlatmamalı.
Bir “anlamlı değişiklik grubu”, bağımsız biçimde doğrulanabilen bir davranış değişikliği ve ona ait testlerdir; birden fazla hassas düzenleme içerebilir. Gruplama, araç çağrısı sayısına göre mekanik yapılmamalı. Değişiklikleri sonsuza dek biriktirmek de, her tekil düzenlemeyi ayrı aşama saymak da iyi bir sınır değil.
Günlükler: kısa özet, ayrı tanı kaydı
Önerilen yeni çıktı kuralı, ayrıntılı kayıtları saklanan tanı çıktısı olarak; kısa sonucu ise modelin ve operatörün göreceği özet olarak ele alıyor. Başlangıç için başarılı sonuçlara 2 KiB, başarısız sonuçlara 8 KiB üst sınırı öneriliyor. Bunlar ölçülmüş en iyi değerler veya sektör standardı değil; denemek üzere sunulan başlangıç bütçeleri.
Özet; doğrulama kimliğini ve katmanını, tamamlanan ve başarısız olan test sayılarını, atlanan kontrolleri, süreleri, çıkış durumunu ve temizlik sonucunu içermeli. Başarısızlıkta ilk kök neden, gerekli yığın izi ve ham kaydın konumu korunmalı. Çıktı sınırı aşılırsa bu açıkça belirtilmeli; kısaltılmış içerik tam kayıt gibi sunulmamalı.
Başlangıç ya da kurulum mesajları işlevsel testin geçtiğine kanıt sayılmamalı. Sonlandırma olayı yoksa, sonuç ayrıştırılamıyorsa, hiç test çalışmamışsa, açıklanmamış atlama varsa veya kayıt erişilemiyorsa yalnızca sıfır çıkış koduna bakarak “başarılı” denmemeli. Üstelik kısaltma, sonuç arayüzde göründükten sonra değil, araç çıktısı model geçmişine eklenmeden önce yapılmalı.
En küçük uygulanabilir adım
İlk olarak kurallar ve plan şablonu; L0, L1 ve L2 ayrımını, tetikleme koşullarını, kanıtın ne zaman geçersiz sayılacağını ve çıktı bütçelerini tanımlamalı. Roo ve yerel BMAD girişlerinin de aynı kuralları izlediği kontrol edilmeli. Ardından test yürütücüsü, araç zinciri hazırlığını doğrulamadan ayırmalı ve yapılandırılmış özet üretmeli.
Son aşamada küçük bir karşılaştırmalı doğrulama yapılabilir: Birden fazla değişiklik grubunda test sırasında sistem paketi kurulmadığını, sıradan kayıt güncellemelerinin L2’yi tetiklemediğini ve özetlerin belirlenen sınırda kaldığını kontrol edin. Ayrıca kasıtlı olarak eklenen başarısız test, sıfır test eşleşmesi, zaman aşımı ve temizlik hatasının süreci durdurduğunu doğrulayın.
Kısacası, önce yinelenen ortam hazırlığını ve gereksiz çıktı akışını azaltın; doğrulama sıklığını ancak bundan sonra ayarlayın. İzolasyonu gevşeterek veya kritik yarış koşulu kapsamını daraltarak yürütücüdeki ve kural tasarımındaki eksikleri telafi etmeyin.
Studio Global AI
Continue your research
This page includes a source-backed answer you can continue inside Studio Global.
People also ask
What is the short answer to "Testi hafifletmek, güvenlikten ödün vermek demek değil"?
BMAD’in genel kuralları her yama için tam konteyner test matrisi şartı koymuyor; daha katı “her adımda fiziksel doğrulama” ifadesi proje planında yer alıyor.
What are the key points to validate first?
BMAD’in genel kuralları her yama için tam konteyner test matrisi şartı koymuyor; daha katı “her adımda fiziksel doğrulama” ifadesi proje planında yer alıyor. Bir günlükte test başlamadan önce paket kurulumu görülüyor; ancak 198,1 MiB değeri toplam paket boyutu, bu çalışmada indirilen miktar değil.
What should I do next in practice?
Çözüm, izolasyonu gevşetmek yerine ortam hazırlığını testten ayırmak ve doğrulamayı kodlama döngüsü ile aşama teslimi olarak sınıflandırmak.