Sieve, duyurunun haberleştirilmesine göre video ve ses anotasyonuna odaklanan bir multimodal veri laboratuvarını duyurdu. Şirketin frontier AI için araç seti geliştirdiği ve iş akışlarının yalnızca metinle sınırlı kalmayıp video ve ses anotasyonunu da kapsadığı belirtiliyor.
Agent mühendisliği açısından önem taşıyan ayrım, araç setinin yığındaki konumudur. Sieve'ın ürünü model sunumunu değil veri hazırlığını hedefliyor. Bu da onu değerlendirme döngüsünün üst tarafına yerleştiriyor: anotasyon ve etiketleme, bir veri kümesinde hangi yörüngelerin bulunduğunu ve dolayısıyla hangi agent davranışlarının puanlanabileceğini belirler. Multimodal agent'larla çalışan ekipler için pratik kısıt genellikle puanlayıcının kendisi değil, ham video ve sesi yapılandırılmış, gözden geçir
Sağlanan haberleştirmeden birkaç ayrıntı belirsiz kalıyor. Desteklenen formatlar, işlem hacmi, kalite kontrol mekanizmaları veya anotasyon çıktılarının eğitim ve değerlendirme ardışık düzenlerine nasıl aktarıldığına dair bilgi yok. Hiçbir kıyaslama, müşteri adı veya kullanılabilirlik tarihi paylaşılmadı; bu nedenle ölçek iddiaları henüz bağımsız olarak doğrulanamıyor.
Behzat AI, anotasyon ve veri hazırlığı araç setlerini multimodal agent değerlendirmesinin bir bağımlılığı olarak takip ediyor. Video ve ses için güvenilir etiketler üretemeyen sistemler, bunları tüketen agent'lar için güvenilir puanlar da üretemez.