Çift kanal ve diarizasyon: konuşmacıları doğru ayırmak

Çağrının iki tarafı gerçekten ayrı ses kanallarında tutuluyorsa kanal bazında tanıma, kimin hangi taraftan konuştuğunu izlemeyi kolaylaştırır. Tek karışık kanalda ise diarizasyon, konuşmacı değişimlerini ses üzerinden tahmin eder. Stereo etiketi tek başına bu ayrımı kanıtlamaz. Önce kayıt kaynağını ve kanal eşlemesini doğrulayın, ardından metindeki konuşmacı etiketlerini değerlendirin.

1. Kanal ayrımıyla diarizasyonu ayırın

Google Cloud’un çok kanallı tanıma belgesi, kanallara ait sonuçları kanal etiketiyle ilişkilendirir. [1] Diarizasyon belgesi ise ses içinde konuşmacı değişimlerini bulup konuşmaları etiketlemeyi anlatır. [2] Bunlar farklı bilgi kaynaklarıdır: biri mevcut kanal sınırını kullanır, diğeri konuşmacı ayrımını tahmin eder. Birini seçmeden önce elinizdeki kaydın gerçekten hangi yapıda olduğunu dinleyin.

Bir stereo dosyada iki kanal bulunması, her kanalda farklı kişinin bulunduğu anlamına gelmez. Aynı mono ses iki kanala kopyalanmış olabilir. Çağrı tarafını kişi kimliğiyle de eşitlemeyin: aktarım sırasında aynı taraftan başka bir çalışan konuşabilir. Teknik etiketin neyi temsil ettiğini raporda yazmak, sonradan oluşacak yanlış atıfları azaltır.

2. STT giriş ve çıkış sözleşmesini açık yazın

Giriş sözleşmesi codec, gerçek örnekleme hızı, kanal sayısı ve örneklerin yerleşimini tarif etmelidir. İki kanalın tek dosyada bulunmasıyla iki bağımsız akış olarak gönderilmesi farklı paketleme kararlarıdır. Seçtiğiniz tanıma arayüzünün beklediği düzeni doğrulayın. Bir kanalı diğerinin arkasına eklemek, örneklerin zaman içinde doğru hizalanmış olduğu anlamına gelmez.

Çıkışta kanal etiketi, konuşmacı etiketi ve çağrı rolü için ayrı alanlar düşünün. Bunların hepsine tek bir speaker değeri vermek anlamlarını karıştırabilir. Bir test kaydında birinci kanal arayanı, ikinci kanal karşı tarafı temsil etsin; bunu örnek eşleme olarak yazın. Yeni oturumda aynı sıra korunuyor mu, aktarımda ne değişiyor, bunları kontrol edin. Tahmini konuşmacı etiketini doğrulanmış kişi adı gibi kullanmayın.

3. Üst üste konuşmayı ve kanal karışmasını sınayın

İki kişi aynı anda konuştuğunda ayrı kaynak kanalları iki sesi de zaman çizelgesinde koruyabilir. Ancak yankı veya ses sızıntısı, bir konuşmanın karşı kanalda da duyulmasına neden olabilir. Böyle bir kayıtta kanal sayısını doğru bildirmek tek başına yeterli değildir. Her kanalı ayrı dinleyin, ardından aynı anda dinleyerek tekrarlar ve zaman kaymalarını inceleyin.

Tek kanala karıştırılmış sesi yeniden iki kanallı dosyaya yazmak, özgün kaynak ayrımını geri getirmez. Karıştırma öncesi kaynak varsa karşılaştırmayı o noktadan yapın. Test havuzuna kısa karşılıklı onaylar, uzun üst üste konuşmalar ve bir tarafın sessiz kaldığı bölümler ekleyin. Metin doğruluğunu ve konuşmacıya atamayı ayrı inceleyin; doğru tanınan bir cümle yanlış kişiye atanmış olabilir. Sadece toplam transkript okunabilirliğine bakmak bu hatayı gizler.

4. Aktarılan bir destek görüşmesini izleyin

Örnek bir destek çağrısında arayan önce resepsiyonla, sonra destek çalışanıyla konuşsun. İki kanal olsa bile karşı tarafın kanalında artık iki farklı kişi vardır. Ekip kısa bir karşılama, aktarım anı ve yeni çalışanın açıklamasını aynı zaman çizelgesinde işaretler. Kanal eşlemesinin sabit kalmasıyla kişi değişimini birbirinden ayırır.

Arayan yeni çalışanı beklerken önceki kişinin sesi tekrar duyuluyorsa bunun kayıttaki tekrar mı, gerçek konuşma mı olduğunu kontrol edin. Diarizasyon kullanıldığında yeni kişinin etiketini ve arayanın etiketinin tutarlılığını dinleyerek doğrulayın. Özetleme denemesinde her cümlenin doğru çağrı tarafına bağlandığını da inceleyin. Böylece kayıt yapısından başlayan hata, daha sonra yanlış görev veya yanlış konuşmacı özeti olarak ortaya çıkmadan bulunabilir.

5. Kayıt ve değerlendirme kontrol listesi

• Her kanalın kaynağını, sıra numarasını ve çağrı rolüyle eşlemesini test belgesine yazın.
• Kanal sayısını, örnekleme hızını ve örnek yerleşimini gönderilen gerçek sesle karşılaştırın.
• Kanalları ayrı dinleyin; kopyalanmış ses, yankı, sızıntı ve zaman kaymasını işaretleyin.
• Üst üste konuşma, uzun sessizlik ve aktarım içeren aynı örnekleri bütün adaylarla çalıştırın.
• Kelime doğruluğu, doğru konuşmacıya atama ve doğru rol eşlemesi için ayrı sonuçlar tutun.
• İnceleme çıktısında yalnız gereken kayıt parçalarını ve kimlikten bağımsız etiketleri kullanın. Kanal ayrımı kişisel bilgi içeren konuşmayı kendiliğinden anonim hale getirmez.

6. Sık sorulan sorular

İki kanal varsa diarizasyon gereksiz midir? İki kanal iki sabit kişiyi temiz biçimde ayırıyorsa kanal bilgisi yeterli olabilir. Bir tarafta birden çok kişi veya konferans varsa ek konuşmacı ayrımı gerekebilir. Kararı gerçek kayıt yapısıyla verin.

Speaker 1 her zaman aynı kişi midir? Etiketin kapsamını tanıma çıktısının sözleşmesinden kontrol edin. Bir sonuç içindeki etiket numarası, farklı çağrılarda aynı gerçek kişinin bulunduğunu kanıtlamaz.

Mono dosyayı stereo yapmak sorunu çözer mi? Yeni kanal düzeni, daha önce birleştirilmiş kaynakları otomatik olarak ayırmaz. Önce eldeki kaynakları ve gerçek ayrımı doğrulayın; yalnız dosya etiketini değiştirerek başarı sonucu çıkarmayın.