Buz üzerinde Curling, bazen bowling ve satrancın bir karışımı olarak tanımlanır. Oyun sırasında, iki kişilik takımlar sırayla 150 fitlik buzun üzerinden bir hedefe doğru büyük “taşlar” fırlatır. Spor, kesin fiziksel performans ve stratejik düşünmenin bir kombinasyonunu gerektirir.
Kore Üniversitesi‘nde bilişsel mühendislik profesörü Seong-Whan Lee; “Curling oyunu, yapay zeka sistemleri ile gerçek dünya arasındaki etkileşimi incelemek için iyi bir test ortamı olarak kabul edilebilir.” dedi.
Yapay zeka sistemi genellikle simülasyonlarda iyi performans gösterir, ancak gerçek dünyada uygulandığında mücadele eder. Sorun “sim-gerçek” boşluğu olarak bilinir.
Bilgisayar laboratuvarında, derin öğrenme sistemleri tekrarlanan simülasyonlarda milyonlarca eylemden öğrenebilir. Lee; “Gerçek dünyada, her durumda öğrenmek amacıyla yüzlerce eylem gerçekleştiremeyebiliriz. Dahası, sistem gerçek dünyayı asla tam olarak kopyalayamaz.”
Buz, simülasyonu özellikle zor olan birçok ortamdan biridir. Ve Curly’nin çevre ile fiziksel olarak etkileşime girmesi gerektiğinden simülasyon daha da zordur.
Johannes Andreas Stork; “Robotikte, sim-gerçek uçurum görsel algı ile ilgili, bu da simüle edilen dünyanın gerçek dünyadan farklı göründüğü anlamına geliyor.” dedi.
Kıvrılmada ve her atışta buz koşulları değişir. Araştırmacılar, insanlara karşı rekabet edebilmek için Curly’yi kontrol edilemeyen çevresel koşulları yargılamak ve uyum sağlamak için eğitmek zorunda kaldı.
Araştırmacılar Curly’ye “derin pekiştirmeli öğrenme” adını verdikleri sistemi, Curly’nin belirsizlikleri telafi etmesine ve uyarlanabilir eylemler gerçekleştirmesine yardımcı olan bir deneme yanılma öğrenme sistemi sağladı. Curly, her atıştan öğrenerek robotun sonraki atışlarda düzeltme yapmasına izin verdi.
Araştırma ekibi, Almanya ve Kore’den bilim adamları ve mühendisler, derin takviyeli öğrenme sistemlerini önceden geliştirilmiş ayrı bir strateji planlama modeliyle birleştirdiklerinde, yapay zeka curling robot sistemi, uzman curling robotlarından daha iyi performans gösterdi.
Lee, “Sadece stratejik planlama açısından değil, aynı zamanda gerçek curling oyunu ortamında gerçek zamanlı adaptasyon açısından da başarılı olduk.” dedi.
Üç üyesi olan insan curling takımlarının aksine, Curly yalnızca iki robot kullanıldı. Süpürücü kullanılmadı. Curly’de, bir kaptana, nişan alma stratejisinden sorumlu bileşene ve fırlatma mekaniğinden sorumlu, bir de atıcıya güvenir.
Yeni yapay zeka sistemini kullanan iki bileşen, insan ekibi tarafından atılan taşların dikte ettiği vites değiştirme stratejisini hesaba katarken, fırlatma hatalarını tanımlamak, değişen buz koşullarını yorumlamak ve buna göre ayarlamalar yapmak için iletişim kuruyor.
Bilim adamları, yeni derin takviyeli öğrenme sistemlerinin, drone navigasyonu dahil olmak üzere çeşitli karmaşık gerçek dünya uygulamalarına uyarlanabileceğini düşünüyor…
