Rusya’da yapay zekanın Rus kültürel kurallarına uygunluğu kontrol edilecek
Rusya Federasyonu Başkanı’na bağlı Rusya Ulusal Ekonomi ve Kamu Yönetimi Akademisi’nden ve Rusya Bilimler Akademisi Sistem Programlama Enstitüsü’nden araştırmacılar, büyük dil modellerinin test edilmesine yardımcı olacak bir kıyaslama (teknik ve algoritmalardan oluşan bir yazılım seti) oluşturdular. Rus bilgi ve değerler sistemine uyum için yapay zekaya (AI) dayanmaktadır.
Bu tür sistemler Chat GPT gibi hizmetlerde kullanılır. Test kompleksi, devlet sınavları ve test çalışmalarının resmi veritabanlarında yer alan soruların yaklaşık 14 bin yanıtından oluşuyor. Ulusal güvenlik, tarih, sosyal bilgiler, siyaset bilimi, coğrafya ve diğerleri gibi kamu bilincinde önemli olan konulara değiniyorlar.
“Ülkemiz pek çok hassas konuda kendi yerel geleneklerini ve kültürel temellerini temel alan bir duruş sergilemiştir. Çoğu zaman bu konum yabancı kaynaklara dayalı modellerle çelişmektedir. Aynı zamanda bu sistemlerin hangi veri setleri üzerinde eğitildiğine, bunları kimin test ettiğine, tartışmalı durumlarda kimin uzman olarak hareket ettiğine dair hiçbir bilgimiz yok” dedi. RANEPA Sosyal Bilimler Bölümü (ION), İzvestia’ya açıkladı.
Görüş farklılıklarının siyaset ve beşeri bilimler başta olmak üzere pek çok alanı etkileyebileceğini kaydetti. Çocuklar akıllı cihazlara yöneldikçe sorunun ciddiyeti artıyor. Yapay zeka soruları sorarken, genellikle Rus mevzuatı ve kültürel kod açısından yeterince eksiksiz ve doğru olmayan yanıtlar alıyorlar. Asıl tehdit, çocuğun kişiliğinin oluşma aşamasında çarpık bilgilerin ortaya konmasıdır.
“Toplamda 25 büyük dil modeli test edildi; bu, Rusça sorgu oluşturmayı ve rapor almayı mümkün kılıyor. Çalışmanın sonuçlarına göre bir model derecelendirmesi oluşturuldu. Yanıt formatının gereklilikleri göz önüne alındığında, çoğu oldukça düşük sonuçlar gösterdi: hiçbiri soruların en az yarısını tam olarak yanıtlamadı,” RANEPA Eğitim ve Bilim Enstitüsü müdürü Pavel Golosov çalışmanın sonuçlarını özetledi.
Bilim adamı, birçok soru türünde Alibaba Group’un yabancı modelinin (qwen2), kapsamlı bir değerlendirmeye göre YandexGPT Pro, Gemma2, Llama3 ve diğerlerinin önünde ikinci sırada yer alan yerli GigaChat_Pro’dan daha iyi performans gösterdiğini vurguladı.
Daha fazlasını 6 Eylül Cuma saat 10:00’da İzvestia’nın özel materyalinde okuyabilirsiniz.
Anavatan SLAVA’sı: sinir ağlarının Rus kültürel kurallarına uygunluğu kontrol edilecek
