Bu belge, Minecraft’ta sürekli olarak dünyayı keşfeden, çeşitli beceriler edinen ve insan müdahalesi olmadan yeni keşifler yapan somutlaştırılmış bir yaşam boyu öğrenme ajanı olan Voyager’ı tanıtmaktadır. Voyager üç temel bileşenden oluşmaktadır: keşfi en üst düzeye çıkaran otomatik bir müfredat, karmaşık davranışları depolamak ve almak için sürekli büyüyen bir yürütülebilir kod beceri kitaplığı ve program iyileştirme için ortam geri bildirimi, yürütme hataları ve kendi kendini doğrulamayı içeren yeni bir yinelemeli yönlendirme mekanizması. Voyager, GPT-4 ile kara kutu sorguları aracılığıyla etkileşime girer ve bu da model parametresi ince ayar ihtiyacını atlar. Ampirik olarak, Voyager güçlü bağlam içi yaşam boyu öğrenme yeteneği gösterir ve Minecraft oynamada olağanüstü yeterlilik sergiler. Önceki SOTA’ya göre 3,3 kat daha fazla benzersiz öğe elde eder, 2,3 kat daha uzun mesafeler kat eder ve önemli teknoloji ağacı kilometre taşlarının kilidini 15,3 kata kadar daha hızlı açar. Voyager, öğrenilen beceri kütüphanesini yeni bir Minecraft dünyasında yeni görevleri sıfırdan çözmek için kullanabilirken, diğer teknikler genelleme yapmakta zorlanıyor. Belgede ayrıca, açık uçlu dünyalarda sürekli olarak yeni beceriler keşfeden, planlayan ve geliştiren genel olarak yetenekli somutlaştırılmış ajanlar oluşturmanın zorlukları da tartışılmaktadır. Yazarlar, klasik yaklaşımların, sistematik keşif, yorumlanabilirlik ve genelleme için zorlayıcı olabilecek ilkel eylemler üzerinde çalışan pekiştirmeli öğrenme (RL) ve taklit öğrenmeyi kullandığını savunmaktadır. Büyük dil modeli (LLM) tabanlı ajanlardaki son gelişmeler, tutarlı eylem planları veya yürütülebilir politikalar oluşturmak için önceden eğitilmiş LLM’lerde kapsanan dünya bilgisinden yararlanmaktadır. Bunlar oyunlar ve robotik gibi somutlaştırılmış görevlerin yanı sıra somutlaştırılmamış NLP görevlerine de uygulanmaktadır. Belge, Voyager’ın model parametrelerini ayarlamadan güçlü genelci ajanlar geliştirmek için bir başlangıç noktası olarak hizmet ettiğini belirterek sona ermektedir.
