Claude Code Olmadan Kişisel Wiki Oluşturma: MapReduce Tabanlı Bir Hat

Andrej Karpathy'nin LLM tarafından oluşturulan wikiler fikrinden ilham alan yazar (bir Habr kullanıcısı), kişisel bir wiki oluşturmak için Claude Code'a alternatifleri araştırıyor. Üç strateji test edildi: bağlam belleğiyle sıralı çıkarma, ayrı bir entegrasyon ajanıyla toplu çıkarma ve MapReduce yaklaşımı. İlki, zayıf modellerin öğe sayısı onu aştığında öğeleri kaybetmesi nedeniyle başarısız oldu. İkincisi, ilgisiz öğeleri birleştiren zayıf entegrasyon nedeniyle başarısız oldu. Üçüncüsü, MapReduce, başarılı oldu: her kaynak açıklanır ve anahtar terimler çıkarılır, ardından terimler tersine çevrilerek her terim kaynaklarıyla eşlenir. Bir LLM hakemi terimleri önem derecesine göre filtreler; önemli terimler için özet, özellikler ve ilgili öğelere bağlantılar içeren bir wiki öğesi oluşturulur. Boru hattı, proxy sağlayıcıdan gpt-5-mini ve yerel Ollama'dan gemma4:26b kullanır. gpt-5-mini önemi abartma eğilimindedir ve bazen kendi başına terimler ekler, ancak bir bağlayıcı bunu yakalar; gemma4:26b daha katıdır ancak yapılandırılmış çıktıda zorlanır ve kodda bölünmeler gerektirir. Maliyetler: Claude Code kaynak metnin 100KB'ı başına 3-4 dolar, gpt-5-mini 1.1-1.3 dolar, gemma4:26b ise yalnızca elektrik maliyeti gerektirir ancak yavaştır (saniyede 12 token, boru hattı için tam bir gün sürer). Uygulama, Wiki-assembler, beş veya altı basit LangChain ajanı ve iki sabit kodlanmış bloktan oluşan bir Python boru hattıdır; Gemma'nın sonsuz akıl yürütmesi nedeniyle ReAct'ten kaçınır. Boru hattı adımları, açıklama ve kategorizasyon, bir LLM hakemi aracılığıyla anahtar terimlerin filtrelenmesi, wiki öğelerinin oluşturulması ve bunların bağlanmasını içerir.