Ana içeriğe geç

Qwen3-32B

Bu makalede

Bilgi

Qwen3-32B, Ollama platformu üzerinden yerel kurulum için önemli miktarda hesaplama kaynağı gerektiren, Qwen serisinden gelişmiş yeni nesil bir dil modelidir. Kurulum, NVIDIA grafik hızlandırıcılarını kullanan modern sistemlere dayanmaktadır. Open Web UI ile entegrasyon, veriler üzerinde tam kontrol sağlarken modelle etkileşim kurmak için kullanışlı bir arayüz sunar.

Qwen3-32B'nin Temel Özellikleri

  • Çok Dilli Mimari: Model 32 milyar parametreye sahiptir, 36 trilyon kelime ile eğitilmiştir ve 119 dil ile lehçeyi destekleyerek kültürel nüansların anlaşılmasını ve yüksek kaliteli çeviri yapılmasını sağlar;
  • Çalışma Modları: Hem derin akıl yürütme (thinking mode) hem de hızlı yanıtlar (non-thinking mode) için optimize edilmiştir, bu da çeşitli görev türlerine uyum sağlamasına olanak tanır;
  • Open Web UI ile Entegrasyon: 8080 portu üzerinden modelle kolay etkileşim için modern bir web arayüzü sağlar, veriler ve istek işleme üzerinde tam kontrol sağlar;
  • Ölçeklenebilirlik: Mevcut kaynaklara bağlı olarak bellek kullanımı optimizasyonu için farklı kuantizasyon seviyelerini (FP16, 8-bit, 4-bit) destekler;
  • Güvenlik ve Kontrol: Tam yerel kurulum veri gizliliğini sağlar, OLLAMA_HOST ve OLLAMA_ORIGINS ayarları ise ağ güvenliğini garanti eder;
  • Yüksek Performans: Yüksek performanslı tüketici GPU'larında saniyede yaklaşık 34 token elde ederek modeli yerel kullanım için uygulanabilir kılar;
  • Hata Toleransı: Otomatik konteyner ve servis yeniden başlatma sistemi, kararlı çalışma sağlar.
  • Kullanım Örnekleri:
    • Müşteri Desteği: Çoklu dil desteği ile kullanıcı sorularına yanıtların otomasyonu;
    • Eğitim: Eğitim materyallerinin oluşturulması, karmaşık görevlerin çözümünde yardım;
    • Programlama: Çeşitli programlama dillerini destekleyerek kod oluşturma ve analizi;
    • Çok Dilli İçerik: Kültürel özellikler dikkate alınarak metinlerin oluşturulması ve çevrilmesi.

Çalıştırma Özellikleri

ID Yazılım Adı Uyumlu OS VM BM VGPU GPU Min CPU (Çekirdekler) Min RAM (GB) Min HDD/SSD (GB) Özel Alan Adı Aktif
334 qwen3:32b Ubuntu 22.04, Ubuntu 24.04 - - + + 4 64 - Hayır SİPARİŞ VER
  • Ollama sunucusu LLM'i belleğe yükler ve çalıştırır;
  • Open WebUI, Ollama sunucusuna bağlı bir web uygulaması olarak kurulur;
  • Kullanıcılar, istek gönderip yanıtlar alarak Open WebUI web arayüzü üzerinden LLM ile etkileşime girer;
  • Tüm hesaplamalar ve veri işleme sunucuda yerel olarak gerçekleşir. Yöneticiler, OpenWebUI araçları aracılığıyla LLM'i belirli görevler için yapılandırabilir.

Qwen3-32B Kurulumundan Sonra Başlangıç

Siparişin kayıt sırasında belirtilen e-posta adresine ödemesi yapıldıktan sonra, sunucunun çalışmaya hazır olduğuna dair bir bildirim gönderilecektir. Bu bildirim, VPS IP adresinin yanı sıra sunucuya bağlanmak için giriş ve şifre bilgilerini ve OpenWebUI paneline erişim için bir bağlantı içerecektir. Şirketimizin müşterileri, ekipmanlarını sunucu yönetim paneli ve APIInvapi üzerinden yönetirler.

  • Sunucunun işletim sistemine erişim için kimlik doğrulama verileri (örneğin SSH üzerinden) size alınan e-postada gönderilecektir.
  • Open WebUI web arayüzüne sahip Ollama yönetim paneline erişim bağlantısı: Invapi kontrol panelindeki Configuration >> Tags sekmesindeki webpanel etiketindedir. https://qwen3-32b<Server_ID_from_Invapi>.hostkey.in biçimindeki tam bağlantı, sunucu teslimatında e-posta ile gönderilir.

webpanel etiketindeki bağlantıya tıkladıktan sonra, chatbot'unuz için bir yönetici hesap adı, e-posta ve şifre oluşturmanız gereken bir Get started with Open WebUI giriş penceresi açılacaktır; ardından Create Admin Account düğmesine basın:

Dikkat

İlk kullanıcı kaydedildikten sonra, sistem bu kullanıcıya otomatik olarak yönetici rolü atar. Kayıt süreci üzerinde güvenlik ve kontrol sağlamak için, sonraki tüm kayıt isteklerinin OpenWebUI üzerinden yönetici hesabı tarafından onaylanması gerekir.

Başarılı kayıttan sonra Open Web UI'ın ana arayüzü açılacaktır:

Not

Open Web UI ile Ollama yönetim panelinde çalışma özelliklerinin ayrıntılı açıklaması AI Chatbot on Your Own Server makalesinde bulunabilir.

Not

Optimal çalışma için, büyük bağlamları ve paralel istekleri işlemek için bir tampon sağlayacak olan, 16 GB video belleği olan minimum gereksinimden daha fazla GPU kullanılması önerilir. Ollama ve Open Web UI'ın ana ayarları hakkında ayrıntılı bilgi Ollama'nın geliştirici dokümantasyonunda ve Open Web UI'ın geliştirici dokümantasyonunda bulunabilir.

API Kullanarak Qwen3-32B Sunucusu Sipariş Etme

Bu yazılımı API kullanarak kurmak için bu talimatları izleyin.