Uygulama

Parrot Libre AI IDE uygulaması için belgeler.

Not

Parrot hala geliştirmede ve son kullanıcılar için hazır değil.

Gereksinimler

Parrot’un çalışması için mevcut bir GNU/Linux sistemi gerekir, örneğin Debian Stable.

İndir

Parrot’un mevcut versiyonu buradan indirilebilir:

Alternatively, releases are also available on this server:

Çalıştır

Bu bir AppImage olduğu için çalıştırılabilir hale getirilmesi gerekiyor, sonra çalıştırın:

chmod +x Parrot.AppImage
./Parrot.AppImage

Durum

Şu anda Parrot’un tüm parçaları hazır değil.

Main components:

  • İDE (metin/kod düzenleyici).

  • IDE AI extension.

  • Yapay Zeka genişletme sunucusu.

  • Yapay Zeka çıkarım sunucusu.

  • AI modeli.

  • Search server.

What nominally works:

  • İDE (metin/kod düzenleyici).

  • IDE AI extension.

  • Yapay Zeka genişletme sunucusu.

Eksik olan nedir:

  • Yapay Zeka çıkarım sunucusu.

  • AI modeli.

  • Search server.

Yapay Zeka Sunucusu

Parrot, yerleşik Yapay Zeka çıkarım sunucusu bulunmadığı için çalışmaz. Kendi Yapay Zeka sunucunu ve modelini çalıştırarak bu sorunu çözebilirsiniz. Bun

  • Modeli bulun.

  • git clone https://github.com/ggerganov/llama.cpp

  • Build llama.cpp.

  • Çalıştır Llama.cpp sunucusu.

Sunucuyu böyle çalıştırmak, GGUF modeli ile (TheBloke’e bakın):.

cd llama.cpp/build
./bin/server -c 4096 --host 127.0.0.1 -t 16 mymodel.gguf

Başka bir örnek, ilk GPU’yu kullanarak:

export CUDA_VISIBLE_DEVICES=0

cd ~/devel/ggerganov/llama.cpp/build
./bin/server \
    --n-gpu-layers 1024 \
    -c 8192 \
    --host 0.0.0.0 \
    --port 8080 \
    -t 16 \
    -m /srv/ml/huggingface/TheBloke/Phind-CodeLlama-34B-v2-GGUF/phind-codellama-34b-v2.Q8_0.gguf

Not

Parrot belgeleri İngilizce’de yazılmıştır ve diğer dillere yönelik çeviriler için Yapay Zeka makine çevirisi kullanır.