Aller directement au contenu
  • Catégories
  • Récent
  • Mots-clés
  • Populaire
  • Web
  • Utilisateurs
  • Groupes
Habillages
  • Clair
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Sombre
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Défaut (Darkly)
  • Aucun habillage
Réduire

NodeBB

  1. Accueil
  2. General Discussion
  3. Linux
  4. llama.cpp : exemple de fichier service

llama.cpp : exemple de fichier service

Planifié Épinglé Verrouillé Déplacé Linux
1 Messages 1 Publieurs 6 Vues
  • Du plus ancien au plus récent
  • Du plus récent au plus ancien
  • Les plus votés
Répondre
  • Répondre à l'aide d'un nouveau sujet
Se connecter pour répondre
Ce sujet a été supprimé. Seuls les utilisateurs avec les droits d'administration peuvent le voir.
  • Tuxedo17T Hors-ligne
    Tuxedo17T Hors-ligne
    Tuxedo17
    écrit dernière édition par
    #1

    Voici un exemple de fichier service : /etc/systemd/system/llama-server.service

    [Unit]
    Description=Llama Server
    After=network.target
    
    [Service]
    Type=simple
    User=root
    WorkingDirectory=/home/XXXX/llama.cpp
    Environment="NVM_BIN=/home/XXXX/.nvm/versions/node/v24.17.0/bin"
    Environment="NVM_DIR=/home/XXXXX/.nvm"
    Environment="NVM_INC=/home/XXXXX/.nvm/versions/node/v24.17.0/include/node"
    Environnent="PATH=/home/XXXX/.nvm/versions/node/v24.17.0/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin"
    ExecStart=/usr/local/bin/llama-server \
      -m /models/XXXXX.gguf --mmproj /models/mmproj-XXXX.gguf \
      --host 0.0.0.0 --port 8080
    Restart=on-failure
    RestartSec=5s
    StandardOutput=file:/tmp/llama-server.stdout.log
    StandardError=file:/tmp/llama-server.stderr.log
    
     
    [Install]
    WantedBy=multi-user.target
    
    
    1 réponse Dernière réponse
    0

    Bonjour ! Vous semblez intéressé par cette conversation, mais vous n’avez pas encore de compte.

    Marre de refaire défiler les mêmes messages ? Créez un compte pour retrouver votre position, recevoir des notifications des nouvelles réponses, sauvegarder vos favoris et voter pour les messages que vous appréciez.

    Grâce à votre participation, ce message peut devenir encore meilleur 💗

    S'inscrire Se connecter
    Répondre
    • Répondre à l'aide d'un nouveau sujet
    Se connecter pour répondre
    • Du plus ancien au plus récent
    • Du plus récent au plus ancien
    • Les plus votés


    • Se connecter

    • Vous n'avez pas de compte ? S'inscrire

    • Connectez-vous ou inscrivez-vous pour faire une recherche.
    Powered by NodeBB Contributors
    • Premier message
      Dernier message
    0
    • Catégories
    • Récent
    • Mots-clés
    • Populaire
    • Web
    • Utilisateurs
    • Groupes