#!/usr/bin/env bash
# Clover-35B-A3B-Preview lokal ausprobieren – Linux
# Automatisch erzeugt von Tokenstrom (tokenstrom.de).
# Aufruf: bash try_linux.sh
set -e
cd "$(dirname "$0")"
echo "== Clover-35B-A3B-Preview =="
if command -v nvidia-smi >/dev/null 2>&1; then nvidia-smi --query-gpu=name,memory.total --format=csv,noheader;
else echo "Keine NVIDIA-GPU gefunden – läuft auf CPU (langsam)"; fi

echo "== Python / Hugging Face =="
python3 -m venv .venv-clover-35b-a3b-preview
source .venv-clover-35b-a3b-preview/bin/activate
pip install -q -U pip
if command -v nvidia-smi >/dev/null 2>&1; then
  pip install -q -U torch --index-url https://download.pytorch.org/whl/cu124
  pip install -q -U transformers accelerate bitsandbytes
else
  pip install -q -U torch --index-url https://download.pytorch.org/whl/cpu
  pip install -q -U transformers accelerate
fi

python3 demo.py