#!/usr/bin/env bash
# NVIDIA-Nemotron-Labs-Dory1.0-4B-BF16 lokal ausprobieren – Linux
# Automatisch erzeugt von Tokenstrom (tokenstrom.de).
# Aufruf: bash try_linux.sh
set -e
cd "$(dirname "$0")"
echo "== NVIDIA-Nemotron-Labs-Dory1.0-4B-BF16 =="
if command -v nvidia-smi >/dev/null 2>&1; then nvidia-smi --query-gpu=name,memory.total --format=csv,noheader;
else echo "Keine NVIDIA-GPU gefunden – läuft auf CPU (langsam)"; fi

echo "== Python / Hugging Face =="
python3 -m venv .venv-nvidia-nemotron-labs-dory1-0-4
source .venv-nvidia-nemotron-labs-dory1-0-4/bin/activate
pip install -q -U pip
if command -v nvidia-smi >/dev/null 2>&1; then
  pip install -q -U torch --index-url https://download.pytorch.org/whl/cu124
  pip install -q -U transformers accelerate bitsandbytes
else
  pip install -q -U torch --index-url https://download.pytorch.org/whl/cpu
  pip install -q -U transformers accelerate
fi

python3 demo.py