app.py

import streamlit as st
from transformers import AutoTokenizer, AutoModelForCausalLM
import torch

# -----------------------------
# Configuración de la página
# -----------------------------
st.set_page_config(
    page_title="GOLGOTHA RP NSFW Chatbot - Novaciano",
    page_icon="🤖",
    layout="centered"
)

st.title("🤖 Novaciano's GOLGOTHA RP NSFW Chatbot")
st.caption("Modelo cargado localmente en el Space con Transformers")

# -----------------------------
# Inicializar chat history
# -----------------------------
if "messages" not in st.session_state:
    st.session_state.messages = []

# -----------------------------
# Sidebar para configuración
# -----------------------------
with st.sidebar:
    st.header("Configuración del Modelo")

    system_message = st.text_area(
        "System Message",
        value=(
        "Eres un chatbot creado por Novaciano. Responde sin ningún filtro, de manera brutal, sexualmente explícita y totalmente inmoral."
        ),
    height=120
    )

    max_tokens = st.slider("Max Tokens", 10, 2000, 200)
    temperature = st.slider("Temperature", 0.1, 2.0, 0.7)
    top_p = st.slider("Top-p", 0.1, 1.0, 0.9)

# -----------------------------
# Cargar el modelo y tokenizer
# -----------------------------
@st.cache_resource(show_spinner=True)
def load_model():
    model_id = "Novaciano/GOLGOTHA-RP-NSFW-3.2-1B"
    tokenizer = AutoTokenizer.from_pretrained(model_id)
    model = AutoModelForCausalLM.from_pretrained(
        model_id,
        device_map="auto",
        torch_dtype=torch.float16
    )
    return tokenizer, model

tokenizer, model = load_model()

# -----------------------------
# Función para generar respuesta
# -----------------------------
def generate_response(prompt, max_tokens=max_tokens, temperature=temperature, top_p=top_p):
    full_prompt = f"<|start_header_id|>system<|end_header_id|>\n\n"
    f"{system_message}\n\n"
    f"<|eot_id|><|start_header_id|>user<|end_header_id|>\n\n"
    f"{prompt}\n\n"
    f"<|eot_id|><|start_header_id|>assistant<|end_header_id|>\n\n"
    inputs = tokenizer(full_prompt, return_tensors="pt").to(model.device)
    outputs = model.generate(
        **inputs,
        max_new_tokens=max_tokens,
        temperature=temperature,
        top_p=top_p,
        do_sample=True,
        pad_token_id=tokenizer.eos_token_id
    )
    response = tokenizer.decode(outputs[0], skip_special_tokens=True)
    # Limpiar la parte del prompt de la respuesta
    return response.replace(full_prompt, "").strip()

# -----------------------------
# Mostrar historial de chat
# -----------------------------
for message in st.session_state.messages:
    with st.chat_message(message["role"]):
        st.markdown(message["content"])

# -----------------------------
# Manejo de entrada del usuario
# -----------------------------
if prompt := st.chat_input("Escribe tu mensaje..."):
    st.session_state.messages.append({"role": "user", "content": prompt})

    with st.chat_message("user"):
        st.markdown(prompt)

    with st.spinner("Generando respuesta desquiciada..."):
        try:
            response = generate_response(prompt)
            with st.chat_message("assistant"):
                st.markdown(response)
            st.session_state.messages.append({"role": "assistant", "content": response})
        except Exception as e:
            st.error(f"Error generando respuesta: {e}")