Diffusers documentation
HeunDiscreteScheduler
HeunDiscreteScheduler
O agendador Heun (Algoritmo 1) é do paper Elucidating the Design Space of Diffusion-Based Generative Models de Karras et al. O agendador foi portado da biblioteca k-diffusion e criado por Katherine Crowson.
HeunDiscreteScheduler
classe diffusers.HeunDiscreteScheduler
< source >( num_train_timesteps: int = 1000beta_start: float = 0.00085beta_end: float = 0.012beta_schedule: str = 'linear'trained_betas: numpy.ndarray | list[float] | None = Noneprediction_type: str = 'epsilon'use_karras_sigmas: bool = Falseuse_exponential_sigmas: bool = Falseuse_beta_sigmas: bool = Falseclip_sample: bool = Falseclip_sample_range: float = 1.0timestep_spacing: typing.Literal['linspace', 'leading', 'trailing'] = 'linspace'steps_offset: int = 0 )
Parâmetros
- num_train_timesteps (
int, padrão 1000) — O número de etapas de difusão para treinar o modelo. - beta_start (
float, padrão 0.0001) — O valor inicial debetapara a inferência. - beta_end (
float, padrão 0.02) — O valor final debeta. - beta_schedule (
"linear","scaled_linear","squaredcos_cap_v2"ou"exp", padrão"linear") — O agendamento de beta, um mapeamento de um intervalo de beta para uma sequência de betas para o passo do modelo. Escolha entrelinear,scaled_linear,squaredcos_cap_v2ouexp. - trained_betas (
np.ndarray, opcional) — Passe um array de betas diretamente para o construtor para ignorarbeta_startebeta_end. - prediction_type (
"epsilon","sample", or"v_prediction", defaults to"epsilon", optional) — Prediction type of the scheduler function; can beepsilon(predicts the noise of the diffusion process),sample(directly predicts the noisy sample) orv_prediction` (see section 2.4 of Imagen Video paper). - clip_sample (
bool, padrãoTrue) — Recorta a amostra prevista para estabilidade numérica. - clip_sample_range (
float, padrão 1.0) — A magnitude máxima para o recorte de amostras. Válido apenas quandoclip_sample=True. - use_karras_sigmas (
bool, opcional, padrãoFalse) — Se deve usar sigmas de Karras para os tamanhos de passo no agendamento de ruído durante o processo de amostragem. SeTrue, os sigmas são determinados de acordo com uma sequência de níveis de ruído {σi}. - use_exponential_sigmas (
bool, opcional, padrãoFalse) — Se deve usar sigmas exponenciais para os tamanhos de passo no agendamento de ruído durante o processo de amostragem. - use_beta_sigmas (
bool, opcional, padrãoFalse) — Se deve usar beta sigmas para os tamanhos de passo no agendamento de ruído durante o processo de amostragem. Consulte Beta Sampling is All You Need para mais informações. - timestep_spacing (
"linspace","leading"ou"trailing", padrão"linspace") — A forma como os timesteps devem ser escalonados. Consulte a Tabela 2 do Common Diffusion Noise Schedules and Sample Steps are Flawed para mais informações. - steps_offset (
int, padrão 0) — Um deslocamento adicionado às etapas de inferência, conforme exigido por algumas famílias de modelos.
Scheduler com passos de Heun para agendamentos discretos de beta.
Este modelo herda de SchedulerMixin e ConfigMixin. Consulte a documentação da superclasse para os métodos genéricos que a biblioteca implementa para todos os agendadores, como carregamento e salvamento.
add_noise
< source >( original_samples: Tensornoise: Tensortimesteps: Tensor ) → torch.Tensor
Parâmetros
- original_samples (
torch.Tensor) — As amostras originais às quais o ruído será adicionado. - noise (
torch.Tensor) — O tensor de ruído a ser adicionado às amostras originais. - timesteps (
torch.Tensor) — Os timesteps nos quais adicionar ruído, determinando o nível de ruído a partir do agendamento.
Retorna
torch.Tensor
As amostras ruidosas com ruído adicionado, escalado de acordo com a agenda de passos temporais.
Adicione ruído às amostras originais de acordo com o agendamento de ruído nos timesteps especificados.
index_for_timestep
< source >( timestep: typing.Union[float, torch.Tensor]schedule_timesteps: typing.Optional[torch.Tensor] = None ) → int
Parâmetros
- timestep (
floatoutorch.Tensor) — O valor de timestep a ser encontrado no agendamento. - schedule_timesteps (
torch.Tensor, opcional) — O agendamento de timesteps a ser pesquisado. SeNone, usaself.timesteps.
Retorna
int
O índice do timestep no schedule. Para o primeiro passo, retorna o segundo índice se existirem múltiplas correspondências, a fim de evitar pular um sigma ao iniciar no meio do schedule (por exemplo, para image-to-image).
Encontre o índice de um timestep específico na agenda de timesteps.
scale_model_input
< source >( sample: Tensortimestep: typing.Union[float, torch.Tensor] ) → torch.Tensor
Garante a intercambiabilidade com agendadores que precisam escalar a entrada do modelo de desruidamento dependendo do passo de tempo atual.
set_begin_index
< source >( begin_index: int = 0 )
Define o índice inicial para o agendador. Esta função deve ser executada a partir do pipeline antes da inferência.
set_timesteps
< source >( num_inference_steps: int | None = Nonedevice: typing.Union[str, torch.device] = Nonenum_train_timesteps: int | None = Nonetimesteps: list[int] | None = None )
Parâmetros
- num_inference_steps (
int, opcional, padrãoNone) — O número de etapas de difusão usadas ao gerar amostras com um modelo pré-treinado. - device (
str,torch.device, opcional, padrãoNone) — O dispositivo para o qual os timesteps devem ser movidos. SeNone, os timesteps não são movidos. - num_train_timesteps (
int, opcional, padrãoNone) — O número de etapas de difusão usadas ao treinar o modelo. SeNone, o atributo padrãonum_train_timestepsé utilizado. - timesteps (
list[int], opcional) — Timesteps personalizados usados para suportar espaçamento arbitrário entre timesteps. SeNone, os timesteps serão gerados com base no atributotimestep_spacing. Setimestepsfor passado,num_inference_stepsdeve serNone, e o atributotimestep_spacingserá ignorado.
Define os passos discretos usados para a cadeia de difusão (a ser executado antes da inferência).
etapa
< source >( model_output: typing.Union[torch.Tensor, numpy.ndarray]timestep: typing.Union[float, torch.Tensor]sample: typing.Union[torch.Tensor, numpy.ndarray]return_dict: bool = True ) → HeunDiscreteSchedulerOutput or tuple
Parâmetros
- model_output (
torch.Tensor) — A saída direta do modelo de difusão aprendido. - timestep (
float) — O timestep discreto atual na cadeia de difusão. - sample (
torch.Tensor) — Uma instância atual de uma amostra criada pelo processo de difusão. - return_dict (
bool) — Se deve ou não retornar umHeunDiscreteSchedulerOutputou uma tupla.
Retorna
HeunDiscreteSchedulerOutput ou tuple
If return_dict is True, HeunDiscreteSchedulerOutput is
returned, otherwise a tuple is returned where the first element is the sample tensor.
Preveja a amostra do passo de tempo anterior revertendo o SDE. Esta função propaga o processo de difusão a partir das saídas do modelo aprendido (na maioria das vezes, o ruído previsto).
SchedulerOutput
classe diffusers.schedulers.scheduling_utils.SchedulerOutput
< source >( prev_sample: Tensor )
Classe base para a saída da função step de um agendador.