Guía de instrucciones de Lyria para la generación de música

En esta guía, se brindan ejemplos de los tipos de música y paisajes sonoros de audio que puedes crear con Lyria y se muestra cómo modificar partes específicas de una instrucción para producir resultados diferentes.

Descripción general de la guía de instrucciones

Para usar Lyria, debes proporcionar una instrucción sobre lo que quieres que genere Lyria.

Lyria admite lo siguiente:

  • Instrucciones multimodales, incluida la compatibilidad con entradas de texto y de imagen
  • Generación de voces para canciones
  • Generación de audio

Filtros de seguridad

Lyria aplica filtros de seguridad en Agent Platform para garantizar que el audio generado no contenga contenido ofensivo ni infrinja los lineamientos de uso. Por ejemplo, se bloquean las instrucciones que infringen los lineamientos de IA responsable. Lyria también incluye la verificación de recitación y las verificaciones de intención del artista.

Si sospechas que hay un abuso de Lyria o cualquier resultado generado que contenga material inapropiado o información imprecisa, usa el formulario Denunciar sospechas de abuso Cloud de Confiance by S3NS .

Conceptos básicos para escribir instrucciones

Las buenas instrucciones son descriptivas y claras. Si bien una lista de palabras clave puede generar canciones excelentes, para controlar los modelos con precisión, usa este framework estructurado para crear tu instrucción:

[Genre & style] + [Mood] + [Instrumentation] + [Tempo & rhythm] + [Vocal style & language] + [Lyrics]
  • Género y estilo: Define la categoría musical principal (por ejemplo, "cinematic orchestral fantasy", "electronic dance", "classical", "jazz", "ambient") y las características estilísticas (por ejemplo, "8-bit", "cinematic", "lo-fi").
  • Estado de ánimo y emoción: Describe el sentimiento que debe evocar la música (por ejemplo, "energetic", "melancholy", "peaceful", "tense and suspenseful").
  • Instrumentación: Nombra los instrumentos clave que quieres escuchar (por ejemplo, "piano", "synthesizer", "acoustic guitar", "string orchestra", "electronic drums").
  • Tempo y ritmo: Establece la velocidad (por ejemplo, "fast tempo", "slow ballad", "120 BPM") y el carácter rítmico (por ejemplo, "driving beat", "syncopated rhythm", "gentle waltz").
  • Estilo vocal y lenguaje: Designa el género, el rango vocal (por ejemplo, "smooth baritone", "breathy soprano"), el estilo de interpretación (por ejemplo, "rapping") y el idioma.
  • Letra: Proporciona un tema para que Lyria genere la letra (por ejemplo, "song about a cross-cultural connection") o proporciona la letra exacta entre comillas para que se interprete.
  • (Opcional) Arreglo o estructura: Describe cómo avanza o se superpone la música (por ejemplo, "starts with a solo piano, then strings enter", "crescendo into a powerful chorus"). Especifica "instrumental" en tu instrucción para excluir las voces por completo.
  • (Opcional) Paisaje sonoro o ambiente: Sonidos de fondo o entorno sonoro general (por ejemplo, "rain falling", "city nightlife", "spacious reverb", "underwater feel").
  • (Opcional) Calidad de producción: Fidelidad de audio o estilo de grabación deseados (por ejemplo, "high-quality production", "clean mix", "vintage recording","raw demo feel").

Ejemplos de instrucciones y resultados generados

En esta sección, se presentan instrucciones y cómo el nivel de detalle puede afectar la música.

Dúo de fusión en inglés y francés

En este ejemplo, se muestra el uso de varios elementos en tu instrucción. Aquí, se combinan los estilos de bossa nova clásica y R&B moderno con instrumentación detallada, descripciones de tempo y dúos vocales.

Instrucción Resultados generados
Una fusión romántica de bossa nova clásica y R&B moderno. El ambiente es íntimo, cálido y muy afectuoso. Incluye una guitarra acústica suave con cuerdas de nailon, acordes cálidos de piano eléctrico y un ritmo de batería de hip-hop moderno, nítido y relajado. Un tempo lento y oscilante. Incluye un dúo vocal: un vocalista masculino suave que canta en inglés y una vocalista femenina suave y aireada que canta en francés. La letra es una hermosa canción de amor sobre una conexión intercultural innegable.

Descripción: Un clip de canción de 2 minutos y 50 segundos que combina los estilos de bossa nova clásica y R&B moderno con un dúo vocal romántico masculino y femenino que canta en inglés y francés, acompañado de acordes cálidos de piano y un ritmo de hip-hop relajado.

Administra las voces y la letra

Los modelos de Lyria 3 te permiten hacer lo siguiente:

  • Usa tu propia letra: Escribe "Lyrics:" antes de las líneas que quieres que cante el modelo.
  • Agrega voces de acompañamiento: Si quieres que los cantantes de acompañamiento repitan las voces principales, menciona dónde quieres las voces de acompañamiento en la instrucción.
  • Pídele al modelo que escriba la letra: Para pedirle al modelo que escriba la letra por ti, describe claramente el tema en tu instrucción (por ejemplo, pide "a love song" o una "new happy birthday song").
Instrucción Resultados generados
Una balada de jazz suave y melancólica con piano y contrabajo. Las voces deben ser de una cantante con un rango de soprano aireado y conmovedor. El patrón vocal debe comenzar con confianza, pero volverse más tranquilo y silencioso a medida que avanza la pista. Letra de la canción sobre conocer al amor de su vida en Nueva York.

Controla la voz

Define el estilo vocal que deseas en detalle para obtener la interpretación que quieres:

  • Datos demográficos y rango del cantante: Especifica si quieres un cantante masculino o femenino, y dicta su rango vocal. Por ejemplo, puedes pedir "commanding baritone vocals" o "clear and high soprano range".
  • Textura de la voz (timbre): Describe la textura de la voz. Puedes pedir voces que sean "gravelly," "soulful," o "breathy."
  • Patrones y estilos vocales: Describe el patrón vocal específico que quieres escuchar, como un ritmo "fast-paced" o "laid-back". También puedes experimentar con la superposición de diferentes estilos vocales o hacer que las voces cambien de forma dinámica, como volverse "calmer and quieter as the track progresses."
  • Idioma: Puedes especificar el idioma en el que quieres que se canten las voces. El modelo admite la generación de varias voces en ocho idiomas: inglés, alemán, español, francés, hindi, japonés, coreano y portugués.
Instrucción Resultados generados
Una pista de J-pop animada y de alta energía con sintetizadores brillantes y brillantes, guitarra eléctrica y una línea de bajo potente. Incluye una voz de tenor masculina clara y expresiva que canta en japonés. El estilo vocal debe ser rápido y melódico, con una textura dulce y muy pulida.

Flujos de trabajo creativos avanzados

En las siguientes secciones, se muestran flujos de trabajo avanzados, lo que demuestra cómo usar técnicas de instrucciones estructuradas para dirigir la composición y la evolución exactas del audio generado.

Flujo de trabajo 1: Instrucciones de marca de tiempo

Las instrucciones de marca de tiempo son ideales para crear cambios de género dinámicos o para musicalizar contenido de video asignando acciones específicas a segmentos cronometrados dentro de la estructura de la canción.

Instrucciones de secuencia de línea de tiempo (modelos Pro)

Puedes diseñar estructuras musicales de varias escenas dando formato a segmentos cronometrados con indicadores [mm:ss].

Instrucción Resultados generados
[00:00] Comienza de inmediato con un coro de góspel masivo que canta una armonía poderosa y edificante sobre ser amable contigo mismo.

[00:15] Se incluye un ritmo de batería de hip-hop moderno y pesado, y una línea de bajo 808 profunda, que coinciden con la energía del coro.

[00:30] Un vocalista principal masculino comienza a rapear un verso seguro sobre cómo superar los desafíos de la vida, mientras que el coro grande puntúa sus líneas en segundo plano.

[01:10] Transición a un coro enorme y triunfal que celebra la victoria. El coro de góspel canta a todo volumen y superpone armonías conmovedoras y ricas sobre el ritmo de hip-hop y los triunfantes cuernos de metal.

[01:50] El ritmo se reduce a un órgano Hammond B3 suave. El rapero ofrece un puente emocional y silencioso sobre cómo perdonarte, con el apoyo de zumbidos suaves y cálidos del coro masivo.

[02:10] El ritmo de hip-hop completo y el coro gigante regresan con la máxima energía para un coro final edificante, antes de terminar con un acorde de coro resonante y sostenido en [03:00].

Flujo de trabajo 2: Generación multimodal

Los modelos de Lyria te permiten subir hasta 10 imágenes o archivos PDF de referencia para establecer la línea de base emocional y la línea de base de narración visual de la pista generada.

Instrucción Resultados generados
Una canción de Bollywood moderna y muy emotiva en inglés. La letra y el estado de ánimo deben coincidir con la historia de las imágenes adjuntas.

Mensajes negativos

Los mensajes negativos ayudan a especificar los elementos que se deben excluir de la música. Describe lo que quieres evitar que genere el modelo.

  • El parámetro de la API es negative_prompt.

  • Enumera los elementos que se deben excluir, por ejemplo, negative_prompt: "vocals, excessive cymbal crashes, distorted guitar".

Situación de la instrucción Resultados generados

Instrucción: "A warm, modern lofi hip-hop beat for studying, featuring a muffled drum break and dusty jazz piano samples. Instrumental."

(Sin mensaje negativo)

Descripción: El instrumental de hip-hop es generalmente tranquilo, pero puede incluir algunas dinámicas más fuertes inesperadas o ejecuciones complejas que podrían distraer el estudio.

Instrucción: "A warm, modern lofi hip-hop beat for studying, featuring a muffled drum break and dusty jazz piano samples. Instrumental."

Mensaje negativo: "complex melodies, loud dynamics, sudden changes, drums, vocals"

Descripción: El instrumental de hip-hop resultante es constantemente tranquilo y simple. El estado de ánimo es más uniforme y adecuado para el enfoque en segundo plano.

Más sugerencias para escribir instrucciones

Las siguientes sugerencias te ayudan a escribir instrucciones eficaces para Lyria:

  • Sé descriptivo y específico: Usa adjetivos y adverbios para pintar una imagen sonora clara. Cuantos más detalles proporciones, mejor podrá comprender Lyria tu intención.

  • Haz referencia a géneros, estados de ánimo y estilos: Indica claramente la categoría musical y el sentimiento que quieres evocar, así como cualquier característica estilística.

  • Especifica instrumentos y ritmos clave: Menciona instrumentos importantes y describe el ritmo y la sensación rítmica que deseas.

  • Itera y experimenta: Si el primer resultado no es perfecto, modifica tu instrucción agregando, quitando o cambiando palabras clave. Consulta Introducción a las instrucciones para obtener estrategias generales.

Estructura detallada

Puedes proporcionar instrucciones detalladas que describan la estructura de una canción para guiar la música en varias partes.

Los siguientes son parámetros que puedes usar para generar estructuras musicales detalladas:

  • Marcas de tiempo: Proporciona marcas de tiempo en formato [mm:ss - mm:ss] para dictar eventos en una pieza.

  • Tonalidad de la canción: Describe la tonalidad en la que se establece un segmento de una canción. Por ejemplo, La mayor.

  • Ritmo de pulsaciones: Describe las pulsaciones por minuto deseadas. Por ejemplo, 150 BPM.

  • Intensidad: Describe la intensidad de un segmento de la canción. Por ejemplo, Intensidad: 1/10 (muy baja).

El siguiente es un ejemplo de una instrucción con una estructura detallada para crear una canción de varias partes:

Create a 60-second instrumental track at 80 BPM. The feeling is nostalgic,
introspective, and atmospheric - a warm, comforting melancholy with a soft,
minor-key feel. The sound should be centered around a warm, slightly overdriven
Fender Rhodes and soft, ethereal synth pads. The rhythm is a minimalist,
laid-back drum beat with a relaxed, human feel. Weave subtle atmospheric
textures, like soft static or room tone, through the entire track for texture.

[0:00 - 0:12] Intro: Begin atmospherically with just the Fender Rhodes
playing soft, hazy chords. Drench it in warm reverb and introduce a light
atmospheric texture. The mood is like a memory coming into focus. Intensity:
1/10 (Very Low)

[0:12 - 0:24] Verse 1: The laid-back drum beat enters with a simple kick and
snare. A soft, ethereal synth pad swells in the background. A clean, subtle
sub-bass joins, adding depth. The Rhodes melody becomes slightly more defined,
following a simple, melancholic progression. Intensity: 3/10 (Low)

[0:24 - 0:36] Build: The groove deepens as a gentle, syncopated hi-hat is added.
A simple, memorable lead melody appears, played on a warm, rounded synth. This
section should feel like the gentle peak of the track's focus, with a chord
progression that builds a sense of hopeful tension. Intensity: 5/10 (Medium)

[0:36 - 0:48] Chorus: Gracefully pull back the intensity. The synth lead melody
fades out, returning focus to the core Rhodes groove and the drums. This gives
the track space to breathe, resolving the tension from the build. Intensity:
4/10 (Medium-Low)

[0:48 - 1:00] Outro: The drums and bass drop out completely. The track fades out
leaving only the Rhodes playing spacious chords, the lingering synth pad, and
the persistent atmospheric texture. Intensity: 2/10 (Very Low)