Guida ai prompt per la generazione di musica con Lyria

Questa guida fornisce esempi dei tipi di musica e paesaggi sonori audio che puoi creare utilizzando Lyria e mostra come modificare parti specifiche di un prompt per produrre risultati diversi.

Panoramica della guida ai prompt

Per utilizzare Lyria, devi fornire un prompt su ciò che vuoi che Lyria generi.

Lyria supporta quanto segue:

  • Prompt multimodali, incluso il supporto per input di immagini e testo
  • Generazione di voci per i brani
  • Generazione di audio

Filtri di sicurezza

Lyria applica filtri di sicurezza in tutta la piattaforma dell'agente per garantire che l'audio generato non contenga contenuti offensivi o violi le linee guida per l'utilizzo. Ad esempio, i prompt che violano le linee guida per l'AI responsabile vengono bloccati. Lyria include anche il controllo della recitazione e i controlli dell'intento dell'artista.

Se sospetti un uso illecito di Lyria o di qualsiasi output generato che contenga materiale inappropriato o informazioni inaccurate, utilizza il modulo Segnala sospetto uso illecito Cloud de Confiance by S3NS .

Nozioni di base per la scrittura dei prompt

I prompt efficaci sono descrittivi e chiari. Sebbene un elenco di parole chiave possa generare brani fantastici, per controllare i modelli con precisione, utilizza questo framework strutturato per creare il prompt:

[Genre & style] + [Mood] + [Instrumentation] + [Tempo & rhythm] + [Vocal style & language] + [Lyrics]
  • Genere e stile: definisci la categoria musicale principale (ad esempio "cinematic orchestral fantasy", "electronic dance", "classical", "jazz", "ambient") e le caratteristiche stilistiche (ad esempio "8-bit", "cinematic", "lo-fi").
  • Atmosfera ed emozione: descrivi la sensazione che la musica dovrebbe evocare (ad esempio "energetic", "melancholy", "peaceful", "tense and suspenseful").
  • Strumentazione: indica gli strumenti chiave che vuoi ascoltare (ad esempio "piano", "synthesizer", "acoustic guitar", "string orchestra", "electronic drums").
  • Ritmo: imposta la velocità (ad esempio "fast tempo", "slow ballad", "120 BPM") e il carattere ritmico (ad esempio "driving beat", "syncopated rhythm", "gentle waltz").
  • Stile e lingua vocale: indica il genere, la gamma vocale (ad esempio "smooth baritone", "breathy soprano"), lo stile di esecuzione (ad esempio "rapping") e la lingua.
  • Testi: fornisci un tema a Lyria per generare i testi (ad esempio "song about a cross-cultural connection") oppure fornisci i testi esatti tra virgolette da eseguire.
  • (Facoltativo) Arrangiamento/struttura: descrivi la progressione o i livelli della musica (ad esempio "starts with a solo piano, then strings enter", "crescendo into a powerful chorus"). Specifica "instrumental" nel prompt per escludere completamente le voci.
  • (Facoltativo) Paesaggio sonoro/atmosfera: Suoni di sottofondo o ambiente sonoro generale (ad esempio "rain falling", "city nightlife", "spacious reverb", "underwater feel").
  • (Facoltativo) Qualità della produzione: fedeltà audio o stile di registrazione desiderato (ad esempio "high-quality production", "clean mix", "vintage recording","raw demo feel").

Esempi di prompt e output generato

Questa sezione presenta i prompt e il modo in cui il livello di dettaglio può influire sulla musica.

Duetto fusion in inglese e francese

Questo esempio mostra l'utilizzo di diversi elementi nel prompt. Qui combina gli stili classici di Bossa Nova e R&B moderni utilizzando descrizioni dettagliate di strumentazione e ritmo e duetti vocali.

Prompt Output generato
Una fusione romantica di Bossa Nova classica e R&B moderna. L'atmosfera è intima, calda e profondamente affettuosa. Presenta una chitarra acustica con corde in nylon, accordi di pianoforte elettrico caldi e un ritmo di batteria hip-hop moderno, nitido e rilassato. Un ritmo lento e ondeggiante. Con un duetto vocale: un cantante maschile con una voce morbida che canta in inglese e una cantante femminile con una voce dolce e sussurrata che canta in francese. I testi sono una bellissima canzone d'amore su una connessione interculturale innegabile.

Descrizione: un clip di un brano di 2 minuti e 50 secondi che combina gli stili classici di Bossa Nova e R&B moderni con un duetto vocale romantico maschile e femminile che canta in inglese e francese, accompagnato da accordi di pianoforte caldi e un ritmo hip-hop rilassato.

Gestire voci e testi

I modelli di Lyria 3 ti consentono di:

  • Utilizzare i tuoi testi: digita "Lyrics:" prima delle righe che vuoi che il modello canti.
  • Aggiungere cori: se vuoi che i coristi facciano eco alle voci principali, indica dove vuoi che i cori siano presenti nel prompt.
  • Chiedere al modello di scrivere i testi: per chiedere al modello di scrivere i testi per te, descrivi chiaramente il tema nel prompt (ad esempio, chiedi "a love song" o "new happy birthday song").
Prompt Output generato
Una ballata jazz morbida e malinconica con pianoforte e contrabbasso. Le voci dovrebbero essere di una cantante con una gamma di soprano sussurrata e soulful. Il pattern vocale dovrebbe iniziare con sicurezza, ma diventare più calmo e silenzioso man mano che la traccia procede. Testi di canzoni che parlano dell'incontro con l'amore della sua vita a New York.

Controllare la voce

Definisci in dettaglio lo stile vocale che vuoi per ottenere l'esecuzione desiderata:

  • Dati demografici e gamma del cantante: specifica se vuoi un cantante maschile o femminile e indica la sua gamma vocale. Ad esempio, puoi chiedere "commanding baritone vocals" o "clear and high soprano range".
  • Struttura della voce (timbro): descrivi la struttura della voce, puoi chiedere voci "gravelly," "soulful," o "breathy."
  • Pattern e stili vocali: descrivi il pattern vocale specifico che vuoi ascoltare, ad esempio un groove "fast-paced" o "laid-back". Puoi anche sperimentare la sovrapposizione di stili vocali diversi o la modifica dinamica delle voci, ad esempio rendendole "calmer and quieter as the track progresses."
  • Lingua: puoi specificare la lingua in cui vuoi che le voci vengano cantate. Il modello supporta la generazione di più voci in otto lingue: inglese, tedesco, spagnolo, francese, hindi, giapponese, coreano e portoghese.
Prompt Output generato
Una traccia J-pop vivace ed energica con sintetizzatori brillanti e scintillanti, chitarra elettrica e una linea di basso incalzante. Con una voce di tenore maschile chiara ed espressiva che canta in giapponese. Lo stile vocale dovrebbe essere veloce e melodico, con una struttura dolce e molto raffinata.

Flussi di lavoro creativi avanzati

Le sezioni seguenti mostrano flussi di lavoro avanzati, dimostrando come utilizzare tecniche di prompting strutturate per dirigere la composizione e l'evoluzione esatte dell'audio generato.

Flusso di lavoro 1: prompting con timestamp

Il prompting con timestamp è ideale per creare cambi di genere dinamici o per la musica di sottofondo dei contenuti video assegnando azioni specifiche a segmenti temporizzati all'interno della struttura del brano.

Prompting con sequenza della timeline (modelli Pro)

Puoi progettare strutture musicali multi-scena formattando i segmenti temporizzati con indicatori [mm:ss].

Prompt Output generato
[00:00] Inizia immediatamente con un enorme coro gospel che canta un'armonia potente ed edificante sull'essere gentili con se stessi.

[00:15] Un ritmo di batteria hip-hop moderno e pesante e una linea di basso 808 profonda si inseriscono, in linea con l'energia del coro.

[00:30] Un cantante solista maschile inizia a rappare un verso sicuro sul superamento delle sfide della vita, mentre il grande coro punteggia le sue righe in sottofondo.

[01:10] Passa a un enorme coro trionfale che celebra la vittoria. Il coro gospel canta a tutto volume, sovrapponendo armonie ricche e soulful al ritmo hip-hop incalzante e alle trombe trionfali.

[01:50] Il ritmo si riduce a un organo Hammond B3 delicato. Il rapper esegue un bridge tranquillo ed emotivo sul darsi la possibilità di sbagliare, supportato da canti morbidi e caldi del grande coro.

[02:10] Il ritmo hip-hop completo e il coro gigante tornano alla massima energia per un coro finale edificante, prima di terminare con un accordo di coro risonante e sostenuto a [03:00].

Flusso di lavoro 2: generazione multimodale

I modelli di Lyria ti consentono di caricare fino a 10 immagini o PDF di riferimento per stabilire la base emotiva e la base di narrazione visiva per la traccia generata.

Prompt Output generato
Un brano di Bollywood moderno e profondamente emotivo in inglese. I testi e l'atmosfera devono corrispondere alla storia delle immagini allegate.

Prompt negativi

I prompt negativi aiutano a specificare gli elementi da escludere dalla musica. Descrivi ciò che vuoi impedire al modello di generare.

  • Il parametro API è negative_prompt.

  • Elenca gli elementi da escludere, ad esempio negative_prompt: "vocals, excessive cymbal crashes, distorted guitar".

Scenario del prompt Output generato

Prompt: "Un ritmo hip-hop lofi moderno e caldo per studiare, con un drum break ovattato e campioni di pianoforte jazz polverosi. Strumentale."

(Senza prompt negativo)

Descrizione: lo strumentale hip-hop è generalmente calmo, ma potrebbe includere alcune dinamiche più forti impreviste o esecuzioni complesse che potrebbero distrarre dallo studio.

Prompt: "Un ritmo hip-hop lofi moderno e caldo per studiare, con un drum break ovattato e campioni di pianoforte jazz polverosi. Strumentale."

Prompt negativo: "melodie complesse, dinamiche forti, cambiamenti improvvisi, batteria, voci"

Descrizione: lo strumentale hip-hop risultante è costantemente calmo e semplice. L'atmosfera è più uniforme e adatta alla concentrazione in sottofondo.

Altri suggerimenti per la scrittura dei prompt

I seguenti suggerimenti ti aiutano a scrivere prompt efficaci per Lyria:

  • Sii descrittivo e specifico: utilizza aggettivi e avverbi per dipingere un quadro sonoro chiaro. Più dettagli fornisci, meglio Lyria potrà comprendere il tuo intento.

  • Fai riferimento a generi, atmosfere e stili: indica chiaramente la categoria musicale e la sensazione che vuoi evocare, nonché eventuali caratteristiche stilistiche.

  • Specifica gli strumenti e i ritmi chiave: indica gli strumenti importanti e descrivi il ritmo e la sensazione ritmica che vuoi.

  • Esegui l'iterazione e sperimenta: se il primo risultato non è perfetto, modifica il prompt aggiungendo, rimuovendo o modificando le parole chiave. Consulta Introduzione al prompting per le strategie generali.

Struttura dettagliata

Puoi fornire prompt dettagliati che descrivono la struttura di un brano per guidare la musica in più parti.

Di seguito sono riportati i parametri che puoi utilizzare per generare strutture musicali dettagliate:

  • Timestamp: fornisci i timestamp nel formato [mm:ss - mm:ss] per indicare gli eventi in un brano.

  • Tonalità del brano: descrivi la tonalità in cui è impostato un segmento di un brano. Ad esempio, A major.

  • Velocità del ritmo: descrivi i battiti al minuto desiderati. Ad esempio, 150 BPM.

  • Intensità: descrivi l'intensità di un segmento del brano. Ad esempio, Intensity: 1/10 (Very low).

Di seguito è riportato un esempio di prompt con una struttura dettagliata per creare un brano in più parti:

Create a 60-second instrumental track at 80 BPM. The feeling is nostalgic,
introspective, and atmospheric - a warm, comforting melancholy with a soft,
minor-key feel. The sound should be centered around a warm, slightly overdriven
Fender Rhodes and soft, ethereal synth pads. The rhythm is a minimalist,
laid-back drum beat with a relaxed, human feel. Weave subtle atmospheric
textures, like soft static or room tone, through the entire track for texture.

[0:00 - 0:12] Intro: Begin atmospherically with just the Fender Rhodes
playing soft, hazy chords. Drench it in warm reverb and introduce a light
atmospheric texture. The mood is like a memory coming into focus. Intensity:
1/10 (Very Low)

[0:12 - 0:24] Verse 1: The laid-back drum beat enters with a simple kick and
snare. A soft, ethereal synth pad swells in the background. A clean, subtle
sub-bass joins, adding depth. The Rhodes melody becomes slightly more defined,
following a simple, melancholic progression. Intensity: 3/10 (Low)

[0:24 - 0:36] Build: The groove deepens as a gentle, syncopated hi-hat is added.
A simple, memorable lead melody appears, played on a warm, rounded synth. This
section should feel like the gentle peak of the track's focus, with a chord
progression that builds a sense of hopeful tension. Intensity: 5/10 (Medium)

[0:36 - 0:48] Chorus: Gracefully pull back the intensity. The synth lead melody
fades out, returning focus to the core Rhodes groove and the drums. This gives
the track space to breathe, resolving the tension from the build. Intensity:
4/10 (Medium-Low)

[0:48 - 1:00] Outro: The drums and bass drop out completely. The track fades out
leaving only the Rhodes playing spacious chords, the lingering synth pad, and
the persistent atmospheric texture. Intensity: 2/10 (Very Low)