From Siri-Lautstärke ändern - Apple Support (DE):
Der HomePod passt die Antwortlautstärke von Siri automatisch an den Geräuschpegel im Raum, deine Entfernung zum HomePod und die Lautstärke an, in der du mit Siri sprichst. Du kannst die automatische Lautstärke ein- oder ausschalten, indem du "Hey Siri, turn on automatic Siri volume (Hey Siri, Lautstärke von Siri automatisch anpassen" ausschalten")" oder "Hey Siri, turn off automatic Siri volume (Hey Siri, Lautstärke von Siri automatisch anpassen" einschalten")" sagst.
I'm not sure if that is supposed to suggest that you can use the English phrase too, or a poorly edited translation.
The other way to control this is Home app > HomePod {long press} > scroll down to Settings > Accessibility > Voice Feedback > Automatically Adjust Siri Volume.
tt2