über about:config ist die Boolean-Option extensions.getAddons.showPane mit dem Wert false anzulegen.
Das ist im Übrigen nicht neu seit Firefox 157, sondern funktioniert schon seit mindestens 16 Jahren so. Da wurde die Option zum ersten Mal hier im Forum erwähnt.