Ja wie gesagt, Datei -> Remuxe Aufnahmen
In der neuen OBS Version kann man unter
Einstellungen
Erweitert
bei Aufnahme ein Häckchen setzen bei "Automatisch zu mp4 remuxen"
Das bewirkt das am Ende der Aufnahme zu mp4 remuxed wird. Ist praktisch sofern man das immer direkt danach gemacht hat.