Από την προηγούμενη μέρα ξεπλένουμε καλά τον μπακαλιάρο, αφαιρούμε την πέτσα του και τον κόβουμε σε μερίδες. Κατόπιν τον βάζουμε σε ένα βαθύ δοχείο με νερό που να τον σκεπάζει καλά και ανά 2-3 ώρες το αλλάζουμε.
Την επόμενη μέρα ξεπλένουμε, στραγγίζουμε, στεγνώνουμε με χαρτι κουζίνας τον μπακαλιάρο και τον τοποθετούμε ομοιόμορφα σε βαθύ ταψί.
Σε ένα μπολ ετοιμάζουμε τη σος, βάζοντας το ελαιόλαδο, το στυμμένο λεμόνι και την μουστάρδα. Ανακατεύουμε καλά και περιχύνουμε το ψάρι.
Προσθέτουμε λίγη ρίγανη και πιπέρι, το φρέσκο κρεμμυδάκι, τον άνηθο και τον μαϊντανό.
Σκεπάζουμε με αλουμινόχαρτο και ψήνουμε σε προθερμασμένο φούρνο στους 190°C για 20΄στον αέρα.
Ξεσκεπάζουμε το ταψί και συνεχίζουμε το ψήσιμο για ακόμα 5'.
Βγάζουμε το ψάρι από τον φούρνο, το αφήνουμε 2-3' να ξεκουραστεί και σερβίρουμε.