Πλένουμε το κοτόπουλο, το αλατοπιπερώνουμε και το τοποθετούμε στο ταψί. Ρίχνουμε από πάνω λίγη ρίγανη, τον χυμό του λεμονιού, τις ντομάτες ψιλοκομένες και την πιπεριά σε ροδέλες. Τα ανακατεύουμε καλά όλα και στο τέλος ρίχνουμε το λάδι ανακατεμένο με την μουστάρδα. Το βάζουμε στον φούρνο για περίπου μία ώρα, μέχρι να ροδοκοκκινήσει.