Ετοιμάζετε το σιρόπι βράζοντας για 1 λεπτό τη ζάχαρη με το νερό. Κατεβάζετε από τη φωτιά και προσθέτετε το κονιάκ. Ζεσταίνετε 1/4 φλιτζ. τσαγιού γάλα και διαλύετε μέσα του τον καφέ.
Σε μια κατσαρόλα βάζετε το γάλα, την κρέμα γάλακτος, τη ζάχαρη, τους κρόκους και τα μπαχαρικά. Βράζετε ανακατεύοντας με σύρμα, μέχρι το μίγμα να φτάσει σε βρασμό.