Non puoi. Potresti analizzare il markup HTML e usarlo per costruire un oggetto di testo ricco, che potresti quindi impostare come contenuto di una cella; ma non c'è alcuna conversione da HTML a rich text incorporata in PHPExcel stesso, quindi dovresti farlo a mano.
