Holst inträdde 1828 vid kungliga teatern och blev inom kort publikens gunstling som framställare av älskar- och tragiska hjälteroller. Vid sin avgång från scenen 1872 hade han spelat inalles över 400 roller. Under kriget 1848 förde han som "månedslöjtnant" med heder en kanonbåt. Han uppträdde även som dramatisk författare.