Drewniany gród w Toszku istniał prawdopodobnie już w X wieku, ale murowany zamek w Toszku powstał dopiero na początku XV wieku. Już w 1429 roku został zniszczony przez husytów, odbudowany przez księcia Przemysława Toszeckiego. Zamek przechodził z rąk do rąk, spłonął w 1570 roku, ale został odbudowany i rozbudowany o pomieszczenia mieszkalne w budynku bramnym. W 1811 roku zamek znów spłonął, ale tym razem nie został odbudowany. Częściowej odbudowy zamku w Toszku dokonano w latach 1957–1963.

Obecnie zamek jest siedzibą miejskiego Centrum Kultury „Zamek w Toszku”. Niedaleko zamku w Toszku jest Pałac Ballestremów w Pławniowicach.

Zamek w Toszku na mapie Polski