Nejcennější stavební památkou Semil je barokní Mariánský sloup. Pochází z roku 1738. Jsou na něm sochy sv. Jana Evangelisty, Jana Křtitele a Jana Nepomuckého.