赤城山因土色皆赤，形如城堡而得名。从前台州称赤城郡，天台县称为赤城，均因此山而得名。

赤城山高四百米，近县城拔地而起，气象万千。山中有十二个岩洞，以紫云洞、玉京洞最为有名。紫云洞在山麓，洞口嵌“赤城霞”三字。洞广数十丈，高数丈，洞内结屋，楼梯盘桓。相传明代建文帝曾两次来游。玉京洞高轩宽敞，是山中精舍。明僧灵睿有一联“不与众山同一色，敢于平地拔千寻”。洞前不远处有金钱池，相传晋代高僧昙酞在此诵经，有神献金钱于池中而得名。

山顶矗立一古塔，为梁代岳阳王妃所建，是天台山最古的建筑物。