文武庙位于日月潭北边山腰处，其由来与日月潭兴建史有关。公元1932年，日月潭建坝储水后，当时潭畔有龙凤宫，北吉巷有益化堂两庙，有鉴于潭水过高将漫淹二庙，于是决议迁庙，在地方人士的奔走下，于公元1934年将两庙合一，即为文武庙的前身。公元1969年文武庙重建，以「北朝式」格式建筑，这也就是今天文武庙所见之辉宏建筑格局。
文武庙形势陡峻，依山势而筑，愈后愈高，庄颜雄伟。正门面临环湖公路，为墨绿色大理石牌坊，正面书曰「文武庙」，左右分题「崇文」「重武」，两边梁柱有黄杰先生题书对联一幅「道贯古今德参造化」「惠昭日月义薄云天」。拾阶而上，为庙的广场，一对枣红色巨型狮子抱球呼应，格外醒目。
庙的方位采「坐东向西」背山面湖，大有尽揽江山的磅礡气势。主要建筑为"一埕二庭三殿"；台湾著名寺庙大多采此布局，是等级很高的庙宇布局。进入庙埕视觉随即被壮观的前殿所吸引。前殿为楼阁式建筑，主要作祭祀之用，故称「拜殿」；楼阁称「水云宫」，祀奉文武庙开基诸神。正殿主祀武圣关羽故名曰「武圣殿」，正殿位居全庙正中，是文武庙群筑中最大的建筑，高度达21公尺，为正方型的殿堂，此布局乃是为彰显帝君之神威。后殿主祀孔子，名为「大成殿」，故依儒教古制构筑，与前两殿有诸多的不同，其特色是屋顶采用非常罕见的重檐庑殿式，是宫殿式建筑的最高等级，以表征孔子的至圣高贵。