位芳渚临流北,是如意湖、长湖、内湖三湖中间的一个小岛。前殿三楹,乾隆题名知鱼矶,皇帝和后妃常在此钓鱼。主殿五楹名临芳墅,东西配殿各三楹,四周围廊,殿西南有船坞,是御舟青雀坊停泊的地方。临芳墅岛上建筑今皆无存。