高丽后期开始，朝鲜半岛南部沿海屡遭日本海盗（倭寇）侵扰。1397年，新建立的朝鲜王朝太祖六年，将军金贫吉上疏请求在乐安修筑城防以加强地区防御。请求获批，最初先筑土城；从1424年起，历经数年将城墙改建为石城，扩展至今天大致的规模。
乐安邑城真正不凡之处，不仅在于古城墙完整保存至今，更在于至今仍有人在城内居住。如今约有100户人家、居住在城内约290栋茅草屋中——这不是为游客重建的民俗村，而是一处家族世代居住了600多年、至今仍在同一片土地上生活的地方。这里有各种体验项目——传统音乐与盘索里表演、传统婚礼、打铁、织布——但真正让这里区别于其他民俗村的是：所有这些活动，都是在一个真实、有人居住的城镇背景下进行的，而非舞台布景。如果你沿着城墙走，看见烟囱冒烟，那不是表演——那是有人家正在做晚饭。