Земли вокруг нынешнего Чартерс-Тауэрса издавна связаны с народом Gudjal. После пасторального освоения северного Квинсленда старатели Хью Мосман, Джордж Кларк, Джон Фрейзер и Джупитер нашли золото во время грозы в конце 1871 года; находку зарегистрировали в январе 1872-го. Первым поселением был Millchester, но торговля быстро переместилась в Чартерс-Тауэрс. К 1870-1890-м годам глубокие жилы, дробильные установки, банки, железная дорога из Таунсвилла и биржа превратили поле в крупный город. В 1899 году добыча достигла пика, затем истощение легкообрабатываемых руд изменило экономику. Школа горного дела, общественные здания и спортивные общества пережили спад. В XX веке город опирался на образование, здравоохранение, скотоводство и наследие золотого поля. Сохранившийся центр не является декорацией: он показывает, как быстро добыча изменила внутренний Квинсленд и почему её последствия видны в городской ткани до сих пор. В 1882 году железная дорога связала город с Таунсвиллом и усилила его роль. В 1909 году поселение получило городской статус.