Nama itu berasal dari salah satu desa yang lebih besar di selatan Växjö disebut Telestad. Peternakan ini diletakkan pada tahun 1840-an di bawah Tuvan pertanian besar oleh aspelin landowner J. Aspelin. Meskipun gaya pertengahan, istana Teleborg dibangun pada tahun 1900 oleh arsitek perusahaan Lindvall & Boclund. Kastil ini dibangun sebagai hadiah pernikahan dari count Fredrik Bonde af Björnörnö untuk istrinya Anna Koskull. 17 tahun kemudian pasangan telah meninggal, dan benteng digunakan sebagai hotel untuk gadis-gadis muda dan untuk akomodasi pada umumnya. Pada tahun 1964 Kota Växjö membelinya dan taman sekitarnya dari keluarga Bonde dan terutama digunakan untuk representasi, pernikahan dan konferensi. Hari ini, benteng digunakan oleh dewan kota untuk tujuan representatif, dan universitas di dekatnya juga menggunakan beberapa bagian dari benteng.