Jan z Olszyn nadał w 1397 r. Glandianowi i Mikołajowi (Prusom) 20 włók na prawie chełmińskim, położonych między jeziorem Jełmuń, a granicą biskupstwa warmińskiego. Na obdarowanych spoczywał obowiązek dwu służb zbrojnych. W ciągu wieków nie zmienił się charakter wsi, pozostała ona szlachecką.
W 1785 r. było tam 14 domów, w 1815 r. - 17 domów i 85 osób, 1838 24 domy i 204 mieszkańców. W 2. połowie XIX w. we wsi powstał dwór, do którego należało 11,5 włók ziemi. Zabudowa wsi ułożyła się w kształcie ulicówki wzdłuż jeziora, od którego zapożyczyła swoją nazwę (Allmoyne). Uczony Gerullis zaliczał ją do nazw prusko-litewskich, lit. 'alme' - ropa.
Polska nazwa Jełmuń pochodzi najprawdopodobniej od jemioły. Jełmuń otrzymał szkołę przed 1740 r. w 1818 r. wykładał w niej po polsku 54 dzieciom (również z Choszczewa) Jerzy Niesyta. Do 1939 r. pozostawała ona jednoklasowa, a w 1935 r. uczęszczało do niej 65 uczniów. Wieś ta należała do parafii w Sorkwitach. W roku 1939 liczyła 309 mieszkańców
Dawny, niewielki majątek ziemski malowniczo położony nad jeziorem Jełmuń, ok. 6 km na północny zachód od Sorkwit. Klarowne, typowe w kompozycji założenie, pięknie usytuowane w krajobrazie. Dwór na wzniesieniu, w punkcie środkowym zespołu, między parkiem schodzącym ku brzegom jeziora a czworokątem podwórza gospodarczego. W parku zachowane jeszcze szerokie otwarcie widokowe na jezioro. W XIX w. własność rodziny von Voisky, w pobliżu na sąsiednim wzgórzu zachował się cmentarz rodowy.
Klasycystyczny dwór pochodzi z 2 połowy XIX w. Założony na rzucie prostokąta, parterowy, przekryty dachem dwuspadowym. W elewacji frontowej (od strony parku i jeziora) ryzalit z trzema półkolistymi arkadami w przyziemiu, zwieńczony trójkątnym naczółkiem, poprzedzony półkolistym tarasem. Elewacja od strony podwórza znacznie skromniejsza.
Od 2000 r. dwór jest własnością prywatną. Obecnie jest remontowany.
Pod koniec sierpnia remont został zakończony i nastąpiło oddanie budynku.

7 km - Sorkwity / Pałace, dwory - Pałac w Sorkwitach
13 km - Łężany / Pałace, dwory - Pałac w Łężanach
16 km - Giżycko / inne atrakcje przyrodnicze - Jak powstawały Mazury
20 km - Reszel / Zamki, ruiny - Zamek biskupów warmińskich w Reszlu
22 km - Święta Lipka / klasztory, kościoły - Sanktuarium Maryjne w Świętej Lipce
22 km - Mrągowo / muzea, skanseny - Muzeum Sprzętu Wojskowego w Mrągowie
23 km - Mrągowo / muzea, skanseny - Muzeum Warmii i Mazur oddział w Mrągowie
23 km - / góry, jeziora, rzeki - Rzeka Dajna
23 km - Mrągowo / inne zabytki i ciekawostki - Westernowe Miasteczko Mrongoville
25 km - Bezwławki / Zamki, ruiny - Zamek w Bezławkach
6 km - Sorkwity, Stary Gieląd / Kwatery prywatne - Urocze miejsce na Mazurach
12 km - Borowski Las / Agroturystyka - Rancho Zielony koń
16 km - Grabowo / Domki letniskowe - Domek letniskowy w Grabowie
23 km - Mrągowo / Hotele - Hotel*** Anek
25 km - Szczytno / Domki letniskowe - Mazury domek 10-osob. JERUTKI
25 km - Szczytno / Domki letniskowe - Mazury domek romantyczny
27 km - Wałpusz / Domki letniskowe - Willa na Mazurach
29 km - Kobylocha / Domki letniskowe - Domek nad jeziorem
29 km - Kobyłocha / Domki letniskowe - Apartament nad jeziorem
31 km - Kosewo / Kwatery prywatne - Gościniec LECH
