Всього Людвіг II почав зведення трьох палаців - Нойшванштайн. Херренкімзеє і Ліндерхоф. проте до кінця був добудований при його житті лише Линдерхоф. Незважаючи на те, що прагнення Людвіга не змогли повністю втілитися в життя, зараз замок Нойшванштайн є найпопулярнішою пам'яткою Баварії і одним із знакових пам'яток історизму, в якому сплелися і неороманський, і неоготичний стилі, і неоренесанс, і необароко. Незважаючи на те, що Нойшванштайн називають «замком», за фактом він ніколи ним не був, оскільки він ніколи не мав оборонного значення. Нойшванштайн - каприз короля, захопленого музикою Вагнера і побудував для свого улюбленого композитора цей замок-палац в дусі його творів, для яких замок служить якійсь ілюстрацією або театральною сценою. Побудований в 1869-1886 рр. замок розташовується на висоті 1008 м на південному заході Баварії поблизу австрійського кордону навпроти замку Хоеншвангау - іншого замку, в якому король провів своє дитинство. У ньому втілилися всі уявлення і фантазії Людвіга про німецькому Середньовіччя, зведені в ранг романтичного ідеалу, а також культ королівської влади, даної Божою милістю.
"Я вирішив перебудувати старий замок. Архітектурний стиль його буде відтворювати первозданні німецькі лицарські замки. Розташування його - одне з найпрекрасніших, яке можна знайти. Замок буде священним і неприступним. Співочий зал, звідки відкривається загальний вигляд на замок, нагадає Вам сагу про Тангейзері, а внутрішній двір і каплиця - пісню про Лоенгріна. Ця споруда буде величнішим, ніж нижній замок Хоеншвангау. Тут ми будемо відчувати божественне дихання небес ", - так писав король Баварії Людвіг II Ріхарда Вагнера про ідеї будівництва Нойшванштайн.
Людвіг II вирішив зводити свій перший замок в рідних йому з дитинства місцях, на вершині скелі по сусідству з Хоеншвангау. Всього на цій території знаходилося чотири фортеці, які захищали дорогу на Тіроль. Найкраще з них зберігся замок Шванштайн, який був перебудований Максиміліаном II в Хоеншвангау. Далі на захід розташовувалися руїни Фрауенштайн, які Максиміліан вирішив зберегти в недоторканності як пам'ятник. Ще два замки - Фордерхоеншвангау і Хіндерхоеншвангау - залишалися лежати в руїнах на сході від Хоеншвангау. Це місце Людвіг називав «скелею юності». Спочатку Людвіг планував типову для XIX століття реставрацію обох замків в стилі XII-XIII ст. грунтуючись на досвіді Хоеншвангау. Перші ескізи Нового Швангау значно відрізнялися від фінального варіанту замку. Проекти передбачали об'єднання двох замків в єдиний ансамбль. Фордершвангау в цьому випадку ставав головною вежею замку, а Хінтершвангау перетворювався в основну будівлю. Однак ряд обставин змінив початкову задумку.
Згідно зі статистикою, в 1880 році на будівництві було зайнято 209 платників, каменотесів і підсобних робітників. У будівництві брало участь велика кількість місцевих жителів. Чималу увагу приділялося безпеки при виконанні робіт і охорони праці. Була створена особлива страхова каса при «Об'єднанні ремісників королівського будівництва Хоеншвангау», члени якої щомісяця відраховували внески зі свого заробітку для виплати «лікарняних».
