октября 1829 года Каспар жил у Даумера. У него появилась собственная комната и настоящая постель. Каспар уверял, что, лёжа в этой постели, он стал видеть сны. Уже к концу августа он научился говорить и писать (хотя и с орфографическими ошибками), связно выражать свои мысли, заинтересовался собственным прошлым и своей потерянной семьёй.
Следовало приучить Каспара к еде иной, чем хлеб и вода. Ему стали варить овощные супы на воде, постепенно увеличивая количество овощей, что он сам воспринимал как улучшение вкуса. Вместе с хлебом он приучался есть выпечку, сухие овощи, затем в суп стали добавлять несколько капель мясного бульона, а к хлебу – кусочки разваренного мяса. Это разнообразие скоро дало свой результат. Каспар начал расти, прибавив за год пять сантиметров.
17 октября 1829 года, в субботу, Даумер пошел на свою обычную утреннюю прогулку, в то время как его мать и сестра были заняты уборкой. Каспар отправился в уборную и там услышал тихое звяканье дверного колокольчика, словно бы придержанного рукой, затем увидел скользнувшую по двору тень. Он услышал крадущиеся шаги, которые затихли у двери в коридор. Каспар высунул голову в маленькое окно, выходившее на лестницу, и увидел человека, приникшего к стене и кого-то подстерегавшего. Как он вспоминал позднее, убийца был одет в щегольской чёрный костюм, тёмные панталоны, кожаные чёрные (или жёлтые) перчатки, начищенные чёрные изящные башмаки и чёрную же круглую шляпу. Лицо его было замотано чёрным шарфом, а в руках он сжимал широкий нож мясника.
Каспар почувствовал сильный удар в голову и, падая, услышал: «Ты должен умереть раньше, чем успеешь покинуть Нюрнберг!» Каспару показалось, что он узнал этот голос. Очнувшись, юноша понял, что лежит на полу, а лицо у него залито кровью. Кое-как он добрался до дому и, плохо понимая, что он делает, вместо верхнего этажа спустился в подвал. Позднее фрау Даумер, удивляясь, что Каспар не является к обеду, нашла его там по пятнам крови на ступеньках. На лбу у него зияла широкая, но неопасная рана размером с палец. В бреду он бормотал: «Чёрный… чёрный человек… как трубочист… заточён в погреб…»
После покушения бургомистр приставил к Каспару охрану. 15 июня 1831 года Каспар, гостя у фон Фейербаха, рассказал об одном странном инциденте. Когда он остался один, в дом вошли двое неизвестных. Один «весьма злобного вида», с усами и короткой бородой, стал расспрашивать Каспара, что он пишет. Каспар ответил, что автобиографию. Второй взял листы и принялся читать, в то время как чернобородый продолжал расспрашивать Каспара о его жизни. Неизвестного интересовало, часто ли Каспар ходит на прогулки, посещает ли школу и чему учится. Найденыш не скрывал, что выходит из дому редко, так как чувствует боль в ногах. Незнакомцы, закончив расспрашивать и читать, направились к дверям и спросили о небольшом строении во дворе. Каспар ответил им, что это уборная, затем ответил ещё на несколько вопросов. Когда же мальчик поинтересовался, откуда прибыли эти двое, то получил ответ, что они прибыли издалека и название места ему ничего не скажет, после чего ушли.
После Даумера Каспар жил у главы муниципалитета Иоганна Бибербаха. В марте 1830 года Каспара посетили лейтенант фон Пирх и следом за ним известный в то время берлинский комик Сафир. Они предположили, что Каспар, быть может, родом из Венгрии и немецкий для него не родной. Оба решили, что Каспар в детстве слышал, хотя и забыл, венгерские слова и выражения. Однако расспросы произвели гнетущее впечатление на Каспара, и их пришлось прервать. Вскоре Каспар встал на табуретку, чтобы достать с полки книгу, потерял равновесие и, чтобы не упасть, схватился за выступ стенной панели. Однако вместо этого у него в руках оказался заряженный пистолет, висевший тут же на гвозде, и по неосторожности Каспар выстрелил в себя. Пуля оцарапала ему лоб, и вбежавшие немедленно в комнату полицейские обнаружили Каспара на полу без сознания с залитым кровью лицом. Допускали, что это была попытка самоубийства.
После этого Каспар поселился у барона Готлиба фон Тухера. Там он встретил Филиппа-Генри, графа Стенхоупа и племянника Уильяма Питта-младшего. У этого лорда была далеко не блестящая репутация. 31 мая 1831 года он появился в Нюрнберге, собираясь «усыновить Каспара и забрать его с собой в свой замок в Кенте». Тухер ему поверил. Стенхоуп вскружил Каспару голову рассказами о «высоком положении», которое у него отобрали, но справедливость должна быть обязательно восстановлена. Каспар легко поддался на лесть, и их стали постоянно видеть вместе держащими друг друга за руки, причём лорд прилюдно обнимал и целовал мальчика, возбудив тем самым в городе сплетни о «неестественном характере» их отношений. Фон Тухер и Даумер были возмущены поведением лорда, но тот принялся хлопотать перед городским советом о передаче Каспара под его опеку. Получив ответ, что опекуну следует доказать свою платёжеспособность, он уехал в Мюнхен, затем в Инсбрук и вернулся с векселями на очень крупные суммы, выданными почему-то германскими торговыми домами. В это время Каролина, графиня Альберсдорфская, заявила, что Стенхоуп служит орудием кого-то, кто хочет оторвать Каспара от его друзей, чтобы убить мальчика.
В июле 1831 года фон Тухер вместе с Каспаром и полицейским офицером по имени Хикель предприняли поездку в Венгрию, но найдёныш не узнал ничего и не понимал местных наречий. В октябре того же года один венгерский аристократ с сыном посетил Каспара. Тот якобы вспомнил, что в детстве отзывался на имя Иштван и некоторые венгерские слова показались ему знакомыми.
В ноябре 1831 года лорд Стенхоуп отправился в Ансбах, в гости к фон Фейербаху, передав Каспару золотые часы, кольцо и цепочку, а также 500 гульденов наличными. Фон Тухер разрешил Каспару оставить у себя подарки, но деньги забрал, мотивируя это тем, что найдёныш был слишком молод, чтобы распоряжаться столь крупной суммой. Из-за этих денег Каспар впервые рассорился со своим опекуном, требуя, чтобы с ним перестали обращаться как с младенцем. Фон Тухер, понимая, что найдёнышу вскружила голову лесть, написал Стенхоупу отчаянное письмо, умоляя оставить Каспара в покое, но безрезультатно.
21 ноября 1831 года лорд Стенхоуп официально потребовал передачи ему опекунства над Каспаром, обещая дать тому достойное образование и воспитание. Попытки фон Тухера и фон Фейербаха собрать деньги по подписке в фонд Каспара Хаузера и, таким образом, обеспечить его будущее успеха не имели. Каспар 24 ноября поддержал просьбу лорда, и она была удовлетворена. 10 декабря лорд перевёз Каспара в Ансбах и поселил в доме школьного учителя Иоганна Георга Мейера, изводившего