Конечно, венгерские евреи чувствовали оправданное беспокойство за свое будущее и были напуганы, но их жизни пока непосредственная опасность не угрожала. Скоро, однако, положение изменилось к худшему.
В интервалах между деловыми поездками по Европе Валленберг вел удобную и приятную холостяцкую жизнь. Его квартира находилась в модном стокгольмском районе Ларкстад, и он общался с множеством друзей и знакомых своего круга. Густав фон Платен (впоследствии ставший редактором ежедневной газеты «Свенска дагбладет») так вспоминает те дни: «Он был очень гостеприимным хозяином, имевшим сказочный винный погреб. Особенно хороши были унаследованные от деда запасы замечательного кларета, частично передержанного и потому подлежавшего немедленному употреблению. Некоторые бутылки были просто фантастическими».
Фон Платен вспоминает, что Валленберг «не относился к гусарскому типу, он был, скорее, мечтателем»; так же отзывались о нем другие, кто его тогда знал. Нина Лагергрен подтверждает это: «Я бы сказала, что он определенно не принадлежал к типу мужчин с квадратной челюстью и на героя не походил. Ему не нравились соревновательные или командные виды спорта, хотя он всегда старался поддерживать хорошую физическую форму. Армейская дисциплина его тоже не привлекала, хотя в гражданской гвардии (шведской армии резервистов) его считали образцовым офицером. Рауль был склонен к иронии и самоиронии, за которыми обычно скрывал свои истинные чувства».
Придерживаясь общегуманистических и либеральных воззрений, Валленберг, как и большинство молодых людей его круга, к числу радикалов не относился. У него не возникало желания свергать существующий в Швеции общественный строй, хотя в чем-то улучшить его он бы не возражал. Мальчиком он пел в церковном хоре, но истово верующим никогда не был. «В формальном смысле, — свидетельствовала Нина, — он не исповедовал никакой религии, хотя в более широком, я бы сказала, он был глубоко верующий человек».
Совершенно очевидно, что Валленбергу его работа не нравилась, хотя выполнял он свои обязанности безупречно. Помимо всего прочего, его ужасали порядки в оккупированной нацистами Европе (хотя самое худшее к тому времени еще не открылось) и мучило сознание, что как гражданин нейтрального государства он ничего с этим поделать не мог. Правда, он участвовал в работе организации, занимавшейся вопросами занятости беженцев из Дании, Норвегии и Финляндии, которые находили тогда убежище в Швеции.
Некоторые из наиболее проницательных друзей и знакомых Валленберга замечали его недовольство и разочарование. Один из них, экономист по профессии, Бертиль аф Клеркер считал, что «иногда Рауль находился в депрессии. Складывалось впечатление, что ему хотелось сделать свою жизнь более осмысленной». Временами Валленберг открывался той или иной девушке, которые мотыльками влетали в его жизнь и с такой же легкостью вылетали.
Вивека Линдфурш, позже ставшая актрисой театра и кино и даже добившаяся некоторого международного признания, вспоминает один вечер, когда после танцев он пригласил ее в свой кабинет. «Он заговорил о евреях, о Германии, об ужасах, которые, наверное, там видел. Я очень хорошо помню, как он стоял в старомодном и элегантном кабинете и как страстно об этом говорил. Я была тогда очень молода, и он меня напугал — как горячностью своей речи, так и ее предметом. Помню, я тогда подумала: «Он говорит мне обо всех этих вещах, чтобы я прониклась к нему симпатией и оказалась в его объятиях». Ужасно, но именно так я тогда и думала. Я, в общем, не поверила ничему из того, о чем он рассказывал, — может, потому, что не хотела верить. Это очень по-шведски — если ситуация становится мучительно напряженной, мы выталкиваем ее из своего сознания.