До 1939 года «Портрет молодого человека» находился в Польше и принадлежал семье аристократов. После захвата Польши картина была определена в резиденцию Ганса Франка – преданного сторонника Гитлера. В 1940 году картина доставляется в берлинский Музей кайзера. Однако предполагают, что Франк вывез из музея картину Рафаэля. В 1945 году Франка допрашивает подполковник американской разведки, Франк рассказывает ему о местах, в которых находятся краденные им произведения искусства, но «Портрета молодого человека» среди них не находят.
Представители древнего польского рода начинают собственное расследование и узнают, что картина была направлена на виллу Палезье близ Нойхауза, но и там картину не обнаруживают.
И по сегодняшний день судьба полотна Рафаэля остается не известной. Большинство специалистов предполагают, что картина была спрятана помощником Франка в одном из швейцарских банков. Есть вероятность, что когда-нибудь это бесценное произведение искусства вновь станет достоянием мировой культуры.