Очень многие психологи считают, что личность формируется в первые пять, а то и три года жизни. Весь остальной жизненый опыт - так, шлифовка мелкой шкуркой. И в выражении "все мы родом из детства" очень много глубокого смысла. Психоаналитики, например, считают, что львиная доля наших сегодняшних неприятностей уходит корнями в детство. И пока мы не решим те, далёкие проблемы, мы не сумеем справиться с насущными.
Это первое. А второе - наша память так хитро устроена, что ранние воспоминания всегда ярче и прочнее сидят в мозгу, чем более поздние. Недаром старики, впавшие в маразм/склероз, забывают, что было вчера, но часто хорошо помнят своё детство и юность.