Детство сестер Полгар было по меньшей мере нетипичным. И все же, если вы спросите их о нем, они будут утверждать, что их образ жизни был привлекательным, даже доставлял удовольствие. В различных интервью сестры говорят о своем детстве скорее как о занимательном времени, нежели об изнурительном. Они любили играть в шахматы. Они не могли оторваться от них. Говорят, что однажды Ласло посреди ночи застал Софию в ванной за игрой в шахматы. Желая отправить ее снова спать, он сказал: «София, оставь фигуры в покое!» На что она ответила: «Папа, они не оставят меня в покое!».