Пол Морфі з дитинства мав феноменальну пам'ять, яка часом дивувала оточуючих його людей.

Під час навчання в єзуїтському коледжі Сен-Жозеф у Спрінгхіллі, неподалік міста Мобайл, штат Алабама, з ним стався один цікавий випадок.
Пол з дитинства говорив і писав вільно англійською, французькою та німецькою мовами. У Сен-Жозефі викладали ще й іспанську, якою хлопчик повністю опанував кілька занять.
Вчитель іспанської мови сеньйор Санчес до кінця своїх днів був переконаний, що його розіграли, і що Пол Морфі володів досконало іспанською мовою ще до вступу до Сен-Жозефа.