詹姆斯靠着总统的牌子生意做得很好，一度在保险业中赚了大钱。后来，他当电影制片失败，从事自动电唱机的买卖也由于战争原因失败了。于是，他参加了海军陆战队。
对小儿子约翰，罗斯福也是非常严格的。上中学时，约翰去欧洲旅行，在戛纳市长举行的宴会上，他竟然把一瓶香槟酒倾倒在市长的帽子里，全场哗然，并上了报纸成了花边新闻。罗斯福在外交部得知此事后，先是哈哈大笑，随后把约翰叫到书房，严厉地批评了他。最后，约翰被迫接受三年不准出国旅游的惩罚，而他也要向戛纳市长道歉。
约翰到哈佛大学后又发生了一件事，他写信给父亲说，国会不应该存在，总统应该是最高权力的象征。对此，罗斯福严肃地告诉约翰，国会的存在与否不是个人就能决定的事，以后他就会明白这其中的利害关系。
总统的家庭生活也是公众喜欢关注的问题，对于报纸上宣扬安娜、詹姆斯以及埃利特利用父亲之便谋取经济和职业上的好处，以及各种第一家庭的消息，罗斯福一般是不予理睬，听其自然。
太平洋战争爆发之后，罗斯福在参加海外巨头们的会议时，总是要带上一两名家属成员在身边。埃利特在阿尔及尔作战时，就曾经被抽调到卡萨布兰卡，陪同父亲参加会议；在突尼斯时，他又陪同父亲到近东参加开罗会议和德黑兰会议。总统家的第三个儿子小富兰克林的舰队也曾参加收复卡萨布兰卡的战斗，也就近被调来参加父亲的侍卫工作。