Въпреки че актрисата е родена в Ню Йорк, произходът на нейните предци е доста разнообразен. Роден в еврейско семейство, баща й Карстен Йохансон е роден в Копенхаген, Дания. Докато нейният прадядо евреин е работил като продавач на зеленчуци в Ню Йорк, брат му, заедно със семейството му, умира във варшавското гето по време на Втората световна война, сред жертвите имаше деца. Тя научи това, докато изпълняваше програмата Намиране на вашите корени, което предава на известни личности истории за техните предци. Скарлет беше гост в последния епизод. Когато водещият на телевизионното предаване я информира за смъртта на нейните предци по време на Холокоста, Скарлет избухва в сълзи.
Скарлет гледаше документи от института "Яд Вашем", световен център в памет на Холокоста. "Обещах си, че няма да плача, но е трудно да не плачеш. Това е лудост. Не можете да си представите този ужас. „С това познание, което сега имам, се чувствам по-свързана с тази част от семейството си“, каза Скарлет.