Когда Рибери было 2 года, он и его семья попали в серьёзную автокатастрофу в Булонь-сюр-Мер. Автомобиль, в котором они ехали, столкнулся с грузовиком, и Франк ударился лицом о ветровое стекло. После этого события на правой части лица у него остались два длинных шрама.
У Франка и его жены, алжирки по имени Вахиба, трое детей — две дочери Хизия и Шаинез и сын Сейф-аль-Ислам (род. сентябрь 2011 года).