Los enfrentamiento entre los hijos de la Duquesa van a más. Según ha revelado Antonio Rossi, doña Cayetana quería que Cayetana, la hija de Eugenia y Francisco Rivera, tuviera un piso en un edificio adyacente al Palacio de Liria. Sin embargo, este deseo, conocido por toda la familia, no estaba por escrito. Eugenia Martínez de Irujo lo ha reclamado para su hija pero la respuesta del nuedo duque de Alba ha sido que no es el momento de hacerlo porque la cesión de tío a sobrino tiene un tipo impositivo muy alto.