Es hijo primogénito del infante Pedro, conde de Ribagorza, cuarto de los hijos de Jaime II y Blanca de Anjou, y de Juana de Foix. En 1348 se firman las capitulaciones para su matrimonio con Violante de Arenós, diez años menor que él, hija de Gonzalo Díez de Arenós, fallecido en ese momento, y de Juana Cornell; en virtud de este matrimonio, celebrado en 1355, obtenía la baronía de Arenós. Tres años después, Pedro de Ribagorza profesaba como franciscano, aunque en varias ocasiones desempeñará todavía importantes misiones políticas, y Alfonso se veía al frente de los dominios paternos.

Alfonso y Violante tuvieron ocho hijos: Alfonso, nacido en 1362, que mantendrá una difícil relación con su padre, especialmente en los últimos años de éste; Pedro, muerto en Aljubarrota; Jaime, que muere niño, víctima de un accidente infantil; Juan y Blanca, también muertos niños; Leonor, casada con Jaime de Prades; Violante, abadesa de Santa Isabel de Valencia; y Juana, que casará con Ramón Folch de Cardona. [...]