Madjer ha disputato 87 partite e segnato 31 gol per la [[Nazionale di calcio algerina|Nazionalenazionale algerina]] dal 1978 al 1992, debuttando nella [[Coppa d'Africa 1980]], nella quale l'Algeria perse la finale contro la Nigeria.<ref>{{cita web|http://www.rsssf.com/tables/80a.html |African Nations Cup 1980 |lingua= en }}</ref> Quello stesso anno prese parte al [[Calcio ai Giochi della XXII Olimpiade|torneo olimpico di Mosca 1980]], dove l'[[Nazionale olimpica di calcio dell'Algeria|Olimpica algerina]] ottenne il miglior risultato della sua storia giungendo ai quarti di finale.<ref name=BBC/>
Con la Nazionalenazionale maggiore partecipò aial [[Campionato mondiale di calcio 1982|mondialimondiale del 1982]], nei quali l'Algeria si mise in evidenza battendo la [[Nazionale di calcio della Germania Ovest|Germania Ovest]] per 2-1. Fu proprio un gol di Madjer a portare i "verdi" in vantaggio sull'1-0. La squadra fu eliminata nella fase a gironi per [[differenza reti]] dall'Austria{{NazNB|CA|AUT}} e dalla stessa Germania Ovest, che sarebbe poi arrivata in finale.<ref name=BBC/>
Madjer partecipò anche aial [[Campionato mondiale di calcio 1986|mondialimondiale indi Messico nel 1986]], neinel qualiquale l'Algeria divenne la prima squadra africana a disputare due edizioni consecutive delle fasi finali dei mondiali. Fu inoltre il capitano della squadra che vinse la [[Coppa d'Africa 1990]], nell'unica volta in cui l'Algeria conquistò il trofeo.<ref name=BBC/>
