I 1946, IFBB blev grundlagt af brødrene Ben og Joe Weider i Montreal, Canada under navnet “International Federation of Bodybuilders”. De to stiftende lande var Canada og USA. Mr. Ben Beneider fra Canada fungerede som den første IFBB-præsident. I 1967 blev IFBB Mr. Olympia afholdt, hvilket var IFBBS første konkurrence. Fra 1966 til 1970 oplevede Føderationen hurtig vækst, da Joe og Ben .eider promoverede organisationen globalt., I 1970 havde IFBB direktører i mere end 50 lande verden over, og IFBB havde sit fodaftryk i Afrika, Asien, Europa, Australien, Nordamerika og Sydamerika.
den 4.September 1970 afholdt IFBB sin 1. Internationale kongres i Beograd, Jugoslavien, hvor en forfatning blev vedtaget og et udøvende råd. I 1971 Jim Morris blev den første åbent homoseksuelle IFBB professionel bodybuilder. Også i 1971 blev IFBB medlem af General Association of International Sports Federations (GAISF), nu SportAccord., Efter at have modtaget medlemskab blev IFBB den eneste officielle repræsentant for bodybuilding, der blev anerkendt af verdens sportsmyndigheder. Fra 1980’erne til hans død i 2008, IFBB præsident Ben Weider opfordrede IOC for optagelse af bodybuilding i de Olympiske lege. Selvom bodybuilding aldrig havde været på det olympiske Program, gav IOC i 1998 IFBB foreløbig anerkendelse, som varede næsten fire år, men blev trukket tilbage i 2001.
i 2004 blev IFBB omdøbt til International Federation of Bodybuilding and Fitness, men beholdt forkortelsen “IFBB”., Det følgende år vedtog IFBB nye IFBB-antidopingregler efter Worldorld Anti-Doping Code. IFBB Professional-sektionen blev lovligt opdelt fra IFBB for at danne IFBB Professional League, sin egen juridiske enhed med sine egne regler og forskrifter. Til gengæld blev IFBB-forfatningen kun et styrende dokument til amatørsporten. I 2006, efter 60 år, ben Beneider fratrådte sin rolle som præsident og Dr. Rafael Santonja fra Spanien blev valgt som den nye præsident. IFBB-hovedkvarteret blev flyttet til Las ro .as (Madrid), Spanien., I 2010 blev Santonja genvalgt til en anden periode, og i 2014 blev han genvalgt for tredje gang på IFBB Worldorld Congress i Brasilia.