1946-ban az IFBB-T ben és Joe Weider testvérek alapították Montrealban, Kanadában “International Federation of testépítők” néven. A két alapító Ország Kanada és az Egyesült Államok volt. A kanadai Ben Weider volt az első IFBB elnök. 1967-ben az IFBB Mr.Olympia került megrendezésre, amely az IFBB első versenye volt. 1966-tól 1970-ig a Szövetség gyors növekedést tapasztalt, mivel Joe és Ben Weider világszerte népszerűsítette a szervezetet., 1970-re az IFBB-nek világszerte több mint 50 országban voltak igazgatói, az IFBB-nek pedig Afrikában, Ázsiában, Európában, Ausztráliában, Észak-Amerikában és Dél-Amerikában volt a lábnyoma.
1970.szeptember 4-én az IFBB megtartotta első nemzetközi kongresszusát Belgrádban, Jugoszláviában, ahol alkotmányt fogadtak el és végrehajtó tanácsot. 1971-ben Jim Morris lett az első nyíltan meleg IFBB profi testépítő. 1971-ben az IFBB tagja lett a nemzetközi sportszövetségek Általános Szövetségének (GAISF), most a SportAccord., A tagság megszerzése után az IFBB lett a testépítés egyetlen hivatalos képviselője, amelyet a világ sporthatóságai elismertek. Az 1980-as évektől 2008-ban bekövetkezett haláláig az IFBB elnöke, Ben Weider petíciót nyújtott be a NOB-nak a testépítés olimpiai játékokba való felvételéért. Bár a testépítés soha nem szerepelt az olimpiai programban, 1998-ban a NOB megadta az IFBB ideiglenes elismerését, amely közel négy évig tartott, de 2001-ben visszavonták.
2004 – ben az IFBB-t átnevezték a testépítés és fitnesz nemzetközi szövetségére, de megtartotta az “IFBB” rövidítést., A következő évben az IFBB új IFBB Doppingellenes szabályokat fogadott el a Világ Doppingellenes kódexét követően. Az IFBB Profi Szakasz jogilag szét az IFBB alkotnak az IFBB Profi Liga, saját jogi személy, saját szabályokat. Az IFBB alkotmánya viszont csak az amatőr sport számára lett irányadó dokumentum. 2006-ban, 60 év után Ben Weider lemondott elnöki tisztségéről, és a spanyol Rafael Santonja lett az új elnök. Az IFBB főhadiszállását a spanyolországi Las Rozasba (Madrid) költöztették., 2010-ben második ciklusra újraválasztották Santonját, 2014-ben pedig harmadik alkalommal választották újra a brazíliai IFBB Világkongresszuson.