Kako je publika u Americi i Velikoj Britaniji vrlo pozitivno reagirala na žive nastupe Cage the Elephant, natjerala ih je da dvije godine sviraju uživo ove pjesme prije nego li je izašao album. Thank You, Happy Birthday se trenutno vrti na CD playerima i iPodima širom svijeta, a dečkima iz benda sigurno u glavi od toliko duge turneje. No, nije da im je teško palo, a i sigurno su to i sami htjeli. Cijeli projekt nosi energija pjevača Matthewa Schultza koji je s bratom Bradom na gitari osnovao prvi band Perfect Confusion u srednjoj školi, što i nije bilo tako davno. Tu je bio i bubnjar Jared Champion, a bend se raspao nakon što su snimili jedan istoimeni album pa su s pojačanjima Lincolnom Parishom na solo gitari i Danielom Tichenorom na basu osnovali Cage the Elephant 2006. godine.
Prvi su, istoimeni album u novoj postavi izdali u ljeto 2008. u Velikoj Britaniji, a godinu nakon toga u ostatku svijeta. Prije toga su se iz SAD-a preselili u London, živjeli tamo dvije godine, a onda su se vratili nazad kući. Ne u Kentucky, iz kojeg su izvorno, nego na kontinent generalno. Tog albuma su prodali preko 400.000 primjeraka, što je prilična svota za bilo kakve standarde, a prodaju je pratilo njihovo neumorno sviranje. Putem su dobili ideje za 80 novih pjesama, a one koje su im najbolje funkcionirale su svirali na koncertima i kasnije stavili na album. 'Ovaj me album vratio natrag u život', priča pjevač Matt Schultz o iskustvu stvaranja Thank You, Happy Birthday. 'Totalno smo se okrenuli od pisanja pjesama baziranih na strahu. Samo smo htjeli pisati glazbu koju volimo', objasnio je na web stranici benda. A vole glazbu 90-ih i 80-ih, kao što možemo čuti. Pere li vas nostalgija, mogli biste uživati u njima, a za one puno mlađe koji su propustili 90-e, a pogotovo 80-e ovo bi mogao biti dobar uvod za njih. Nakon toga neka počnu slušati Nirvanu, Red Hot Chili Peppers, Pixies, Butthole Surfers, Social Distortion. Jer, Cage the Elephant, osim što vole glazbu, svoj posao rade dobro i to treba cijeniti.
