Después de una serie de sesiones en Chicago en junio de 1964, la discográfica del grupo, Decca Records, publicó en el Reino Unido el EP de cinco canciones Five by Five. Debido a que el EP nunca fue un formato de éxito en los Estados Unidos, London Records (su distribuidor estadounidense) añadió siete canciones más para formar un álbum completo. El título del mismo alude al hecho de que los doce temas del disco son interpretados por cinco músicos. El resto de las canciones fueron sencillos «It's All Over Now» y «Time Is on My Side» con sus respectivas caras B, más tres canciones que luego se incluyeron en The Rolling Stones No.2. Decca volvería a emplear la foto de la portada para el segundo álbum del grupo en el Reino Unido, The Rolling Stones No.2, publicado a principios de 1965. 12 x 5 es notable por contener la primera, y menos a menudo oída, de dos versiones del cover que Rolling Stones hace de la canción de Jerry Ragovoy, «Time Is on My Side», con una destacada parte con órgano electrónico en lugar de la más conocida versión con guitarra eléctrica.
12 x 5 se vendió mejor que England's Newest Hit Makers, alcanzando el puesto número 3 en las listas de éxitos y obteniendo un disco de oro rápidamente. En agosto de 2002, fue remasterizado y en una nueva versión CD y SACD digipak por ABKCO Records. Esta edición incluye las versiones estéreo de «Around and Around», «Confessin the Blues», «Empty Heart», «It's All Over Now», «2120 South Michigan Avenue», y «If You Need Me».