Hi ha diverses versions sobre l'origen de la paraula Tangram, una de les més axeptades explica que la paraula anglès la van inventar unint el vocable cantonès "Tang" que significa xinès amb el vocable llati " Gram" que significa escrit o gràfic.
Diuen que l'origen del joc es va remuntar als anys 618 o 907.
El tangram es va originar molt possiblement a partir del joc de mobles yanjitu durant la dinastia Song.
Venien 6 taules rectangulars. Més endavant es va agregar una taula triangular i les persones podien acomodar les taules de manera que formesin una gran taula quadrada.
I més endavant és quan es converteix en un joc.