Cavije, kljub svojemu imenu, ne prihajajo iz Gvineje. So domorodci Andov v Južni Ameriki, končno območja, ki zajema dele Peruja, Ecuadora, Kolumbije in Bolivije.
Njihovo prvotno ime je bilo "Cuy" v kečuanskem jeziku, jeziku, ki ga govorijo domorodci v Andih.
So jih domorodci odkodili tisočletja, predvsem zaradi mesa in dlake. V Evropo so jih prinesli v 16. stoletju evropski raziskovalci, kjer so jih na začetku imenovali "cavies" zaradi podobnosti z južnoameriškim glodavcem "cavy". Ime "guinea pig" (cavija) je verjetno nastalo, ker so jih izvozili iz Gvineje v Zahodni Afriki, čeprav tam niso bili domorodni.