Anadolu’nun Türkleşmesi sırasında doğudan gelen üç kardeşten biri olan Karaabdal (Evliya-Şair Musa)tarafından kurulduğu ve ismini bu kişiden aldığı belirtilmektedir.Evliya- Şair Musa’nın  mezarı Karaabdal’da bulunmaktadır. Yeniceliler tarafından türbe haline getirilen mezar her yıl nisan ayında Yeniceliler tarafından ziyaret edilmekte, fakir fukaraya yardım edilmektedir.Karaabdal, nüfusunun kalabalıklığı ve diğer köylerin merkezinde olması nedeniyle 1938 yılına kadar nahiye olarak kalmıştır.