A palavra abajur é um galicismo já graficamente adaptado ao português. Assim, o seu plural deverá ser “abajures”, seguindo a regra de formação do plural de palavras terminadas em -r: colares, militares, mulheres, malmequeres, faquires, menires, favores, oradores, etc.