Şirvanlı Camii olarak da geçen Azariler Camii, Karabağlı Şeyh Hacı Mahmut Efendi tarafından 1873-1895 yılları arasında yaptırılmıştır.
Cami, Azerbaycan’ın Şirvan ve Karabağ şehirlerinden yollanan yardımlar ve Amasya’daki Azerilerden alınan yardımlarla yapılmıştır.
Camii ismindeki Şirvan ve Azari kelimeleri buradan gelmektedir. Cami, Mir Hamza Nigari ismindeki bir mürşidin adına sevenleri ve müridleri tarafından yaptırılmıştır.
Mir Nigari Hazretleri 1886 yılında Harput’ta vefat etmesine rağmen vaziyeti üzerine naaşı Amasya’ya defnedilmiştir. Mezarın olduğu yere türbe ve hemen yanına da Şirvanlı Camii yaptırılmıştır.
Camiin giriş kısmındaki özellikle de kapısındaki işçilik ve süslemeler Türk mimari anlayışına göre yapılmamıştır.
Cami ile bitişik olan türbenin mimarisi karedir.