Cumhurbaşkanı Recep Tayyip Erdoğan, 2011 yılında başbakanlığı döneminde, Güneysu ilçesine 9 kilometre uzaklıktaki 1160 rakımlı Kıbledağı'na giderek Ayane camisini ziyaret etti. Aynı alanda yeni bir cami yapılmasını ve kent ormanı oluşturulmasını istedi. Bunun üzerine başlatılan çalışmalarla dağın zirvesi yeniden düzenlendi, ardından da çevresinde kent ormanı için çalışma yapıldı.
Cumhurbaşkanı Erdoğan'ın isteği üzerine, Osmanlı döneminin önemli eserlerinden Üsküdar Şemsi Paşa Cami'nin benzeri Kıbledağı'nda inşa edildi. 275 metrekare alana kurulan caminin 70 metrekaresi erkekler, 45 metrekaresi de kadınlar için ayrıldı. Kapalı alanda 200 kişinin ibadet edebileceği caminin kubbesinin yüksekliğinin 13, minarenin yüksekliğinin ise 27 metre olduğu bildirildi.
Şadırvanında sürekli olarak sıcak su akacak şekilde düzenleme yapılan camide, kadınlar için ibadet mekanının yanında bir de bebek bakım odası inşa edildi. Yapım masraflarının hayırseverler tarafından karşılanan ve adı Hacı Yusuf Yılmaz olarak değiştirilen cami, 3 yıl önce Cumhurbaşkanı Erdoğan tarafından ibadete açıldı.
Kıbledağı Camii ve mesire alanının Güneysu ilçesine farklı bir kimlik kazandığını belirten Güneysu Belediye Başkanı Halil Turan, "Güneysuyumuz doğal güzellikleri ile görenlerde hayranlık uyandırıyor. Doğu Karadeniz'in tümü aynı ama Güneysu'nun özellikle birkaç noktası var ki akıllardan çıkmıyor. Dua Tepesi diye adlandırdığımız Kıbledağı olarak bilinen 1130 metre yükseklikteki dağ. Eskiden itibaren burada bir mescidin olduğu, geçmişte büyüklerimizin tefekkür için mescide çıkıp İslami anlamda vakit geçirdiğini biliyorduk. 1960 yıllarda o dönemin Güneysu Merkez Cami İmamı Hafız Yusuf Yılmaz hocamız ve köylülerin iş birliği ile imece usulü sırtta taşlar taşınarak bir mescit yapıldı. Bir müştemilat ve bir cemaat bölümünden oluşan küçük bir mescitti. 2010 yılında o zaman başbakan olan Recep Tayyip Erdoğan oraya çıktı. 50 santimetre karın olduğu bir zamandı. O zaman yörenin, dağın estetiğine yakışır bir mescit olmasın kanaatine vardık" dedi.