Yavuz Selim Camii'nin bulunduğu semtin adının Çarşamba olmasının nedeni, fetihten sonra Karadeniz kıyısındaki Çarşamba bölgesinde oturan bir grup insanın burada iskân edilmesidir. Burada çok eskiden beri, şehrin en büyük pazarlarından biri kurulurdu. Bu pazar çok kalabalık ve her türlü insanla dolu olduğu için "Çarşamba Pazarı" deyimi türemiştir.