Teşkilatçılığı, esrarlı ve gazeteci Ahmet Emin Bey'in ifadesiyle "insan ruhuna hükmedebilen" yapısı nedeniyle Kara Kemal Bey, Birinci Dünya Savaşı'na re'sen girmesinden evvel Eylül 1914'te olası bir Rus saldırısını önceden haber almak ve önlemek üzere bölgeye Teşkilat-ı Mahsusa mensuplarıyla beraber gönderilmiştir.