29 Ekim 1983'te Antalya'nın Korkuteli İlçesi'nde Durkadın ve Ergün Yılmaz çiftinin ilk çocuğu olarak dünyaya geldi.
Öğrenimine doğduğu ilçe Korkuteli'de başlayan Yılmaz, lise eğitimini Antalya Lisesi'nde tamamladı. Yükseköğrenim tercihini Kütahya Dumlupınar Ünverstesi İnşaat Fakültesi'nden yana kullandı. 2006'da, fakülteden İnşaat Mühendisi olarak mezun oldu.
Üniversiteden mezun olduktan sonra; inşaat mühendisi olarak inşaat taahhüt işletmesi ve müteahhit olarak iş hayatına atıldı. Genç yaşınarağmen; sayısız projede sorumlu mühendis olarak yer alan Yılmaz, inşa ettği birçok konutla da insanları ev sahibi yaptı.
Lise yıllarında siyasete ilgi duymaya başlayan İrfan Yılmaz, 2014 Yılı'nda Antalya Büyükşehir Belediye Meclis Üyeliği'ne seçilmiştir. Türkye'de Büyükşehir Meclis Üyesi seçilen en genç isimlerden olan Yılmaz, Şehircilik ve imar komisyonunda görev alarak şehir planlaması ve mesleki tecrübelerini antalyamızın planlarında katkıda bulunmuştur. 2017 Yılı'nda kurulan İYİ Parti'nin Antalya hareketinde yer alarak; 2019 Yılı'nda partisinden tekrar Belediye Meclis Üyelği'ne seçilmiştir.
Ocak 2023'te yapılan İyi Parti Antalya 2. Olağan İl Kongresi'nde il yönetimine seçilerek; Yerel Yönetimlerden Sorumlu İl Başkan Yardımcısı olarak görev almıştır.
2012 Kasım'da Pakize Yılmaz ile hayatını birleştiren İrfan Yılmaz; Duru ve Defne adında iki kız çocuk babasıdır .
31 Mart 2024 yerel seçimlerinde Antalya Kepez İlçesi İyi Parti’den Kepez Belediye başkan adayı oldu
