Parafia pw. NMP Ostrobramskiej Matki Miłosierdzia została utworzona z terytorium parafii Kadzidło dnia 21 sierpnia 2005 r. przez Biskupa Łomżyńskiego Stanisława Stefanka.
Staraniem ks. M. Niemyjskiego, proboszcza parafii Kadzidło, 14 grudnia 2004 r. nabyto teren pod budowę świątyni parafialnej. W 2005 r. na tym placu ustawiono i poświęcono krzyż. Dnia 21 sierpnia 2005 r. Biskup Łomżyński Stanisław Stefanek poświęcił kaplicę, zbudowaną staraniem proboszcza parafii Kadzidło, oraz mianowanego tego samego dnia nowego proboszcza parafii Dylewo, ks. Jacka Majkowskiego.
Dnia 10 czerwca 2007 r. Biskup Pomocniczy Tadeusz Bronakowski dokonał wmurowania kamienia węgielnego, poświęconego przez Papieża Jana Pawła II, pod budującą się świątynię. 16 listopada 2007 r. poświęcił także cmentarz grzebalny.
Dnia 16 listopada 2010 r. Biskup Łomżyński Stanisław Stefanek dokonał uroczystego poświęcenia nowego kościoła parafialnego, wybudowany staraniem ks. proboszcza Jacka Majkowskiego, i oddał go do użytku.
Plebania murowana została wybudowana w latach 2010–2014 dzięki staraniom ks. proboszcza Jacka Majkowskiego.
Liczba wiernych: 1750