ชาวบึงกาฬเป็น 1 ใน 8 จังหวัดลุ่มน้ำโขง มีความเชื่อ  ความศรัทธา เรื่องพญานาคอย่างเหนียวแน่นสืบทอดกันมาหลายชั่วอายุคน  ทำให้พญานาคไปปรากฏในสถานที่ศักดิ์สิทธิ์ พบได้จากงานสถาปัตยกรรมตามวัดวาอารามในจังหวัดบึงกาฬ  โดยเฉพาะวัดอาฮงศิลาวาสริมฝั่งแม่น้ำโขงบริเวณแก่งอาฮง จุดที่ได้ชื่อว่าลึกที่สุดของแม่น้ำโขง ซึ่งมีเรื่องเล่าสืบต่อกันมาเกี่ยวกับความเชื่อเป็นเมืองหลวงพญา