රිදී විහාරයේ ආරම්භය ක්රී.පූ. 2 වන සියවස තරම් ඈත අතීතයකට දිව යයි. අනුරාධපුර යුගයේ මෙම ප්රදේශය රජත ලෙන ලෙස හඳුන්වා ඇත. ලෙන්වල කොටා ඇති බ්රාහ්මීය අක්ෂර වලින් හෙලිවනුයේ, එම ලෙන්වල රහතන් වහන්සේලා වැඩ සිටි බවයි. දුටුගැමුණු රජු සමයේ අනුරාධපුර සිට මලය රටට (කන්ද උඩරට* ගමන් කිරීමේ එක් පාරක් මෙම ප්රදේශය හරහා වැටී තිබූ බවට ඉතිහාසඥයෝ සනාථ කරති. ගැල්වල බඩු පටවාගෙන මලය රට බලා ගමන් ගන්නා වෙළඳ පිරිසක් මෙම ප්රදේශය හරහා ගමන් ගන්නා අතර ඔවුන්ගේ හරක් ලිහා විවේක ගෙන තිබේ. ටික වේලාවකින් හරක් සොයා ගැල් හිමියන් වනයට ගියපසු ඔවුන්ට පැනි වරකා ගහක ඉදුණු ගෙඩියක් දක්නට තිබුණි. මොවුන් වරකා ගෙඩිය කපා කෑමට සූදනම් විටම ඒ අසලින් රහතන් වහන්සේලා හතර නමක් වැඩිසේක. මෙම හතර නමට පැණිවරකා මදුළු පූජා කළ පසු, ඉන්ද්ර ගුප්ත රහතන් වහන්සේ ඇතළුව තවත් රහතන් වහන්සේලා හතර නමක්ද වැඩියහ. ඔවුන උන්වහන්සේලාටද පැණි වරකා මදුළු පූජා කර තිබේ. පසුව ඉන්ද්ර ගුප්ත රහතන් වහන්සේ වෙළෙන්දන්ට යාමට පාරක් පෙන්වා තිබේ. මෙම පාරේ ගමන් ගන්නා විට රිදී ගොබයක් පිහිටා තිබූ ලෙනක් ඔවුන් දක්නට විය.