扎西岗寺由拉达喇嘛达仓哇创建。相传，拉达喇嘛达仓哇到拉萨朝佛路经夏日山丘时诵经念到“大力倡建佛寺”这一句。回来时又在此地恰好念到上述句子，于是想在此建寺，就把盛满甘露的“嘎巴里”藏此山丘内，并祈祷：若是能建成寺庙愿甘露依然，否则干枯。次年，他又去拉萨朝佛时观察甘露，见甘露未干且露出地表，于是决定在此修建寺庙，并购买木材，从拉达邀请木匠，并购买木材，从拉达邀请木匠、石匠、画师等，历经七年建成，还从洽米寺迎请13位喇嘛住寺。该寺曾一度属于拉达克管辖。1679年，噶丹泽旺打败拉达克入侵者后改宗格鲁派，属拉萨色拉寺吉扎仓分寺，由托林寺法台管理，该寺堪布由色拉寺直接委派，每届任期三年。每年藏历5月5日，当地举行盛大的赛马活动，就是纪念噶丹泽旺率部获胜。
扎西岗寺的建筑很有特点，其外围围绕一周壕沟（宽1～1.5米）；壕沟之内为一略呈矩形的夯土防护墙，墙之四角及两中腰有凸出的角楼及碉楼，西南及西北角上还建有两座圆形的碉楼，碉楼墙体高6～8米，墙上开设有三角形或长条形码形的射孔，带有浓重的军事色彩。
护墙的中央偏北处为寺庙所在，殿堂平面呈“十字折角形”，象征着佛教须弥山；殿堂四周均有转经复道环绕，是一种典型的吐蕃时期佛殿结构。殿堂面积8柱，面阔3柱进深5柱，中央升起为擎天柱支撑天井亮棚，便于采光通风。殿内门道朝东，南北各有一小仓库，西侧为依怙殿（护法神殿）。
扎西岗寺“文革”期间被毁，1985年重建，主要建筑有措康、普那贡康、嘎居康、4座扎仓及茶馆等附属设施；寺内主供“觉沃”三尊佛像、大小噶当佛塔212座、各类唐卡1008幅，主护法神为“巴登玛索玛”。民主改革前有喇嘛五十多人，现在喇嘛4人和2名管理人。该寺主要传统节日和佛事活动有：
1.每年藏历元月举行的祈愿大法会，时间18天，届时附近群众都到寺朝拜；
2.二月举行药师供奉节；
3.三月举行供奉乃丹，时间10天；
4.四月称“达赖嘛嘛祝寿”念经、供奉护法活动，历时一个月；
5.五月“尼朵嘎居”念经数日；
6.六月托林寺法台到该寺讲经；
7.九月称“勒旺”，供奉大威德金刚佛5－6天；
8.十月二十五至二十六日“甘丹安曲节”，为纪念喀巴大师，该寺要表演大型宗教舞蹈羌姆，届时附近加木、索我、朗如、仲巴等地的信徒绘绘到此朝拜，热闹非凡。