去临时居住的矿工等流动人口一万五千人，原有居民约二万余人。
1858年，清朝黑龙江将军奕山与沙俄东西伯利亚总督尼古拉·尼古拉耶维奇·穆拉维约夫签订了不平等的《瑷珲条约》，其中规定：中俄由额尔古纳河沿黑龙江至海口划界，右岸属中国，左岸属俄国、“黑龙江左岸由精奇里河以南至豁尔莫勒津屯，原住之满洲人等，照旧准其各在所住屯中永远居住，仍著满洲国大臣官员管理，俄罗斯人等和好，不得侵犯“。据此，中国黑龙江以北60万平方公里领土划归了沙俄，只保留了江东六十四屯中国居民的永久居留权和清政府对这些居民的永久管辖权。
1879年，沙俄占去段山屯草甸、牧场。1883年，占去“垦地二百四十余垧、荒地四十余里“。在沙俄的蚕食下，江东六十四屯的面积缩小为长约一百四十华里，宽约四十二华里，约一千六百平方公里。