вам действительно нужно по 6 колонкам дедуплицировать? помогло бы уменьшить ключ дедупликации. в пределе можно например создать матвью в котором ключом дедупликации будет hash...
а кто будет склеивать данные старше месяца и в какой момент в этой схеме?