Se você acabou de pendurar o portão em um deles, seria um problema. Além disso, se você usou apenas um parafuso para prender a alça no portão, seria um problema.
Com isso dito, se você construir o seu portão como um elemento retangular com o reforço adequado para que o próprio portão mantenha sua forma e depois monte as correias no portão com dois parafusos cada, você não verá o afundamento do portão devido ao tamanho maior orifício na correia versus o tamanho do poste no parafuso L.