Подозреваю, предки большинства людей могли быть метра 4, но проблема даже не в гравитации, а скорее в плотности атмосферы.
Плотность воды может удерживать столь огромное существо, как синий кит, по венам которого могут плавать люди размером до 1 метра. При плотности воздуха близкой к воде, комфортно себя может чувствовать и 10 метровый человек.
Скорее всего уменьшение роста - адаптация к разряженной атмосфере.
Поскольку крупные люди даже жившие в 19 при росте 4 метра как правило умирали не оставив потомства.
Нечто подобное происходит с космонавтами и водолазами, они хотя и менее 2 метров, но давление и гравитация для них экстремальные.
Та же проблема у мегаживотных и мегадеревьев.