Правильно пугают.
Во-первых, горный серпантин, во-вторых, могут быть и пробки. Я из Коломбо в Канди ехал около 6 (!!) часов на автобусе. Узкая дорога, полно транспорта в оба направления. Душераздирающее зрелище.
Во второй день вы выедете часов около девяти-десяти, не раньше. У водопадов будете ну, предположим, к обеду. В Канди - через 3-4 часа. И сразу в Ботанический сад? ИМХО,плохая идея, будет уже темно.
Ни на что не намекаю, но водопады находятся по дороге из Канди в Элла. Точнее, в Нувара Элия, но там одна дорога. Удобнее остановиться по пути, не тратя времени на наматывание кругов.