Фактор имеет высокую значимость и для Яндекса, и для Google, причем для последнего даже выше. Неважно, насколько классный контент на сайте — если сайт будет долго грузиться, пользователь закроет его.
При прочих равных условиях выше будет ранжироваться сайт, который загружается быстрее. Оптимально — 2–3 секунды.