Скачать сайт целиком онлайн и пробить клоаку: сервис для арбитражника

У арбитражника постоянно возникает одна и та же задача: забрать чужой сайт. Понравился лендинг конкурента, нужен прелендинг под свою связку, хочется разобрать удачный оффер по кусочкам или просто сохранить страницу, пока её не открутили. Способ по умолчанию, «Сохранить как» в браузере, ломается на первом же нормальном сайте: часть картинок не тянется, стили едут, видео пропадает, а половина путей ведёт в никуда. С офферами всё ещё хуже, потому что они спрятаны за клоакой и по прямой ссылке отдают белую страницу.

Сервис down-web.ru закрывает обе задачи. Он скачивает любой сайт целиком, аккуратно, с картинками, стилями, шрифтами и видео, и умеет пробивать клоаку, то есть показывать и сохранять именно тот оффер, который клоака отдаёт живому покупателю из нужного ГЕО. Дальше по порядку разберём, что он умеет и как этим пользоваться.

Зачем арбитражнику скачивать чужие сайты и офферы

Чужой лендинг, который уже крутится в открутке, это готовая гипотеза. Если связка живёт, значит, у неё рабочая структура, тексты и креативы. Забрать её к себе, изучить, переупаковать под свой оффер и ГЕО быстрее, чем придумывать с нуля. То же с офферами: увидеть, что именно рекламодатель показывает покупателю после клика, полезно и для выбора вертикали, и для понимания, почему связка конвертит. Проблема одна: и лендинги, и офферы не отдаются в руки просто так. Их нужно уметь корректно снять.

Что умеет сервис в двух словах

Внутри две большие функции. Первая скачивает сайт по ссылке и складывает его в аккуратный архив, готовый открыть локально двойным кликом. Вторая, «Пробить клоаку», имитирует настоящий рекламный клик из выбранного ГЕО, чтобы клоака отдала оффер, и скачивает уже его. Обе работают онлайн, без установки программ, регистрации и танцев с бубном: вставили ссылку, нажали кнопку, забрали ZIP.

Как скачать сайт целиком онлайн

Базовый режим выглядит просто: вставляете URL, жмёте скачать, через несколько секунд получаете архив. Но под капотом происходит больше, чем у обычного качалок-скриптов, и именно это отличает результат.

Рендер в настоящем браузере, а не сохранение исходника

Сервис открывает страницу в реальном Chrome, а не тянет голый HTML. Это важно, потому что современные сайты дорисовывают половину контента скриптами уже после загрузки. Обычная качалка видит пустой каркас, а браузерный рендер видит страницу такой, какой её видит человек, и перехватывает все ресурсы, которые она реально запросила: стили, шрифты, картинки, скрипты, медиа.

Чистая раскладка по папкам

Скачанные файлы не сваливаются в кучу. Они раскладываются по понятным папкам: стили в css, скрипты в js, изображения в img, шрифты в fonts, видео и аудио отдельно. Пути внутри HTML, CSS и JS переписываются на локальные, так что архив открывается офлайн без единого обращения в интернет. Открыли index.html, и сайт работает как надо, с картинками и версткой на месте.

Библиотеки на CDN и удаление счётчиков

Популярные библиотеки вроде Bootstrap или jQuery сервис не тащит локальными копиями, а подменяет ссылками на cdnjs. Архив становится легче, а дубли пропадают. Параллельно вычищается вся аналитика и трекинг: Google Analytics, GTM, Яндекс Метрика, пиксель Facebook, Hotjar, Clarity и прочие счётчики. На выходе чистая страница без чужих глаз, которые следили бы за тем, как вы её открываете.

Все страницы сайта разом

Если нужен не один лендинг, а целый сайт, включается галочка «Скачать все страницы сайта». Краулер проходит по внутренним ссылкам вглубь, до сотни с лишним страниц и до десятка уровней вложенности, и собирает всё в один архив с сохранённой структурой. Удобно, когда у оффера многошаговая воронка или когда нужно забрать блог с кейсами целиком.

Форматирование кода

HTML, CSS и JS в архиве не в один сжатый ряд, а отформатированы по-человечески. Лишние комментарии вырезаны, отступы расставлены. Разбирать чужую верстку и вытаскивать нужные блоки становится заметно проще, чем ковыряться в минифицированном месиве.

Чем онлайн-сервис удобнее расширений и программ

Скачать сайт можно и расширением для браузера, и старой десктопной качалкой. У онлайн-сервиса есть практические плюсы. Ничего не надо ставить и настраивать: он работает с любого устройства, где есть браузер, хоть с рабочего ноутбука, хоть с чужого компьютера. Рендер идёт на сервере в настоящем Chrome, поэтому тяжёлые скрипты и защита от сохранения мешают меньше, чем расширению внутри вашей вкладки. А главное, ни одно расширение не умеет пробивать клоаку: подставить прокси нужного ГЕО, метки площадки и мобильное устройство, чтобы получить именно оффер, а не вайт. Здесь это встроено рядом с обычным скачиванием.

Скачивание видео: mp4, HLS и обфусцированные VSL

Видео это отдельная головная боль всех качалок, потому что его редко можно просто скачать по ссылке. Здесь закрыты три случая сразу, и это одна из самых сильных сторон сервиса.

Прямой файл mp4 браузер обычно грузит кусками по мере просмотра, поэтому наивная качалка забирает лишь фрагмент. Сервис докачивает такой файл целиком. Потоковое видео в формате HLS, которое раздаётся десятками мелких сегментов, собирается полностью: сервис читает плейлист, тянет все сегменты и склеивает их в единый mp4, который играется офлайн двойным кликом. Самый тяжёлый случай, обфусцированные плееры видеосейлов, где сегменты зашифрованы и защищены от прямого скачивания, решается перехватом медиа прямо в момент проигрывания. Видео собирается из того, что плеер декодирует у себя, и мультиплексируется в обычный mp4. В итоге забирается даже тот ролик, который по прямой ссылке отдаёт ошибку.

Скачать сайт из веб-архива

Иногда нужного сайта уже нет в живых, но он есть в Wayback Machine. Сервис умеет снимать страницу прямо из веб-архива по дате. Достаточно включить режим снапшота и указать нужный день. При этом обёртка самого архива, панель и служебные скрипты web.archive.org, вырезается, и вы получаете чистую страницу, как будто скачали её с живого домена. При желании часть ассетов можно дотянуть с текущего домена, если они ещё доступны.

«Пробить кло»: как забрать оффер из-под клоаки

Это главная функция для тех, кто льёт трафик. Разберём по шагам, потому что здесь и кроется вся ценность.

Что такое клоака и почему обычное сохранение не работает

Клоака это фильтр на стороне рекламодателя, который решает, что показать посетителю. Модератору, боту и случайному человеку по прямой ссылке она отдаёт безобидную белую страницу. Живому покупателю, который пришёл по рекламе из нужной страны с нужного устройства, она отдаёт настоящий оффер. Поэтому если просто вставить ссылку оффера в любую качалку, вы скачаете именно вайт, пустышку. Чтобы увидеть оффер, клоаку нужно убедить, что к ней пришёл реальный покупатель.

Как сервис имитирует живой клик

Сервис собирает клик, неотличимый от настоящего перехода по рекламе. Он подставляет мобильное устройство на свежем Android с актуальной версией Chrome, эмулирует внутренний браузер приложения, из которого обычно идёт трафик, добавляет клиентские подсказки и реферер площадки. Для клоаки это выглядит как живой человек с телефона, а не сервер из дата-центра. После этого открывается целевая ссылка, клоака видит правильный клик и отдаёт оффер, который тут же скачивается тем же пайплайном, вместе с видео.

Прокси и режим «без прокси»

Клоака смотрит на страну по IP, поэтому для чистого пробива нужен прокси из целевого ГЕО. Сервис принимает SOCKS5 и HTTP прокси в разных форматах записи и сам поднимает мост, потому что браузер не умеет напрямую работать с некоторыми типами. Если оффер не привязан жёстко к стране или вы уже сидите в нужном ГЕО, можно включить режим «Без прокси» и открыть всё со своего IP. Мёртвый или медленный прокси сервис распознаёт быстро и говорит об этом понятной ошибкой, а не висит две минуты в ожидании.

Метки Facebook, Google и TikTok

Одного IP мало. Клоака часто проверяет, что в ссылке есть метки рекламной площадки, а в куках, следы клика. Поэтому в форме выбирается источник: Facebook и Instagram, Google или TikTok. Под каждый источник сервис аккуратно дописывает нужные параметры перехода и клик-куки, если их ещё нет в ссылке. Ваши собственные метки при этом не трогаются. Для клоаки картина складывается: правильная страна, правильное устройство, правильный источник и живые куки.

Почему иногда приходит белая страница

Клоаки нередко крутят несколько вариантов и показывают их по своим правилам. Бывает, что на почти одинаковый клик она отдаёт то оффер, то лёгкий вариант, то вайт. Это не сбой сервиса, а поведение самой клоаки, которая так защищается от проверок. Если пришла пустышка, помогает повторить пробив, сменить прокси на другой адрес того же ГЕО или поменять источник трафика.

Что попадает в архив

После пробива вы получаете полноценный оффер: лендинг со стилями и картинками, встроенное видео, которое играется офлайн, и всю структуру страницы. То есть не скриншот и не кусок, а рабочую копию того, что видит покупатель. С такой копией удобно разбирать оффер, тестировать свои прелендинги и понимать логику связки.

Надёжность: без зависаний и пустых архивов

Тяжёлые сайты с гигабайтами медиа умеют вешать подобные сервисы намертво. Здесь на этот случай встроены таймауты и частичная выдача. Если сайт не укладывается в отведённое время, сервис не отдаёт ошибку и пустоту, а упаковывает то, что уже успел скачать, и отдаёт рабочий архив. Есть ограничения на размер, чтобы один жадный сайт не съел все ресурсы. Готовые архивы хранятся ограниченное время после скачивания, так что за чистотой следить не нужно.

Как пользоваться: пошагово

Чтобы скачать обычный сайт, вставьте ссылку в основную форму, при необходимости включите «Скачать все страницы сайта» или режим веб-архива с датой, нажмите кнопку и дождитесь готового архива. Прогресс виден прямо на странице.

Чтобы пробить клоаку и забрать оффер, откройте блок «Пробить клоаку», вставьте ссылку оффера, выберите источник трафика, укажите прокси нужного ГЕО или включите режим без прокси, при желании отметьте загрузку всех страниц оффера и запустите. Скачивание видео может занять пару минут, это нормально, потому что ролик выкачивается целиком. На выходе тот же ZIP.

Что важно знать перед скачиванием

Пара честных нюансов, чтобы не было сюрпризов. Готовый архив хранится ограниченное время после скачивания, поэтому забирайте его сразу. Очень большие сайты с гигабайтами медиа могут прийти частично, ровно настолько, насколько успели скачаться за отведённое время, но это всегда рабочий архив, а не голая ошибка. Резидентные прокси работают медленнее дата-центровых, так что тяжёлый оффер с видео через такой прокси качается дольше. И редкие ссылки на сторонние страницы, которые сам оффер не подгружает при открытии, в архив могут не попасть, потому что браузер их просто не запрашивает.

Кому и зачем это нужно

Соло-байерам и командам сервис экономит время на разборе чужих связок: не надо просить дизайнера пересобирать лендинг, можно взять готовый и переупаковать. Спай-аналитикам он даёт возможность увидеть реальный оффер под клоакой, а не гадать по вайту. Тем, кто работает с видеооферами, важно, что видео действительно выкачивается, а не остаётся битой ссылкой. И всем пригодится возможность достать страницу из веб-архива, когда живого сайта уже нет.

Частые вопросы

Нужно ли что-то устанавливать

Нет. Сервис работает онлайн в браузере. Вставляете ссылку, забираете архив.

Скачается ли видео с лендинга

Да. Поддерживаются прямые mp4, потоковое HLS и обфусцированные плееры видеосейлов. Видео собирается целиком и играется офлайн.

Обязателен ли прокси для пробива клоаки

Нет. Если оффер не привязан к конкретной стране или вы уже в нужном ГЕО, включите режим «Без прокси» и открывайте со своего IP. Для точного гео-пробива прокси всё же нужен.

Можно ли скачать сайт из веб-архива

Да. Включите режим снапшота, укажите дату, и сервис снимет страницу из Wayback Machine, убрав обёртку архива.

Что если сайт очень большой

Сервис не зависнет. По истечении лимита времени он отдаст архив с тем, что успел скачать, вместо ошибки.

Коротко о главном

Скачать сайт целиком, забрать чужой лендинг с видео, достать страницу из веб-архива и пробить клоаку, чтобы увидеть настоящий оффер, всё это делается в одном месте и без установки программ. Для арбитражника это ежедневный рабочий инструмент: меньше рутины на разборе связок, больше времени на тесты и открутку. Попробовать можно прямо сейчас на down-web.ru.

Больше про арбитраж, клоакинг и полезные сервисы, в нашем Telegram-канале BoostClicks. А если нужна своя клоака для Гугла, посмотрите BoostRouter.