VPS для парсинга: термины и чек-лист

Подробности, цифры, термины и чек-лист по теме «VPS для парсинга». Страница справочника целиком: VPS для парсинга.

Коротко о теме

VPS для парсинга: сколько памяти занимает управляемый браузер, почему адрес сервера блокируют и как планировать диск под собранные данные.

Подробности по разделам

На что уходят ресурсы при сборе данных

Расчёт памяти в целом разобран в памяти VPS, а запуск процессов в Python на VPS.

Почему адрес сервера перестаёт работать

Выделенный адрес и его свойства описаны в IP-адресе.

Что проверить до написания скрипта

Архивы выносят во внешнее хранилище, иначе диск сервера кончится в самый неподходящий момент, см. резервные копии. Если сбор идёт постоянно, поставьте внешний контроль задания: молчащий скрипт выглядит так же, как работающий. Способы в мониторинге.

Ключевые цифры

Термины на странице

152-ФЗ
152-ФЗ это закон о персональных данных. Вместе с требованием локализации он обязывает хранить базы с данными россиян на серверах в России.
vCPU
vCPU это виртуальное ядро процессора. Его мощность зависит от модели процессора и от того, делится ли ядро с соседями.
IPv4
IPv4 это адрес сервера в сети. Адресов мало, поэтому дополнительный IPv4 обычно стоит денег.
Python
Python это язык программирования. На сервере на нём часто пишут ботов и скрипты.
TXT-запись
TXT-запись хранит текст. В ней подтверждают владение доменом и публикуют SPF и DKIM.
Резервная копия
Резервная копия это сохранённое состояние сайта или сервера, из которого его можно восстановить.

Что проверить

  1. Выберите конфигурацию по памяти и диску под задачу, процессор обычно вторичен.
  2. Проверьте тип виртуализации: KVM даёт свою систему и гарантированные ресурсы.
  3. Уточните, входит ли IPv4 и сколько стоит трафик сверх пакета.
  4. Сравнивайте цену за одинаковую конфигурацию: ядра, память, диск, IPv4.
  5. Смотрите цену продления и оплаты помесячно, а не только акционную.
  6. Сверяйте цены на сайте провайдера в день оплаты: они меняются.

Связанные страницы