Что LinkedIn проверяет на самом деле
- Аккаунт и приложение, а не соединение. LinkedIn документирует две суточные квоты, одну на приложение и одну на участника в рамках приложения, обе сбрасываются в полночь UTC и обе отвечают кодом 429 при превышении. Ни одна не считается по адресу.
- Сколько аккаунт искал за месяц. Commercial Use Limit ограничивает поиск людей на бесплатных аккаунтах, сбрасывается первого числа, и LinkedIn прямо заявляет, что не покажет точный остаток и не снимет лимит по просьбе.
- Выполнен ли вход. Часть данных профиля публична, но основное, что хотят собирать, лежит за сессией, а сессия принадлежит аккаунту, на котором висят все лимиты выше.
- Договор, и именно он решает исход чаще любого технического признака. Пользовательское соглашение запрещает парсить сервис краулерами и скриптами, запрещает автоматические методы для добавления контактов и отправки сообщений и запрещает заводить профиль на кого-либо, кроме реального человека. Это действует независимо от того, каким маршрутом пришёл трафик.
Какой наш продукт под какую задачу в LinkedIn
Две строки из четырёх про то, чтобы развести рабочие места. Две другие про инфраструктуру, и одной из них прокси не нужен вовсе.
| Что вы делаете | Что взяли бы мы | Почему именно это |
|---|---|---|
| Ведёте несколько аккаунтов или мест в команде | ISP, по адресу на аккаунт | вот случай, где прокси действительно меняет исход. Места, делящие соединение, связываются между собой элементарно |
| Один дорогой аккаунт, управляемый из-за границы | ISP или резидентский в стране аккаунта | аккаунт, выращенный в одной стране и вдруг входящий из другой, выглядит как угнанная сессия, и LinkedIn отвечает проверками |
| Собираете публичные страницы профилей в объёме | резидентские с ротацией | размазывает нагрузку по множеству выходов и бережёт отдельные адреса от сжигания. Прочитайте раздел про границы, прежде чем строить на этом планы |
| Строите на официальном API | ничего или дешёвый стабильный адрес под белый список | квоты считаются по приложению и по участнику. Прогон одного токена через большее число адресов не двигает ни одного лимита |
Мобильные прокси у нас есть, и здесь это перебор. LinkedIn не взвешивает тип адреса так, как Instagram и TikTok, поэтому бюджет дальше растянется как большее число ISP-адресов, а не как меньшее число мобильных.
Как настроить
Своей настройки прокси у LinkedIn нет. Прокси прописывается в профиле браузера, где живёт аккаунт, или в клиенте, который собирает данные.
# Профиль антидетект-браузера, по номеру сессии на аккаунт:
Тип SOCKS5
Хост proxy.sotaproxy.com
Порт 10000
Логин login_c_US_s_21_ttl_1h
Пароль ваш пароль
# На ISP профиль указывает на ваш собственный адрес:
Хост 198.51.100.20
Порт 50100
# Сбор из своего кода:
curl -x socks5://login:password@proxy.sotaproxy.com:10000 https://www.linkedin.com/in/example/- По адресу на рабочее место. Два рекрутера на одном выходе это два аккаунта на одном соединении, а ровно этой связи покупка и должна была помешать.
- Держите каждый аккаунт в той стране, где должен находиться его владелец, и сведите с ней язык и часовой пояс профиля браузера.
- Для аккаунта, который работает месяцами, час резидентской липкости это неподходящая форма. Отсюда и довод за ISP.
- Если вы ходите в API, ставьте прокси только там, где нужен постоянный исходящий адрес под белый список. Квоту он не поднимет.
Что брать под LinkedIn
Покупают здесь ради разделения аккаунтов и ради сбора. Не покупают в расчёте, что сдвинется лимит. Цены стартовые, с объёмом снижаются.
ISP-прокси
от $2.30 за IP в месяц, 24 страны
Ответ для аккаунтов и рабочих мест. По адресу на каждый, закреплён на весь срок.
- зарегистрирован на домашнего провайдера, поэтому вход читается как человек из дома
- никуда не двигается, и долгоживущий аккаунт не прыгает по странам
- трафик не считается, что удобно профилю браузера, открытому весь день
- 24 страны, поэтому конкретной страны аккаунта может не оказаться
- адрес только ваш, поэтому всё сделанное с него указывает на вас
Резидентские прокси
от $2.00 за ГБ, 220+ стран
Под сбор публичных страниц и под аккаунты в странах, куда ISP не дотягивается.
- домашние адреса в большем числе стран, чем у любого другого нашего продукта
- новый выход на соединение размазывает сбор по множеству адресов
- сессионный суффикс удерживает один выход, когда важна непрерывность
- сессия заканчивается с уходом домашнего устройства, максимум час
- ротация не создаёт сессию, а бо́льшая часть полезных данных её требует
Серверные IPv4
от $1.50 за IP в месяц, 41 страна
Только под инфраструктуру: постоянный исходящий адрес для API-клиента или белого списка.
- самый дешёвый стабильный адрес, который мы продаём
- трафик не считается
- 41 страна
- опознаётся как серверный, а при входе и регистрации это неверный сигнал
- квоту API не двигает, потому что она считается по приложению и по участнику
Если вы пришли сюда снять Commercial Use Limit, ни один из этих продуктов этого не делает, как и ничто другое на рынке. Лимит привязан к вашему аккаунту, и LinkedIn говорит, что снимать его не будет. Честные варианты это подписка Premium, Sales Navigator или меньше искать.
Где ошибаются
Покупают прокси, чтобы обойти лимит поиска
Commercial Use Limit считается по аккаунту, а не по соединению. Больше адресов под одним аккаунтом не меняют ничего, а больше аккаунтов это уже другое решение со своими рисками.
Читают решение по hiQ как разрешение
Девятый окружной суд счёл, что сбор публичных страниц, вероятно, не является несанкционированным доступом по CFAA. После этого LinkedIn выиграл по нарушению договора, и для hiQ всё закончилось решением на 500 тысяч долларов и бессрочным запретом. Решающим оказался пользовательский договор, а договора прокси не касается.
Серверные адреса под аккаунтами
Дёшево, узнаваемо и неверно ровно там, где сигналы и взвешивают: при входе и при регистрации.
Ведут команду с одного адреса
Несколько рабочих мест за одним соединением это простейший способ добиться, чтобы всю команду считали одной операцией.
Чего прокси здесь не сделает
Он не поднимет квоту API, не снимет и не покажет Commercial Use Limit, не вернёт ограниченный аккаунт и не отменит того, что пользовательское соглашение запрещает парсить сервис и автоматизировать заявки и сообщения. LinkedIn это площадка, где сетевой слой значит меньше всего, а аккаунт и договор больше всего. Прокси здесь стоит покупать ради одного: чтобы разные аккаунты оставались разными. Это настоящая причина, и другой мы заявлять не будем. Всё написанное не является юридической консультацией, а источники ниже приведены, чтобы проверить, а не верить нам на слово.
Что спрашивают на самом деле
Снимет ли прокси коммерческий лимит LinkedIn?
Нет. Лимит считает поиски по вашему аккаунту и сбрасывается первого числа месяца. LinkedIn заявляет, что не покажет остаток и не снимет лимит по просьбе. Смена адреса на него не влияет никак.
Нужен ли прокси для LinkedIn?
Под один аккаунт, которым вы пользуетесь сами, нет. Под несколько аккаунтов или мест в команде, которые не должны считаться одной операцией, да, и по адресу на каждый. Под сбор публичных страниц в объёме да, резидентские с ротацией.
Какой тип прокси лучше под LinkedIn?
ISP под аккаунты: адрес закреплён на срок и читается как домашнее подключение. Резидентские с ротацией под сбор. Серверные только под инфраструктуру, которая никуда не входит. Мобильные работают, но это больше, чем площадка требует.
Помогают ли прокси с лимитами API LinkedIn?
Нет. LinkedIn документирует две суточные квоты, на приложение и на участника в рамках приложения, обе сбрасываются в полночь UTC. Ни одна не считается по адресу. Полезная деталь: стандартные лимиты вообще не публикуются, свои вы смотрите во вкладке Analytics своего приложения в Developer Portal.
Законно ли парсить LinkedIn?
Честный ответ: вопрос спорный и зависит от того, где вы находитесь и что делаете. В США апелляционный суд счёл, что сбор публичных страниц, вероятно, не является несанкционированным доступом по CFAA. Затем LinkedIn выиграл то же дело по нарушению пользовательского соглашения, и оно закончилось решением на 500 тысяч долларов и бессрочным запретом для сборщика. Прочитайте источники ниже и возьмите нормальную консультацию; прокси это сетевой инструмент, и к этому вопросу он отношения не имеет.
Сколько аккаунтов LinkedIn на один IP?
Один, если они должны выглядеть не связанными. Отдельно стоит помнить, что пользовательское соглашение требует, чтобы профиль принадлежал реальному человеку, и это ограничение на сами аккаунты, а не на адреса за ними.
Откуда взяты утверждения выше
Эта страница обещает меньше, чем большинство материалов про прокси для LinkedIn, и причина в этих четырёх документах. Все они первичные.
- LinkedIn, ограничение частоты запросов к API (Microsoft Learn)Два типа квот, на приложение и на участника в рамках приложения, суточные, сброс в полночь UTC, 429 при превышении. Там же деталь, что стандартные лимиты не публикуются вовсе: свои вы смотрите во вкладке Analytics в Developer Portal, причём эндпоинт появляется там только после первого вызова за сутки.
- Справка LinkedIn, commercial use limitОграничение на поиск людей для бесплатных аккаунтов со сбросом первого числа месяца. LinkedIn прямо пишет, что не может показать точный остаток поисков и не может снять лимит по просьбе. Стоит прочитать до покупки чего-либо, что обещает его обойти.
- Пользовательское соглашение LinkedIn, раздел 8.2Договорные запреты: никаких краулеров и скриптов для сбора сервиса, никаких ботов для добавления контактов и отправки сообщений, никаких профилей на кого-либо, кроме реального человека. Именно этот слой решил дело hiQ, и он действует независимо от того, как маршрутизирован трафик.
- hiQ Labs против LinkedIn, решение Девятого окружного суда от 18 апреля 2022 (PDF)То самое решение, которым обычно доказывают, что парсинг законен. Оно уже: речь про CFAA и публичные страницы. Тот же процесс закончился в том же году победой LinkedIn по нарушению договора, решением на 500 тысяч долларов против hiQ и бессрочным запретом. Значимы обе половины.