Чому старий Reddit був шляхом найменшого опору для скрапінгу

Щоб зрозуміти цей крок, варто знати, як влаштована архітектура сайту. На відміну від сучасного дизайну на основі React, який завантажує дані на стороні клієнта і важко піддається програмному парсингу, old.reddit.com видає повністю серверний HTML без вимог до файлів cookie . Скрепер може надіслати запит і миттєво отримати чисту, структуровану розмітку — без ключа API, автентифікації чи виконання JavaScript. Саме це зробило старий інтерфейс найпопулярнішим шляхом для масштабного вилучення даних, особливо для компаній, що тренують моделі штучного інтелекту на створених людьми розмовах Reddit .

Обіцянка, яку не дотримали: вимога логіну та доля старого Reddit

Терміни мають значення. У травні 2025 року генеральний директор Стів Хаффман публічно заявив, що Reddit збереже старий Reddit онлайн «доки ним користуються люди» . Однак заява адміністрації в червні 2026 року прямо суперечить цьому: тепер Reddit каже, що «не може пообіцяти», що старий Reddit існуватиме вічно . Вимогу логіну широко трактують як крок до можливого припинення підтримки, що є найбільш чітким сигналом того, що компанія більше не розглядає старий інтерфейс як постійне зобов'язання .

Повний арсенал боротьби зі скрапінгом у 2026 році

Проблеми зі скрапінгом визначали політику платформи Reddit протягом усього 2026 року, і вимога логіну для old.reddit.com — далеко не єдина зміна. Ось скоординована стратегія, яка змінила доступ до даних на платформі:

Закриття неавторизованих JSON-ендпоінтів (травень 2026)

28 травня 2026 року Reddit оголосив про припинення підтримки неавторизованого доступу .json — іншого головного безкоштовного шляху до структурованих даних . Протягом кількох днів анонімні запити почали повертати помилку 403 Forbidden без жодного перехідного періоду. У своїй заяві Reddit зазначив: «Ці ендпоінти можна використовувати для скрапінгу Reddit без підзвітності» .

Політика «Відповідального розробника» (листопад 2025)

Самостійна реєстрація OAuth-застосунків була припинена . Тепер кожен новий токен вимагає попереднього схвалення через процедуру подачі запиту та очікування. Безкоштовний некомерційний рівень формально існує, але процес схвалення став дедалі більш непередбачуваним .

Блокування robots.txt та Internet Archive

У березні 2025 року Reddit оновив свій robots.txt, заблокувавши всіх ботів, окрім Google і Bing . У серпні 2025 року компанія пішла ще далі, заблокувавши Wayback Machine від індексації більшості сторінок Reddit після того, як виявила, що компанії, які займаються ШІ, скраплять дані Reddit через архівні копії . Тепер Internet Archive може індексувати лише головну сторінку Reddit.com .

Людська верифікація для підозрілих акаунтів (березень 2026)

25 березня 2026 року Хаффман оголосив про обов'язкову людську верифікацію для акаунтів, позначених поведінковими сигналами, такими як швидкість публікацій . Методи верифікації включають passkeys, Face ID, а в деяких випадках — посвідчення особи . Це не загальносайтова вимога — вона активується технічним виявленням — але є значним ускладненням для автоматизованих операцій .

Маркування ботів

Акаунти, які використовують дозволену автоматизацію, тепер мають позначку [App] у своєму профілі, щоб інші користувачі знали, що взаємодіють із програмним забезпеченням . Хороші боти залишаються; оманливі позначаються та видаляються.

Щоденне видалення бот-акаунтів (~100 000/день)

Reddit видаляє в середньому 100 000 бот-акаунтів щодня — цей темп залишався стабільним протягом усього 2026 року . Інструмент криміналістики BotPrints, запущений у травні 2026 року, знімає цифрові відбитки поведінкових метаданих і може виявляти мережі ботів, обчислюючи схожість Жаккара в 5-хвилинних вікнах публікацій .

Єдина стратегія проти ШІ-скрапінгу

Кожен захід спрямований на різний вектор — API, HTML, архів, поведінку акаунта — але всі вони служать одній меті: зупинити несанкціонований скрапінг, особливо з боку компаній, що займаються ШІ, які тренують свої моделі на створеному людьми контенті Reddit . Вимога логіну для old.reddit.com закриває найлегший анонімний шлях для скрапінгу, гарантуючи, що навіть ті, хто покладається на старий інтерфейс, повинні бути автентифіковані та підзвітні.

Чому старий Reddit був шляхом найменшого опору для скрапінгу

Щоб зрозуміти цей крок, варто знати, як влаштована архітектура сайту. На відміну від сучасного дизайну на основі React, який завантажує дані на стороні клієнта і важко піддається програмному парсингу, old.reddit.com видає повністю серверний HTML без вимог до файлів cookie . Скрепер може надіслати запит і миттєво отримати чисту, структуровану розмітку — без ключа API, автентифікації чи виконання JavaScript. Саме це зробило старий інтерфейс найпопулярнішим шляхом для масштабного вилучення даних, особливо для компаній, що тренують моделі штучного інтелекту на створених людьми розмовах Reddit .

Обіцянка, яку не дотримали: вимога логіну та доля старого Reddit

Терміни мають значення. У травні 2025 року генеральний директор Стів Хаффман публічно заявив, що Reddit збереже старий Reddit онлайн «доки ним користуються люди» . Однак заява адміністрації в червні 2026 року прямо суперечить цьому: тепер Reddit каже, що «не може пообіцяти», що старий Reddit існуватиме вічно . Вимогу логіну широко трактують як крок до можливого припинення підтримки, що є найбільш чітким сигналом того, що компанія більше не розглядає старий інтерфейс як постійне зобов'язання .

Повний арсенал боротьби зі скрапінгом у 2026 році

Проблеми зі скрапінгом визначали політику платформи Reddit протягом усього 2026 року, і вимога логіну для old.reddit.com — далеко не єдина зміна. Ось скоординована стратегія, яка змінила доступ до даних на платформі:

Закриття неавторизованих JSON-ендпоінтів (травень 2026)

28 травня 2026 року Reddit оголосив про припинення підтримки неавторизованого доступу .json — іншого головного безкоштовного шляху до структурованих даних . Протягом кількох днів анонімні запити почали повертати помилку 403 Forbidden без жодного перехідного періоду. У своїй заяві Reddit зазначив: «Ці ендпоінти можна використовувати для скрапінгу Reddit без підзвітності» .

Політика «Відповідального розробника» (листопад 2025)

Самостійна реєстрація OAuth-застосунків була припинена . Тепер кожен новий токен вимагає попереднього схвалення через процедуру подачі запиту та очікування. Безкоштовний некомерційний рівень формально існує, але процес схвалення став дедалі більш непередбачуваним .

Блокування robots.txt та Internet Archive

У березні 2025 року Reddit оновив свій robots.txt, заблокувавши всіх ботів, окрім Google і Bing . У серпні 2025 року компанія пішла ще далі, заблокувавши Wayback Machine від індексації більшості сторінок Reddit після того, як виявила, що компанії, які займаються ШІ, скраплять дані Reddit через архівні копії . Тепер Internet Archive може індексувати лише головну сторінку Reddit.com .

Людська верифікація для підозрілих акаунтів (березень 2026)

25 березня 2026 року Хаффман оголосив про обов'язкову людську верифікацію для акаунтів, позначених поведінковими сигналами, такими як швидкість публікацій . Методи верифікації включають passkeys, Face ID, а в деяких випадках — посвідчення особи . Це не загальносайтова вимога — вона активується технічним виявленням — але є значним ускладненням для автоматизованих операцій .

Маркування ботів

Акаунти, які використовують дозволену автоматизацію, тепер мають позначку [App] у своєму профілі, щоб інші користувачі знали, що взаємодіють із програмним забезпеченням . Хороші боти залишаються; оманливі позначаються та видаляються.

Щоденне видалення бот-акаунтів (~100 000/день)

Reddit видаляє в середньому 100 000 бот-акаунтів щодня — цей темп залишався стабільним протягом усього 2026 року . Інструмент криміналістики BotPrints, запущений у травні 2026 року, знімає цифрові відбитки поведінкових метаданих і може виявляти мережі ботів, обчислюючи схожість Жаккара в 5-хвилинних вікнах публікацій .

Єдина стратегія проти ШІ-скрапінгу

Кожен захід спрямований на різний вектор — API, HTML, архів, поведінку акаунта — але всі вони служать одній меті: зупинити несанкціонований скрапінг, особливо з боку компаній, що займаються ШІ, які тренують свої моделі на створеному людьми контенті Reddit . Вимога логіну для old.reddit.com закриває найлегший анонімний шлях для скрапінгу, гарантуючи, що навіть ті, хто покладається на старий інтерфейс, повинні бути автентифіковані та підзвітні.