WedX - журнал о программировании и компьютерных науках

не могу войти в инстаграм через запросы

Я нахожу Как мне войти в Instagram с помощью BeautifulSoup4 и Requests, и как мне определить это самостоятельно? это, но код

import re
import requests
from bs4 import BeautifulSoup

from datetime import datetime

link = 'https://www.instagram.com/accounts/login/'
login_url = 'https://www.instagram.com/accounts/login/ajax/'

time = int(datetime.now().timestamp())

payload = {
    'username': 'login',
    'enc_password': f'#PWD_INSTAGRAM_BROWSER:0:{time}:your_password',
    'queryParams': {},
    'optIntoOneTap': 'false'
}

with requests.Session() as s:
    r = s.get(link)
    csrf = re.findall(r"csrf_token\":\"(.*?)\"", r.text)[0]
    r = s.post(login_url, data=payload, headers={
        "User-Agent": "Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.120 Safari/537.36",
        "X-Requested-With": "XMLHttpRequest",
        "Referer": "https://www.instagram.com/accounts/login/",
        "x-csrftoken": csrf
    })
    print(r.status_code)

выдает ошибку с csrftoken

      line 21, in <module>
    csrf = re.findall(r"csrf_token\":\"(.*?)\"", r.text)[0]
IndexError: list index out of range

и другие сообщения о переполнении стека у меня не работают

Я не хочу использовать Selenium

authentication python python-requests beautifulsoup instagram
28.03.2021

Ответы:


1

TL;DR

Добавьте user-agent в заголовок запроса на получение в строке 20:

r = s.get(link, headers={'User-Agent': 'Mozilla/5.0 (Macintosh; U; PPC Mac OS X 10
r = s.get(link, headers={'User-Agent': 'Mozilla/5.0 (Macintosh; U; PPC Mac OS X 10_7_3 rv:3.0; sl-SI) AppleWebKit/533.38.2 (KHTML, like Gecko) Version/5.0 Safari/533.38.2'})

3 rv:3.0; sl-SI) AppleWebKit/533.38.2 (KHTML, like Gecko) Version/5.0 Safari/533.38.2'})

Длинный ответ

Если мы посмотрим на сообщение об ошибке, которое вы опубликовали, мы сможем начать анализировать, что пошло не так. Строка 21 пытается найти атрибут csrf_token на странице входа в Instagram.

Диагностика

Из сообщения об ошибке видно, что индекс списка выходит за пределы диапазона, что в данном случае означает, что список, возвращенный re.findall (docs) пуст. Это означает, что либо

  1. Ваше регулярное выражение неверно
  2. HTML-код, возвращенный вашим запросом на получение (документы) r = s.get(link) в строке 20, не содержит атрибут csrf_token
  3. Атрибут не существует в исходном html

Если мы зайдем на страницу и посмотрим на ее html-код, мы увидим, что атрибут csrf_token действительно присутствует в строке 261:

<script type="text/javascript">window._sharedData = {"config":{"csrf_token":"TOKEN HERE","viewer":null,"viewerId":null}}</script>

Обратите внимание: для краткости я исключил остальную часть кода.

Теперь, когда мы знаем, что он присутствует на странице, мы можем записать очищенный HTML-код, который вы получаете через запрос на получение, в локальный файл и проверить его:

r = s.get(link)
with open("csrf.html", "w") as f:
   f.write(html)

Если вы откроете этот файл и нажмете Ctrl+f для csrf_token, его не будет. Вероятно, это означает, что Instagram обнаружил, что вы заходите на страницу через парсер, и вернул измененную версию страницы.

Исправление

Чтобы исправить это, вам нужно добавить пользовательский агент в заголовок вашего запроса, который по существу «обманывает» страницу, заставляя ее думать, что вы обращаетесь к ней через браузер. Это можно сделать, изменив:

r = s.get(link)

к чему-то вроде этого:

r = s.get(link, headers={'User-Agent': 'Mozilla/5.0 (Macintosh; U; PPC Mac OS X 10_7_3 rv:3.0; sl-SI) AppleWebKit/533.38.2 (KHTML, like Gecko) Version/5.0 Safari/533.38.2'})

Обратите внимание, что это случайный пользовательский агент из здесь.

Заметки

Я понимаю, что вы не хотите использовать селен для своей задачи, но вы можете обнаружить, что чем больше динамических взаимодействий вы хотите сделать, тем сложнее добиться этого с помощью статических библиотек очистки, таких как модуль запросов. Вот несколько хороших ресурсов для изучения селена в питоне:

Документация по Selenium

Руководство по Python Selenium №1 – Парсинг веб-страниц, боты и тестирование

28.03.2021
Новые материалы
Как проанализировать работу вашего классификатора?
Не всегда просто знать, какие показатели использовать С развитием глубокого обучения все больше и больше людей учатся обучать свой первый классификатор. Но как только вы закончите..
Работа с цепями Маркова, часть 4 (Машинное обучение)
Нелинейные цепи Маркова с агрегатором и их приложения (arXiv) Автор : Бар Лайт Аннотация: Изучаются свойства подкласса случайных процессов, называемых дискретными нелинейными цепями Маркова..
Crazy Laravel Livewire упростил мне создание электронной коммерции (панель администратора и API) [Часть 3]
Как вы сегодня, ребята? В этой части мы создадим CRUD для данных о продукте. Думаю, в этой части я не буду слишком много делиться теорией, но чаще буду делиться своим кодом. Потому что..
Использование машинного обучения и Python для классификации 1000 сезонов новичков MLB Hitter
Чему может научиться машина, глядя на сезоны новичков 1000 игроков MLB? Это то, что исследует это приложение. В этом процессе мы будем использовать неконтролируемое обучение, чтобы..
Учебные заметки: создание моего первого пакета Node.js
Это мои обучающие заметки, когда я научился создавать свой самый первый пакет Node.js, распространяемый через npm. Оглавление Глоссарий I. Новый пакет 1.1 советы по инициализации..
Забудьте о Matplotlib: улучшите визуализацию данных с помощью умопомрачительных функций Seaborn!
Примечание. Эта запись в блоге предполагает базовое знакомство с Python и концепциями анализа данных. Привет, энтузиасты данных! Добро пожаловать в мой блог, где я расскажу о невероятных..
ИИ в аэрокосмической отрасли
Каждый полет – это шаг вперед к великой мечте. Чтобы это происходило в их собственном темпе, необходима команда астронавтов для погони за космосом и команда технического обслуживания..
Для любых предложений по сайту: [email protected]