Как получить html страницу при запросе к avito через requests?
Мне нужно через requests получить положительный ответ 200 с html страницей от avito, раньше это работало, но видимо защита усилилась. Знаю что для парсинга есть api и безголовые б…
Вопросы по тегу: requests
- 0 ▲0 ответ.
- 0 ▲0 ответ.
Не удается получить ссылку или ID размера товара при парсинге веб-сайта
Пытаюсь спрасить товар конкретного размера с сайта sportmaster.ru. Первый запрос делаю к странице товара (https://www.sportmaster.ru/product/26194560299/), получаю вполне нормальн…
- 0 ▲0 ответ.
Почему requests не возвращает информацию которую я вижу в браузере?
При переходе по адресу в браузере (адрес изменен): https://domain.ru/old_api/old_presence?login_list=userlogin Получаю пустую страницу с единственной строкой: {"result":…
- 0 ▲0 ответ.
Загрузка файла на сайт Python с помощью requests. post
Возникла необходимость в отправке файлов на сервер средствами Python через post url = 'https://exempl.com/downloads' Ниже по сути два одинаковых куска кода, но работают с разной с…
- 0 ▲1 ответ.
Не получается получить ответ от веб-сайта sportmaster.ru
Пытаюсь получить экзмепляр страницы sportmaster.ru следующим образом: user_agent_val = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:47.0) Gecko/20100101 Firefox/47.0' url = 'https…
- 0 ▲1 ответ.
Как спарсить текст из тега, вложенного в другой тег с помощью BS4
Задача состоит в том, чтобы спарсить карточку товара с сайта https://vedro.pro/oils_catalog?viewMode=tile&goods_group=oils&start=0. При работе у меня возникло несколько пр…
- 0 ▲1 ответ.
Как правильно составить подпись в api Cryptomus?
def create_invoice(self, amount, currency): json_data = { 'currency': currency, 'amount': amount, 'merchant': self.merchant_id, 'order_id': ''.join(random.choice(string.ascii_uppe…
- 0 ▲0 ответ.
Как вывести элемент ответа json на python
Только начал работать с реквестами на питоне. Никак не могу понять как вывести элемент. Есть приходящий запрос: { "id": 11631253, "created_at": "2018-10-1…
- 1 ▲1 ответ.
return возвращает всегда только одно последнее значение из цикла for (Django)
context_processors.py: from .models import Category, Product def all_cattegory(request): products = Product.objects.filter(published=True) categories = Category.objects.filter(pub…
- 1 ▲1 ответ.
Посоветуйте библиотеку для асинхронных запросов, аналог requests
В общем пишу телеграм бота и использую там библиотеку requests, оказалось что она не работает в асинхроне и ищу аналог. Посоветуйте, пожалуйста, библиотеку для получения кода стра…
- 0 ▲0 ответ.
python почему вылезает ошибка RecursionError: maximum recursion depth exceeded при вызове функции импортированной из другого py файла
При вызове функции из file_1 вылетает ошибка ! А при вызове функции из файла file_2 (там где находится сама функция) все норм работает ! Странно не пойму как так ( file_1.py from …
- 0 ▲1 ответ.
Как обрабатывать серверные ошибки в react? (AXIOS & react-query(tanstack))
Есть ситуация, пользователь регистрируется - отправляет запрос на бэк. Пользователю на почту приходит верификационный код, который нужно ввести на сайте чтобы продолжить регистрац…
- 1 ▲1 ответ.
Загрузка файла на файловый обменник
подскажите как загрузить файл на файловый обменник? например на: imgur.com/upload или любой другой файловый обменник, по итогу хочу получить страницу с загруженным файлом, чтобы с…
- 0 ▲0 ответ.
Aiohttp.ClientSession проблема при работе с большим количеством запросов через proxy
Я создаю большое количество сессий aiohttp.ClientSession и отправляю запросы через http-proxy. Пример кода прикладываю Все работает корректно, до того момента , как я пытаюсь одно…
- 0 ▲1 ответ.
Парсинг страницы с авторизацией через Steam
Мне нужно спарсить страницу https://skins-table.xyz/table_rust/ чтобы она отображалась так, будто перед этим я залогинился через свой аккаунт Steam. Для этого я написал следующий …
- 0 ▲1 ответ.
Трансляция динамического элемента со страницы в файл
Как транслировать в txt файл или в Excel быстро изменяющийся элемент на странице? возможно ли это сделать при помощи Selenium или быть может это правильнее реализовать какими-то д…
- 0 ▲1 ответ.
Не работает парсер python
Всем привет. я делал парсер python и при выводе текста в консоль он пишет "None", как это можно исправить? вот код: import requests from bs4 import BeautifulSoup URL = &…
- 0 ▲1 ответ.
TypeError: Tag.find_all() missing 1 required positional argument: 'self' при парсинге сайта
import requests from bs4 import BeautifulSoup import os soup = BeautifulSoup url = "https://health-diet.ru/table_calorie" headers = { "Accept": "text/html…
- 0 ▲1 ответ.
Парсинг сайта с динамической типизацией без использования Selenium
Попал в какой-то тупик на самом деле, либо не до конца все просмотрел. Больше склоняюсь к первому конечно) import requests url = 'https://store.steampowered.com/specials' s = requ…
- 0 ▲0 ответ.
soup.find_all находит не все классы
Использую Суп soup.find_all("div", class_="ticket-title") в DOM дереве наблюдаю как минимум 20 нужных мне классов.Но Суп упорно отбирает только 10.Почему? К XP…
- 0 ▲0 ответ.
Помогите получить данные из сокета
Здраствуйте, уже несколько дней ломаю голову с тем, как достать данные из сокета. Задача следующая - получать котировки. На сайте нашел сокет из которого приходят данные. Остается…
- 0 ▲1 ответ.
Функция requests.get() не принимает аргумент proxies. Модуль requests. Python
Пишу парсер и мне нужно использовать прокси. Указываю url и headers, но также мне нужно указать аргумент proxies, но почему-то его просто нету. PyCharm его не выводит в подсказках…
- 0 ▲0 ответ.
Как создать POST запрос?
Всем добрый день. Извиняюсь за довольно глупый вопрос. Но я не могу сделать адекватный пост запрос, чтобы достать данные с апи. Так выглядит payload: c_id: 636 g_id: 917 sch_id: s…
- 0 ▲2 ответ.
Tinkoff Kassa API python
хотел бы создать интеграцию с Tinkoff Kassa API, но не сильно получается - выдает 400 ошибку. Хотел бы понять, в чем проблема Ссылка на документацию - https://www.tinkoff.ru/kassa…
- -3 ▲2 ответ.
Спарсить масло с сайта по подбору зап. частей
Нужно чтобы при вводе марки и модели авто выдавалось масло которое подходит под конкретный автомобиль. Сайт с которого нужно спарсить поиск: https://www.kroon-oil.com/ru/ import r…
- 0 ▲0 ответ.
Не выкладывается пост в одноклассники
Пытаюсь написать программу на Python, которая будет проходить аутентификацию на сайте https://ok.ru и выкладывать заданный, пост на страницу пользователя. C аутентификацией все хо…
- 1 ▲1 ответ.
Парсинг защищённых сайтов
Недавно мне по работе появилась необходимость парсинга объявлений авито своего города. Для этого можно использовать selenium, но по тестам он достаточно медленный, при этом синхро…
- 0 ▲1 ответ.
Не удаётся из url получить фото
не удается из ссылки получить фотографию, она почему-то не преобразовывается и постоянно выдает ошибку. Из-за этого не получается распознать текст с фотографии, которую подаю, уже…
- 0 ▲1 ответ.
Ошибка Failed to establish a new connection: [Errno 111]
есть код на python, который выполняет самый обычный get запрос на сайт(серер). Запросов делается много(порядка 3-4 в минуту). И вот уже 2 день подряд, через часов 20(может 24) зап…
- 0 ▲1 ответ.
Python. Парсинг. Как сделать парсинг всех страниц сайта?
import requests from bs4 import BeautifulSoup import csv import openpyxl import pandas as pd import xlsxwriter import xlrd from openpyxl import load_workbook import numpy as np fr…