[python-requests] タグが付いた質問
The python-requests tag has no summary.
28 件の質問
0
票
1
回答
97
閲覧数
python requestでPOSTした後にtableを取得しようとするとraise ValueError("No tables found") ValueError: No tables foundが出る
iataの航空サイトからコードを調べるプログラムを本から修正しつつ作成しているのですが
tableを取得するところでエラーになります。どう修正すればよいでしょうか?
import requests
from bs4 import BeautifulSoup
import requests.sessions
import pandas
import io
import time
url = &...
0
票
1
回答
201
閲覧数
requestsで画像urlの画像を送りたい
file = {'file': ('report.jpg', requests.get(image_url).content)}
みたいな感じで、urlの画像を送信する方法ってあるんでしょうか?
一回一回この画像を保存してやらないといけないんでしょうか?
0
票
0
回答
171
閲覧数
「Python スクレイピング&クローリング 増補改訂版」に出てくるコードのエラーについて
Python スクレイピング&クローリング 増補改訂版 を使ってスクレイピングの勉強をしている初心者です。
書籍通りに技術評論社のスクレイピングを実行している最中にエラーが出てしまいます。
特に聞きたいのはp57~p58にかけてのreモジュールのエラーについてです。
しかしそれまでの経緯も影響していそうなので、全体的なコードの流れも示していきます。
...
0
票
0
回答
2,569
閲覧数
自分自身のIPへのrequestsでWinError 10061が発生する
以下のページと同等のことを行おうと考えています。
Windows/Macに入れたVOICEVOXをPython経由で使う方法
まずは動作確認のため、ラズパイではなくWindows PC上で行っています。
localhostにrequestsを送ると正常に返ってくるのですが、post先のアドレスを自分のIPアドレスに置き換えるとエラーが出るようになりました。
動かない条件としては、...
0
票
1
回答
2,579
閲覧数
pythonのスクレイピングがうまくいきません
https://ntp.msn.com/edge/ntp?locale=ja
マイクロソフトエッジ↑ こちらのURLからニュースを取り出して表示させようとしたのですがBeautifulSoupがうまく動いていないのかエラーが発生します
import requests
from bs4 import BeautifulSoup
load_url="https://ntp.msn.com/...
1
票
1
回答
125
閲覧数
youtube liveに字幕をアップロードできません。
http://upload.youtube.com/closedcaption?cid=(cid)
に字幕をアップロードするデータをPOSTしても、
[TIME] Can't parse sequence number
と返ってきます。
POSTしたデータ
2022-06-12T08:02:00.000 region:reg1#cue1
test
0
票
0
回答
310
閲覧数
同じPythonのソース(BS4でスクレイピング)でGoogleColaboratoryとJupyternotebookで実行結果が異なるのを解消したい
以下のソースで検索結果に表示されるaタグの中の[data-jk]属性情報を取得しています。Jupyter Notebookで実行すると、画面で確認した状態である検索結果15件と同じ「15」という結果になりますが、Google Colaboratoryで実行すると「2」という結果になります。
Google Colaboratoryでも、...
0
票
1
回答
3,897
閲覧数
Pythonにてログイン機能付サイトでrequestsする方法
下記のログイン機能付サイトでrequestを使ってログインしたいですが、
うまくログイン出来ないです。
python seleniumだとうまくログインできますが、
下記のコードrequestだとうまく行かず、ログインボタンのところが引っかかります。。
requestでログイン可能でしょうか。
※こちらのサイト参考にしました。
ログイン機能付サイトでスクレイピング【requests】【...
0
票
0
回答
493
閲覧数
Amazonの注��履歴履歴サイトのページ要素が取得できません
最近Pythonの勉強を始め、webスクレイピングを練習中です。そこでAmazonの注文履歴を集計しようと考え、Jupiter labでプログラムを書くことにしました。
AmazonのトップページのURLを開く
ログインする
注文履歴を開くボタンをクリックする
注文履歴内のデータを取得する
この手順で進めていく予定でしたが、4つ目のデータ取得でrequestとBeautifulSoupを使って
...
0
票
1
回答
471
閲覧数
Pythonのrequestsで画像を取得した際のr.contentと同じ形式でhtmlのinputに選択された画像も受け取りたい。
画像のアドレスに下記のようにアクセスして大量の文字列が返ってきたのですがこれの種類を教えて欲しい。
またJavaScriptのinputからユーザがサーバにアップロードする画像も下記のような文字列で画像を受け取りたいのだが、base64等色々種類があってどれを使用して良いか分からないので教えていただきたいです。
よろしくお願いします。
import requests
r = requests....
0
票
1
回答
1,569
閲覧数
flaskで作成したDataFrameをcsvにして、ダウンロードさせたい。
flaskアプリでアップロードされたcsvファイルを読み込み、それをDataFrameに変換し、別のurlに送るようにしたいです。現在は以下のようなコードでやっています。train_x,train_yなどの部分は見やすさのために省略しております。最終的にy3をgetPlotCSVに送り、それをそのまま出力させたいです。何かいいアイデアをご存じの方はお教えいただければ幸いです。
import os,...
0
票
1
回答
1,360
閲覧数
flaskのアップロードされたcsvファイルを別のプログラムにつなげたい
flaskアプリでアップロードされたcsvファイルを読み込み、それをDataFrameに変換し、別のurlに送るかそのままダウンロードできるようにしたいです。現在は以下のようなコードでやっていますが、csvファイルをアップロードした時点で
Bad Request
The browser (or proxy) sent a request that this server could not ...
0
票
1
回答
471
閲覧数
python requestsモジュールで空ファイルをアップロードすると、リクエストヘッダに`Transfer-Encoding`が追加されます。なぜ追加されるのでしょうか?
環境
python 3.8
requests 2.24.0
やりたいこと
pythonのrequestsモジュールでファイルをアップロードしたいです。
質問
空ファイルをStreaming Uploadすると、リクエストヘッダに{'Transfer-Encoding': 'chunked'}という情報が追加されます。
なぜTransfer-...
0
票
1
回答
344
閲覧数
非同期処理を行なっているrequestsがタイムエラーを起こした時、再帰処理を行いたい。
質問内容
Pythonのモジュールrequestsを非同期処理で実装してタイムエラーが起きた際はHTMLを取得出来なかったURLを集めて再び同じ処理を行うようにプログラムを組みました。
しかし、最初の処理で取得出来ないURLがあっても再帰処理が行われていないように見えます。
ご教授お願いします。
コード
import asyncio
import time
import requests
from ...
0
票
1
回答
1,126
閲覧数
非同期にしたrequestsの処理でタイムアウト時のエラーハンドリングをしたい。
requestsを非同期にしたのですが、タイムアウト時のエラーハンドリングしたいです。
プログラムで実行したい事
前回欲しい商品を検索するプログラムを作成しました。
商品全体のページからurlsを取得して非同期でアクセスを出して欲しい商品とマッチする商品urlを取得するものです。
安定してプログラムが動作するように
...