【python】スクレイピングする際のアクセス禁止対策【仮想デスクトップ】

webスクレイピングプログラムに対するアクセス禁止対策に関してです。 amazonやメルカリを始めとして、基本的にどこのサイトもサーバーの防御機能として短時間に連続でアクセスをしてくるIPアドレスをアクセス禁止にするとい...

【python】アイムジャグラーEX（6号機）の簡易シミュレーター【paiza.io】

先日上げたマイジャグラー3の簡易シミュレーターに続き、6号機のアイムジャグラーEXのシミュレーターも作ってみました。関連ページ：【python】マイジャグラー3の簡易シミュレーター【paiza.io】こちらもマイジャ...

追記：旧PC版のメルカリが完全に利用できなくなったのでこのページに関しては完全に過去のものです。ただ他サイトでのスクレイピングでも同様の方法が使えることも多いので、参考のためにそのまま残しておきます。新しいバージョンの...

パチスロのシミュレーターを作った際に使用した関数「numpy.random.choice()」についての忘備録です。スロットの毎回転での子役抽選振り分けに使える関数はないかなーと探してみたところ、numpyのrando...

ワードプレス上にて自作のpythonプログラムを実行できないかと思い、テストがてらマイジャグラー3の簡易シミュレーターをpaiza.ioで作成してみました。だいたいそれっぽい感じにはなりますが、実際よりも若干機械割が高...

競馬や競艇などでの券種で「複勝」と言うものがあります。これは選んだ馬や選手が、上位3位以内（競艇は上位2位以内）に入ると当たりという券種です。また3連複という券種もあります。これは選んだ3頭（船なら3艇）全てが3位...

メルカリのスクレイピングに関する規約についてです。管理人は過去にメルカリからデータを集めるツールを個人的に開発していたことがあるのですが、その際に法的にスクレイピングが違法なのかどうかを調べたのでその内容をまとめてみま...

プログラミングの勉強で学んだ内容を記事にして残して行くことにしました。というのも自分が勉強していく中で詰まった時に、ネットで調べてもなかなか解決法が出てこないこともあったので、それらを記事にすることで誰かの助けになると...

沖縄に拠点のあるコンテナハウスの販売業者をまとめました。ここでは基本的に重量鉄骨造にあたる「コンテナハウス」に絞っており、軽量鉄骨造である「ユニットハウス」「プレハブハウス」については掲載しておりません。関連ページ：...

九州に拠点のあるコンテナハウスの販売業者をまとめました。ここでは基本的に重量鉄骨造にあたる「コンテナハウス」に絞っており、軽量鉄骨造である「ユニットハウス」「プレハブハウス」については掲載しておりません。関連ページ...