マガジン

  • Pythonでスクレイピング

    Pythonでさまざまなスクレイピングをしてくれる機能を実装しています。

最近の記事

多すぎるキャンペーンを監視してキャンペーンが開始したらメールで通知するプログラム

はじめに(本記事では,一部広告を含みます) 皆さんはキャンペーン好きですか? 僕は大好きです。 でも、さまざまなキャンペーンが開催されており、全てを網羅することができなくて、結局キャンペーンの恩恵を受けることができないのが現実。 キャンペーン多すぎ むり、どうにかして って思っている方もいるのではないでしょうか。 何を隠そう、私がその一人です。 なので、今回はPythonでスクレイピングとGmailAPIを組み合わせて、指定したサイトにキャンペーン情報が掲載されて

有料
1,280
    • Youtubeの海外動画をPythonで日本語に文字起こしする

      最近、AI関連の情報が海外から入ってくることが多いけど、英語がよくわからん、という方も多いのではないでしょうか。 なので、海外の動画を日本語に翻訳してくれれば、自分でも理解できると思い、youtubeの海外動画を日本語に翻訳してテキストに保存してくれるプログラムを書きました 今回使用しているのは、DeepLというAPIです。 利用するにはDeepLへの登録が必要だと思いますが、無料で使えるので、ぜひ使ってみてください。 from pytube import YouTub

      • PythonでスクレイピングするWebサイト(Web Scraper)を作ったよ

        どうも初めまして、しょう(@K20Wh)と申します。 Pythonの案件探すのに、クラウドサービスをいろいろ見ていたら、スクレイピング案件がやはり多いことに気づきました。 なので、指定したURLから指定したキーワードが含まれているWebサイト作ったら、便利なんじゃね?ということで、スクレイピングを行うためのWebサイト(Web Scraper)を開発しました。 ※当Webサイトを利用する場合には、自己責任でお願いいたします。Pythonの勉強の一環として活用してもらえると

        • 非同期処理対応のスクレイピング用サイトの開発

          前回開発したスクレイピング用サイトは、同期処理でスクレイピングを行っていて、非同期処理を行うことができませんでした。 同期処理では、情報量の多いWebサイトから情報をスクレイピングすることができません。 そのため、今回は非同期処理が可能なスクレイピング用サイトを開発しました。 基本的な機能としては、同期処理が可能なスクレイピングサイトと同様です。 今回は非同期処理と同期処理の違いについて少しだけ触れて、全コードとサイトURLを公開します。 非同期処理と同期処理について

          有料
          1,280

        多すぎるキャンペーンを監視してキャンペーンが開始したら…

        マガジン

        • Pythonでスクレイピング
          2本
          ¥1,280

        記事

          非エンジニアが機械学習を活用したWebサービスをリリースするまでの記録

          どうもはじめまして、非エンジニアのしょうと申します。 この度、機械学習を活用したWebサービス「AI株価予測サービス」をリリースしました。 非エンジニアで完全独学でも機械学習を活用したWebサービスをリリースできるんだよ。 ってことを、 これからプログラミングを始めたい方・機械学習を学びたい方・Webサービスを作ってみたい方々の参考になればいいなと思い、このnoteを書きます。 ちなみに私は病院で勤務している医療従事者です。以下のように言っていただけてめちゃくちゃ嬉しかっ

          非エンジニアが機械学習を活用したWebサービスをリリースするまでの記録

          OpenAIのGPT3を使ってPythonで自動リプを作成・投稿する方法

          ChatGPTで有名なOpenAIが開発したGPT3を使って、指定したツイートにもらったリプに対して、自動で文章を生成して、返事を返すbotを作っていきましょう これまでのnoteで自動化が図れている方は、簡単にできると思います。 前提として、以前のnoteでTwitter APIを取得している前提で話を進めていきます。 もし、まだTwitter APIを取得していない場合には、こちらから取得しておきましょう 今回はGPT3の使い方に慣れる、という目的で実施していきます

          OpenAIのGPT3を使ってPythonで自動リプを作成・投稿する方法

          2023年に購入・読了した書籍の記録

          2022年も多くの本を読みましたが、どれを読み・何を考えたのかがわからなくなってきてしまったので、2023年は、購入・読了した書籍を記録していこうと思います。 せっかくなので、5段階のランキング形式でおすすめ度も表示していきたいと思います。 なるべく分野ごとに書いていこうと思いますので、興味ある本があれば、お手に取ってみてください。そして一緒に書籍について語りましょう お金関連お金は寝かせて増やしなさい★5 2022年には多くのものの値段が上がり、日本円の価値も下がっ

          2023年に購入・読了した書籍の記録

          pythonを使って動画の文字起こしをしてみよう

          これまではSNSなどの自動化についてnoteにまとめてきましたが、今回はpythonを使って動画の文字起こしをしてみよう、という内容です。 基本的にコピペでできるはずですが、環境などによってはエラーになるかもしれないので、その場合にはtwitterのDMから連絡をもらえるとアドバイスできます🙌 ちなみに僕は文字起こしを使って収益5桁に突破しました ブログで解説しているので、noteでは詳細に解説はしません ご興味ある方はブログの方もご覧ください 早速コードの紹介imp

          pythonを使って動画の文字起こしをしてみよう

          DMMアフィリエイトを使ってpythonyとtwitterで収益化を図る方法

          これまでもtwitterを使った収益化方法についてnoteでまとめてきました どちらも多くの方にお読みいただけているようで、書いてよかったなと思います。 何かで収益化を図ろうと考えたときに、大切なことは「どれだけ自動化できるか」だと考えています。 そのため、pythonとtwitterやその他のSNSを活用した方法は収益化に向いており、これらをうまく活用することで、自動収益化を図ることができます。 SNSを見ているとたまに「この人の講座をnoteにまとめて固定ツイート

          DMMアフィリエイトを使ってpythonyとtwitterで収益化を図る方法

          なぜ医療職がpythonを学ぶのか-そのメリットとうまい活用法-

          pythonを学び始めて約1年が経過をしました。 僕自身は病院勤務の医療従事者ですが、pythonなんて学ばずとも仕事をすることはできます。 なのになぜ医療職である僕がpythonを学び始めたのか? 今回はそこらへんについて書いていきたいと思います。 pythonのメリットと活用方法を知りたい方は、学び始めた理由は抜きにして、メリットとうまい活用法だけお読みください。 pythonのうまい活用法 ・フリーランス案件 ・自動化ツール作成・販売 ・現職場の業務効率化 p

          なぜ医療職がpythonを学ぶのか-そのメリットとうまい活用法-

          pythonを使ったインスタいいねの自動化

          これまでpythonを活用してtwitterの自動化をおこなってきましたが、そろそろtwitterもやり尽くした感があるので、次はインスタの自動化を進めていこうと思います。 インスタの自動化は今回が初めての試みなので、無料としています twitterの自動化ができた方はインスタの自動化も行えるはずです インスタの自動化が行えた方は、twitterの自動化も行えるはずなので、ぜひtwitterを使って自動収益化を図っていきましょう インスタの自動化はハードル高め(APIと

          pythonを使ったインスタいいねの自動化

          毎日のポイ活を自動化する方法

          ポイ活をしている方もたくさんいるかと思いますが、私もその一人です。 ただ、 毎日行うのがめんどくさい って思う方もたくさんいるかと思います。 僕はめちゃくちゃめんどくさくて、なかなか継続することができません。 なので、ポイ活を自動化する仕組みを作りました! プログラムを起動させれば1分もかからずにポイント獲得できるようになっています。 =====================note更新=========================== 自分のPCでPyt

          有料
          300

          毎日のポイ活を自動化する方法