PyInsights: Pythonの知識の宝庫

本

Pythonはデータサイエンスと機械学習の分野で非常に強力です。このセクションでは、データの前処理、モデルの構築、評価、ディープラーニングなど、データサイエンスと機械学習に関連す…

運営しているクリエイター: ST

ebayの検索結果から、商品情報を抽出できるコードを作った話。

ひっさびさの投稿。2日、実質6時間くらいで作りました。と言っても内、3時間はpandasと格闘。ほぼ、3時間かね。内容は至って簡単。下記のCSVが好きなだけ作れます。細かいところは教えてほしければ、個別で連絡ください。基本的に、どんな商品でも対応できます。今度は、ここから、amazon情報と連携させる予定。 from selenium import webdriverfrom selenium.webdriver.common.by import Byfrom

ebay用投稿データをメルカリから、自動作成するツールを作った話。

猛烈に作った、ツールをただ淡々とコードを貼ってきます。 ebay転記がすごくめんどくさいので、転記したい情報をすべて作らせることを目的に、このツールをつくりました。 ①まずは、メルカリのショップ情報をすべて収集。 url = 'https://jp.mercari.com/'url = url + 'user/profile/930376259?status=on_sale'from selenium import webdriverfrom selenium.webdr

ebay検索情報からamazonで必要情報を検索するツールの話

お疲れ様です。最近コツコツ記事をまた書き始めました。以前投稿した以下記事の続きです。上記記事から、今回はCANONのカメラを検索かけて、amazonでその製品の情報を引っ張ってこられるかツールを作成中です。まずは、前回の記事からebay情報をまとめCSVに落とした情報をpandasに移動。dataframe化。ついでに、dataframe化したリストから、titleの項目のみ抽出。（実際、UPSがいいのか、商品タイトルでAMAZONで検索すればいいのか、まだ模

gspreadﾗｲﾌﾞﾗﾘの使い方をまとめる

前回の記事で、サービスアカウントにて、ｽﾌﾟﾚｯﾄﾞｼｰﾄを自動化する土台を作ったので、今回は、ｽﾌﾟﾚｯﾄﾞｼｰﾄの実用編として、記事をまとめる。 API使用準備は以下を参考 Google スプレッドシートは、データの整理、分析、共有に便利なツールです。Pythonのgspreadライブラリを使用すると、Google スプレッドシート内のセルやｼｰﾄを操作できます。以下では、gspreadを使ったｼｰﾄ、セルの操作について説明します。 ①ｼｰﾄ操作編１ｼｰﾄの作成、

政治資金収支報告書×Python×検討

政治資金収支報告書は、政治家や政治団体が受け取った寄付や支出などの収支情報を公開するための文書です。これらの報告書は一般に公開されており、政治の透明性や公正さを担保するために重要な情報源となっていますが、昨今この法律を蔑ろにする方々が多かったので、pythonでいろいろできないか、模索してみました。データの収集と前処理まず、政治資金収支報告書のデータを収集する必要があります。政府や自治体のウェブサイトからデータをダウンロードするか、オープンデータポータルなどから入手す

業務で使う、電子素子のデータシートからPYTHONで必要グラフを抽出した話

こんばんは、以前、ｽﾌﾟﾚｯﾄﾞｼｰﾄAPIについてお話しました。最近、主業の車載ECU設計にあたり、計算書を作成する必要があり、使用する電子部品素子のPDFから画像をちまちまとってきているというめんどくさい業務があったので、それを意識した記事を書きたいと思います。実際の業務手順はこれ①各メーカのデータシートをダウンロード。自動化できるか？→否　ダウンロードしに行ったほうが早い。まぁ一覧くらい作って、特定フォルダにぶっこむところくらいはやってもいいかも。 ②

スプレッドシートAPIキーの取得方法とgoogle サービスアカウントによるPYTHONでの運用方法について。

前置き：クラウドワークス等で仕事を受けると、よく、スプレッドシートに情報を記載～、だとか、必要情報をまとめたら、こちらで作成したスプレッドシートに記載して～だとか、よく言われます。めんどくさいので、自動化できる方法を記載しておきます。【狙い】今回は、グーグルにて、普段我々が使用しているユーザーアカウントではなく、サービスアカウントと呼ばれる、アカウントを作り、アプリ本体へアクセス。json形式による認証情報を使用して、スプレッドシートへ記載する方法について記載します。