機械学習 アーカイブ | 合同会社ムジンケイカクプロ

機械学習

Python

【Python】よく忘れるSolving environment状態が終わらない時の対策|conda

conda update(conda create)がくるくるクルクルして、画面がそれ以降に進みません。 強制終了からの対応フロー 端末を閉じて強制終了。CTRL+Cです。 conda clean all ...
Python

【Python】よく忘れるfailed with initial frozen solve. Retrying with flexible solve. の解決方法|conda

具体的には、 conda install -y -c conda-forge jupyter_contrib_nbextensions conda install -y -c conda-forge jupyter_contrib_...
Python

【Python】Seleniumを利用したスクレイピングでよく使うプログラム集

指定したclassの数をカウントする この回数分の処理を繰り返す。 def check_datenum(self): elements = self.driver.find_el...
Python

【Python】よく忘れるwindows上での実行環境作成方法|conda

デスクトップアプリを作成する際に、仮想環境を新たに作成してから制作するイメージです。 windows上でのフォルダ切り分け 仮想環境の本体の場所といいますか、フォルダ切り分けをしておきます。 どこか適当なところにフォルダ...
Python

【Python】よく忘れるダミーデータ作成方法のパターン集

テストをする際に、ダミーデータを作成することがあると思います。手元で手早くダミーデータが作れると、実体験からも研究がはかどります。ここでは、ダミーデータの作成方法をまとめています。 テスト用のダミーデータを作る|np.arangeと...
Python

【Python】よく忘れるPandasによるCSV読み込み方法のパターン集

CSV登録されているデータをループ処理し、スクレイピングしていく際にCSVの読み込み方が問題になることがあります。主に文字コードなどが原因になると思いますが、そこで役立つCSVの読み込み方を一覧化しておきます。覚えきれませんからね…。読み...
Python

【Python】note記事のバックアップ|Webスクレイピングプログラムの作成例

Webスクレイピングとは? 様々なWebサイトから情報を抽出・取得する技術です。Googleの検索エンジンが、あなたのサイトを巡回して情報を取得していくのも、Webスクレイピングといっていいでしょう、きっと。Webサイトの特定の情報...
Python

【Python】Google検索の結果をスクレイピングでコピペしやすくする方法

既に以下で紹介するような良い作例や記事があったんですが、手元で調べている間に作ってしまったので公開します。 ▼参考記事 【初心者向け】Pythonでスクレイピングする環境を作る⑤ Google検索をしてみる|Naruhiko|...
Python

【Python】GPU認識の確認とGPU情報の表示

確かLightgbmでGPU利用をしようとした時に、GPUを認識しているかの確認に使ったはずです。 from tensorflow.python.client import device_lib device_lib.list_local...
Python

【Python】データフレームのカラム名単位でループ処理【pandas】

pandasデータフレームのカラム名を確認。 リストにある名前のカラムであれば、名前表示後の削除。 drop_col = def dc(df) for i in df.columns: if i in drop_c...
Python

【Python】Googleスプレッドシートのワークシート名を指定後、指定セルに値を書き込む【JSON】

Google Colaboratoryでワークシート名を指定して書き込むことだけ紹介してあっても、このページの存在価値がない~利用価値がないと思うので、何に使っているかとその参考まで。 ▼最終的に書き込みに関して調べた時に、非常にわかりや...
Python

【Python】文字列と数値の混在するリスト処理

競輪データで実際に困った、文字列と数値の混在するデータの処理で困った事例です。 みなさん、ギャンブル予想がんばってますか? プログラムをリファクタリング+整理し始めた中で、思い出したノウハウがありましたのでご紹介。 ▼Pandasで1から...
Python

【Python】欠損値NaN判定|欠損値の個数を列(カラム)単位でカウントして確認する方法【pandas】

列単位で欠損値(NaN)があるか確認するなら 全てNaNの列がないか確認します。 私はこれをNaNを列にひとつでも含んでいる場合の命令だと勘違いし、ハマったことがあります。 print(df.isnull().all()) 欠損値(Na...
機械学習

機械学習|Pythonかんたん環境構築からのAI入門

環境の構築と実際の運用 Google Colaboratory VMware での 仮想環境 Windows と Linux の デュアルブート 関連記事 機械学習による競輪予想 Google Colaboratory Go...