Python panderaでUnion型を扱う方法
pandera (0.18.0) ではUnion型がサポートされていなさげ。そのためちょっとだけ自分でコードを書く必要がある。
例えばあるカラムが文字列or数値であることを検証するには、以下のようにすればよい。
from da...
Python
Python Python Pythonで現在時刻を取得するテンプレート
Pythonで現在時刻を取得するときに、確実にJSTで取りたいときは、以下のようにする。
from datetime import (
datetime,
timedelta,
timezone,
)
J...
Python VSCodeでE501を無視する (Python)
flake8を入れてるとよく出る
line too long (xxx > 79 characters) flake8(E501) [Ln yyy, Col 80]
を Visual Studio Code (V...
Python DataFrameのmapとかapplyとか
DataFrameのmapとかapplyとか、いろいろあって間違えがちなので、メモ
import pandas as pd
import polars as pl
df = (適当に作成)
# pandas の場合
df[...
Python Streamlit Cloud を使ってみた
YOUR TIME を読んだついでに、時間感覚タイプテストのWebアプリを Streamlit で作って、ついでに Streamlit Cloud で公開してみました（河出書房新社のページだと、点数やグラフが出ないという不満点があったので...
Python Python Redshift メモ
Python で Redshift に接続するとき用のメモ
import pandas as pd
import psycopg2
con_format = 'dbname={dbname} ...'
db_info = {
...
機械学習 FFMをxLearnで試す
Field-aware Factorization Machines (FFM) を Python で試すために、xLearn を使ってみた。
環境によってインストールできたりできなかったりして、よく分からない。メンテナンスもされて...
Python Pythonでasyncioを使ってみる
asyncとかawaitとか使っていい感じにやると、IOバウンドな処理は速くなる。
from __future__ import annotations
import asyncio
import pandas as pd
i...
Python Pythonで処理時間を計測するタイマー
contextlib.contextmanager を使って適当にやる
from __future__ import annotations
from contextlib import contextmanager
from ...
Python ニコ動のブロマガをスクレイピングする
ニコニコ動画のブロマガをスクレイピングしたのでメモ。Python で Beautiful Soup と Selenium を使った。ヘッドレスにはせずに、ちゃんと動いていることを確認しながらやった。
いろいろ warning 出るけ...