ytyng.com

Viewing posts for the category Python

Selenium Webdriver のセッションクッキーを使って requests でファイルをダウンロードする

Posted by: ytyng Category: Python 1 year, 7 months ago

cookies = {
    cookie['name']: cookie['value']
    for cookie in driver.get_cookies()
}

response = requests.get(
    url,
    headers={'User-Agent': self.user_agent},
    cookies=cookies)

追記: zipを展開

PythonでBOMつきTSVファイルを読み込む

Posted by: ytyng Category: Python 1 year, 11 months ago

Amazon からCSV をダウンロードすると、BOMつきTSVのことがある。

UbuntuにSSL CA証明書を追加し、python requests で使う

Posted by: ytyng Category: Python 1 year, 11 months ago

1. もし、証明書が der 形式なら pem にしておく

Ubuntu 14.04 に Python3.5 をインストールする

Posted by: ytyng Category: Python 2 years, 3 months ago

ソースからビルドするのが簡単

Django Social Auth で AuthAlreadyAssociated が出る場合

Posted by: ytyng Category: Django, Python 2 years, 9 months ago

いつも焦るので書いておく

Selenium Firefox で geckodriver.log を出力しない

Posted by: ytyng Category: Python 3 years, 3 months ago

サーバ上で permission denied になっちゃうことがよくあるので

Django で Shift-JIS の CSV を出力

Posted by: ytyng Category: Django, Python 3 years, 11 months ago

Python 3, Django 1.9

SSL証明書の有効期限を timedelta で取得

Posted by: ytyng Category: Python 4 years, 6 months ago

プロセスプールを使って並列処理を簡単に書く

Posted by: ytyng Category: Python 4 years, 7 months ago

Python 簡易スレッドプール

Posted by: ytyng Category: Python 4 years, 7 months ago

ディスプレイが無い Linux で、Firefox + Selenium を Python 上で起動して自動操作する

Posted by: ytyng Category: Python 4 years, 9 months ago

python3 で requests ( _ssl )が import できなくなった場合 (mac)

Posted by: ytyng Category: Python 4 years, 11 months ago

Traceback (most recent call last):
  File "/Applications/Develop/PyCharm.app/helpers/pycharm/django_test_manage.py", line 51, in <module>
    django.setup()
  ...
  File "/usr/local/Cellar/python3/3.4.1/Frameworks/Python.framework/Versions/3.4/lib/python3.4/importlib/__init__.py", line 109, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
  File "<frozen importlib._bootstrap>", line 2254, in _gcd_import
  File "<frozen importlib._bootstrap>", line 2237, in _find_and_load
  File "<frozen importlib._bootstrap>", line 2226, in _find_and_load_unlocked
  File "<frozen importlib._bootstrap>", line 1200, in _load_unlocked
  File "<frozen importlib._bootstrap>", line 1129, in _exec
  File "<frozen importlib._bootstrap>", line 1471, in exec_module
  File "<frozen importlib._bootstrap>", line 321, in _call_with_frames_removed
  ...
  File "/usr/local/Cellar/python3/3.4.1/Frameworks/Python.framework/Versions/3.4/lib/python3.4/ssl.py", line 97, in <module>
    import _ssl             # if we can't import it, let the error propagate
ImportError: dlopen(/usr/local/Cellar/python3/3.4.1/Frameworks/Python.framework/Versions/3.4/lib/python3.4/lib-dynload/_ssl.so, 2): Symbol not found: _SSLv2_method
  Referenced from: /usr/local/Cellar/python3/3.4.1/Frameworks/Python.framework/Versions/3.4/lib/python3.4/lib-dynload/_ssl.so
  Expected in: /usr/local/opt/openssl/lib/libssl.1.0.0.dylib
 in /usr/local/Cellar/python3/3.4.1/Frameworks/Python.framework/Versions/3.4/lib/python3.4/lib-dynload/_ssl.so

docutils の rst ライター (docutils.writers.html4css1) で、リンクを無効にする

Posted by: ytyng Category: Python 5 years, 2 months ago

設定項目が見つけられなかったので、モンキーパッチでやる

pip install pillow → error: command 'cc' failed with exit status 1 というエラーが出たら環境変数を追加

Posted by: ytyng Category: Python 6 years, 2 months ago

複数ファイルをエディターを使ってファイル名を一括置換するスクリプト

Posted by: ytyng Category: Python 6 years, 4 months ago

ジェネレータとクラスでロガーっぽいのを書き比べる

Posted by: ytyng Category: Python 6 years, 6 months ago

iPython実行時のreadlineエラーを解消

Posted by: ytyng Category: Python 8 years, 5 months ago

クリップボード入出力

Posted by: ytyng Category: Python 8 years, 11 months ago

TokyoTyrantをモデルっぽく使う TokyoTyrantStorage

Posted by: ytyng Category: Python 8 years, 11 months ago

# -*- coding: utf-8 -*-

RFC2822形式の日付をpythonのdatetimeに変換する

Posted by: ytyng Category: Python 8 years, 11 months ago

# -*- coding: utf-8 -*-