📝Clojure API Client Development

📝Clojure API Client Development

主にサービスのAPIを叩くクライアントプログラムのノウハウまとめ.

ref: 📝Clojure Web Development から分離.

up: 📂Clojure tags: 🏷Clojure refs: 📝Clojure with Twitter Development

Clojure HTTP Client #

主なクライアントライブラリにhttp-kitとclj-httpがある.

httpリクエストに関してはどちらも同じことができる. 非同期発行も.

ただしポイントはwebsocketがt統合されているかどうか.

http-kitは2022年現在メンテナンス状況が怪しく見えた.

clj-http #

https://github.com/dakrone/clj-http

Ring の影響を受けているため Request Mapを入力としてResponse Mapを返す.

tips: debug 出力 #

{:debug true} をRequest Mapに含めると, 標準出力にRequest Mapの内容が表示される.

tips: clj-httpにおけるjsonの扱い #

ClojureでJSONを扱うライブラリである darkrone/cheshire をインストールすると, jsonとの連携が{:as :json} でできる. この指定がされると clj-httpはrepsonse dataをcheshire でjsonにパースする.

なお 単純に {:headers {:accept “application/json”}}を設定したいだけなら{:accept :json}を指定する.

ref: 💡Accept と Content-Typeの違い

howto: HTTPエラーの扱いと例外ハンドリング #

HTTP Responseが正常終了以外の場合はslingshotのインスタンスを返すため, slingshotに合わせたエラーハンドリングが期待される.

howto: clj-httpのリクエストをproxy経由にするには？ #

Request Mapに proxy-host, prox-port, proxy-user, proxy-passを含める.

ref: clj-http: Proxies

howto: clj-httpで WARN log: Invalid ‘expires’ attribute #

request mapのオプションに :cookie-policy :standard を追加.

ref: Invalid ‘expires’ attribute? - GitHub

howto: タイムアウト値を設定するには？ #

Request Mapに 値をmillsecondで設定.

{:socket-timeout 1000
:connection-timeout 1000
:connection-request-timeout 1000}

clj-httpは JavaのApache HttpClentのWrapperであり仕様はこれに従う. 設定可能な３つの属性の意味はそれぞれ以下の通り.

  • socket timeout: ソケット通信のスタートから終了まで.
  • connection timeout: クライアントからサーバへの接続確立(3way-shake)まで
  • connection-request-timeout: 接続確立後からレスポンスが返るまで.

ref. JavaのHttpClientにおける3つのTimeoutの違いに関して - Qiita

ページが存在するかチェックするには? #

スクレイピング用途で利用するときに404がかかるとわかっているならばgetを投げないほうがいい. こんなときはhead requestで事前に存在確認したい.

ただしclj-httpではエラーコードは自動で例外を上げるため, それを防止して自分で中身のコードをチェックするときはRequest Mapに {:throw-exceptions false} を設定する.

(defn page-exists? [url]
  (if-let [resp (client/head url {:headers          headers
                                  :throw-exceptions false})]
    (= (:status resp) 200)
    false))

References #

勉強の参考に目を通したもののブックマーク.

Tags

Backlinks