Python【Python】pandasで欠損値を上手に扱う pandasを使って読み込んだデータを処理する時に、必ずと言っても良いほど向き合わなければいけないのが欠損値(NaN)の処理。 今回は備忘録としてよく利用する機能を簡易的にまとめてみた。 今回扱うデータ 今回読み込むデータはこちら。 idn... 2021.04.17Python
シェルスクリプト【Linux】作成するファイル名に日付を入れる ログファイルやAPIのリクエスト結果をファイルに保存しておく時、上書きしないように毎回ファイル名を変更するのは大変だ。 そのため、保存するファイル名に日付や時刻を入れておくようにすると、同じコマンドでも実行した時間によって別のファイルに保存... 2021.03.25シェルスクリプトターミナル操作
シェルスクリプト【Linux】改行コード\nを改行として表示する ログファイルなどを調査しているとき、フォーマットによっては下記のように改行コード\nがそのまま埋め込まれているものに遭遇する。 こんな時はワンライナーコマンドで見やすくしよう。 対象のファイル 今回は、以下のような内容が書かれているファイル... 2021.03.24シェルスクリプト
Java【SpringBoot】CheckStyleをGradleを使って導入する CheckStyleとは Javaの静的解析ツールの一種で、コーディング規約に従ってコードが書かれているかどうかをチェックするためのものである。 インデントが汚かったり、改行のポイントが汚かったりするところを指摘してくれる。 ディレクトリ構... 2021.01.30JavaSpringBoot
Docker【Python】Dockerを使ってPythonの環境を構築する(TA-Libを使う) 簡単にテクニカル分析を行うことができるTA-LibをPythonで使うためには、 TA-Lib本体をインストール(brew install ta-lib)TA-LibのPython用ラッパーをインストール(pip install TA-Li... 2021.01.01DockerPython
ターミナル操作【Linux】パスを通すとは 環境構築とかで「パスを通す」といった用語がサラッと出てくるが、一体どういう理屈で何をすることなのかを解説する。 前提知識 「パスを通す」を理解するためには、Linuxコマンドがどのように実行されるかの前提知識が必要。 標準コマンドのデータは... 2020.12.05ターミナル操作用語
シェルスクリプト【Linux】改行コードの確認を行うコマンド エンジニアをやっていると、様々なログファイルや成果ファイルたちに出会う。 拡張子も違えば、改行コードにも個性がある。 普段使わないような改行コードに出会ったときにあわてふためかないための備忘録。 改行コードの種類 まずは改行コードの種類を知... 2020.11.22シェルスクリプト
シェルスクリプト【Linux】awkコマンド入門、使い方 awkコマンドは簡単に言うと、表形式のデータに対して様々な加工や編集を行う作業を得意としている。 スペース、タブ、カンマなどの区切り文字によって整理されたデータを扱うことができ、対象データから要素の抽出、整形、簡単な演算などを行うことができ... 2020.11.21シェルスクリプト
シェルスクリプト【Linux】ファイルを一行ずつ読み込んで処理をする(curlとか) やりたいこと 次のようなURLのリストファイルがあり、サクッとリクエストして結果(ステータスコード)を確認したい。 url_list.txt localhost:8080/1 localhost:8080/2 localhost:8080/... 2020.11.14シェルスクリプト