ELK, Fluentd, Honeypot

送信側サーバ（WOWHoneypot + Fluentd）と受信側サーバ（ElasticSearch + Kibana）の2つのサーバの場合。

ElasticSearch + Kibana の構築
WOWHoneypot ...

ELK, Fluentd, Honeypot, Ubuntu

構築した ElasticSearch + Kibana に Fluentd を利用してログを投入する。

ログは WOWHoneypot のもの。WOWHoneypot については電子書籍も販売されてるので、ハニーポットを勉 ...

AWS, Docker, ELK, Honeypot

AWS 上に ElasticSearch + Kibana を Docker Compose を使って作成した際の手順。

AWSt2.medium
AMI
SSD30GB
セキュリティグループで5601ポートに ...

Python

現象

このようなエラーが出た。

After pip 10 upgrade on pyenv “ImportError: cannot import name ‘main'”で議論されている ...

BigQuery, GCP

Standard SQLのみです。

文字列を timestamp 型にパース

例えば 20180329T092448 のような文字列があったとする。

これを timestamp 型として変換したい場合、 PARS ...

Python, Python3

現象

表題の件、下記のように、Redash の Python DataSources で get_query_result で値を取得しようとすると、KeyError が表示された。

Error running query: &l ...

雑記

英語勉強用に、TEDの The power of believing you can improve を書き起こした。

The power of believing you can improve

I heard about ...

Jupyter, pandas, Python3

Pandas で存在しない key を loc を使って指定した場合、 KeyError とななってしまう。

以下のようすると、KeyError が返らない。存在しない場合は False が返る。

存在する場合 ...

BigQuery

概要

GCP の BigQuery へ fluent-plugin-bigquery でストリームインサートする際に遭遇したエラーのメモ。

fluent-plugin-bigquery のバージョンは 1.10。

AWS, Python3

pyenv, python3, lambda-uploader で AWS Lambda にアップロードするの続き。

Python の numpy や pandas, beautifulsoupなど、Cで作られているライブ ...