スクリプトのログをLTSVで出力（Log::LTSV）
社内のProjectで、前の会社に影響されないようなコードを書く必要性が出てきた。 今まで蓄積していたモジュール達はいろいろ厄介なことになっているので、これを機に書き換えてみようと思った第一弾が...
3
3
Comment0
49 search resultsShowing 1~20 results
Stocked
You need to log-in
LTSVのパーサ
あんまり面白くなかった(小並感) module Data.LTSV (parseLTSV, parseRecord) where import qualified Data.HashMap.St...
5
5
Comment0
RailsログLTSV対応(LTSV Logger + UUID)
概要 RailsログのLTSV対応するのに既存のgem使ってみた 条件 : UUIDを出せること 使ってみたのは ltsv-logger logger-ltsv 結論 非常に簡単に使える どちら...
11
11
Comment0
PHPでLTSVフォーマットを扱う（Text-LTSVのご紹介）
LTSV（Labeled Tab-separated Values）、便利ですよね。PHPで簡単にLTSVフォーマットを扱えるライブラリを作って公開しているのでご紹介です。ライブラリはここにあり...
12
9
Comment0
LTSVをpandasに読み込む
LTSVは主にログファイルの形式として最近好まれているテキストフォーマットです。 http://ltsv.org/ 一行一レコード、各セルをタブで区切っているところはTSVと同じなのですが、ヘッ...
3
3
Comment0
RubyのLTSVパースのベンチマーク
激しく流行に乗り遅れた感がありますが、LTSVを調べてみました。 文字列分割 正規表現マッチ StringScanner のそれぞれでLTSVをパースした時のベンチマークを取ってみました。 とい...
6
5
Comment1
apache log の LTSV化
LogFormat "time:%{%Y-%m-%d %H:%M:%S %z}t\tdomain:%V\thost:%h\tserver:%A\tident:%l\tuser:%u\tmetho...
10
10
Comment3
LTSVをCSVに変換する。
この文章はDATUM STUDIO Advent Calendar 2016の5日目です。 今日までの4日間、DATUM STUDIO社員ではない方々が熱いコンテンツを連続で投稿くださいました。...
3
1
Comment0
HiveでLTSVを利用する
SerDeを用意してもいいんですが、Hiveの機能でmapのdelimiterを指定できるので、それを使うとLTSVな行をmap<string, string>として読むことができま...
8
10
Comment0
SquidのログをLTSVで出す
設定ファイル /etc/squid/squid.conf logformat ltsv src_ip:%>a src_port:%>p time:%{%Y/%m/%...
3
1
Comment0
LTSVフォーマットから該当の項目のみを抽出
概要 アクセスログをLTSVフォーマットに変更した。 既存のログと大きな違いは以下の２点 タブ区切り ラベルが付けられる 今までgrepやawkを駆使して該当項目を抽出していたが、 lltsvコ...
6
5
Comment0
RailsでLTSV形式でLogを出す
Gemとかあるのかもしれないけど、とりあえず自分で作ったものを使ってる module Utils class FormattedLogger class << self def cr...
1
2
Comment0
Ruby/RackでログをLTSVで出す
今更感が強いですが実際ログをLTSVにすると扱いやすい場面に最近遭遇したので。 ltsv_formatter.rb require 'logger' class Logger class Fre...
25
25
Comment0
シェルスクリプトでのLTSV出力イディオム
ログの出力がLTSVだと色々できるようになってきてますね(若干遅い)。 スクリプトからログ出力って多いとは思うのですが、そこでのLTSV出力の比較的楽な方法が微妙です。 で、あれこれ頑張った結果...
5
4
Comment0
Lua用LTSVパーサを書きました。
GitHub リポジトリ zaneli/lualtsv …といってもLTSVのパース自体は大して難しくないので、環境設定から単体テスト、モジュール作成までの一連の流れを備忘として残しておく。 L...
6
6
Comment0
ltsvをRubyのワンライナーで扱う
awkとシェルでLTSVの取り扱いを簡単にするフィルタを書いてみた なるほど。 上の記事を見てrubyでもやってみた。 # !/usr/bin/env ruby def ltsv(line) l...
8
9
Comment0
nginx のアクセスログを LTSV にする
nginx.conf から抜粋です。 log_format ltsv "time:$time_local" "\thost:$remote_addr" "\tforwardedfor:$ht...
11
11
Comment0
Java8 の Stream で ltsv パース
業務で ltsvっぽい形式の文字列のパースを行うことがあり、Java の Stream を利用して書いてみた時のメモ package ltsv; import java.util.Map; im...
0
1
Comment0
DjangoのログをLTSVで出力する
備忘録。 Djangoのログフォーマットを切り替えるにはlogging.Formatterを継承したカスタムクラスを作れば良い。format()メソッドを追加してstrオブジェクトを返すようにす...
6
6
Comment0
LTSV のログを jq でフィルタする
アクセスログ等を LTSV で保存している方は多いことでしょう。 LTSV は行指向データフォーマットなので、grep 等の UNIX ツールでのフィルタリングも簡単にできる上、拡張性にも優れて...
41
39
Comment2
49 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles