web-dev-qa-db-ja.com

アカマイのログ処理

アカマイのログを調べ、Excelシートをダウンロードしてから手動で結合して、データの並べ替えを行って上位の動画やリファラーを見つけることができます。この種の処理を支援するために知っているツールはありますか?以前はApacheログ用でしたが、Akamaiログ用のUrchinのようなものを探しています。

2
dsldsl

「結合」形式でログを送信するようにログ配信オプションを構成できます。そのため、任意の標準ツール(awstatsなど)を使用できます。

Sumo Logicをチェックしてください。クラウドモニターを利用して、すぐに使える豊富なコンテンツを備えた、アカマイとのクラウド間の統合を提供します。セットアップは簡単で、オンプレミスでのバッチダウンロード/処理について心配する必要はありません。

https://www.sumologic.com/2013/10/09/akamai-and-sumo-logic-integrate-for-real-time-application-insights/

免責事項-私は相撲の従業員です。

1
kelly

この 質問 は役立つかもしれません。 SplunkEpylog はあなたが探していることをしているようだと思います。

他のツールもそこや他の場所で参照されており、それらも役立つかもしれません:)

1
warren

このようなことをするとき、私はただたくさんのawksort、そしてuniq -cを使います。

Perlは再現性に優れている可能性がありますが、大きなデータセットを処理する場合(最近DFZルーターからのBGPダンプで遊んでいます)、それは本当に大きなマシンでもスワップにプッシュするのは簡単です。メモリをリークした場合。

Splunkなどのツールは、単純なunixパイプが機能しない可能性があるアドホックなものには適しているように見えますが、より永続的なレポートには適していません。

Awstatsまたは同様のものを使用するだけで、ほとんどのWebログ処理ツールは異なる入力形式を使用するように指示できます。

0
LapTop006