Skip to Content
マスタリングLinuxシェルスクリプト 第2版 ―Linuxコマンド、bashスクリプト、シェルプログラミング実践入門
book

マスタリングLinuxシェルスクリプト 第2版 ―Linuxコマンド、bashスクリプト、シェルプログラミング実践入門

by Mokhtar Ebrahim, Andrew Mallett, 萬谷 暢崇, 原 隆文
December 2022
Intermediate to advanced
400 pages
4h 27m
Japanese
O'Reilly Japan, Inc.
Content preview from マスタリングLinuxシェルスクリプト 第2版 ―Linuxコマンド、bashスクリプト、シェルプログラミング実践入門

12章AWKを使ったログの集約

前の章では、正規表現について説明し、それを使ってsedやAWKをパワーアップさせる方法を学びました。この章では、AWKを使った実用的なサンプルを解説します。

AWKが得意とする作業の1つが、ログファイルからデータをフィルタリングすることです。ログファイルには非常に多くの行が含まれていることが多く、250,000行以上にもなる場合があります。筆者も100万行以上のデータを扱ったことがあります。AWKは、これらの行を素早く効率的に処理することができます。この章では、例として、30,000行に及ぶWebサーバーのアクセスログを取り上げ、AWKコードがいかに効率的であるか、またそのようなコードをどのように作成できるかを示します。読み進めていく中で、別のログファイルも取り上げ、awkコマンドとAWKプログラミング言語で利用できるテクニックを紹介します。これらは、サービスの管理やレポート作成に役立ちます。この章では、以下のテーマを扱います。

  • HTTPログファイルのフォーマット
  • Webログからのデータの表示
  • 最もランキングの高いIPアドレスの表示
  • ブラウザーデータの表示
  • Eメールログの処理

12.1 HTTPログファイルのフォーマット

どのようなファイルを扱う場合でも、最初の作業はファイルの構造を理解することです。簡単に言えば、フィールドを区切るために何が使われているか、それぞれのフィールドが何を表しているかを知る必要があります。ここでは、Apache HTTP Webサーバーのアクセスログファイルを取り上げます。このログファイルの場所は、httpd.confファイルによって管理されます。Linux MintなどのDebian系のLinuxディストリビューションでのデフォルトの場所は、 ...

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Read now

Unlock full access

More than 5,000 organizations count on O’Reilly

AirBnbBlueOriginElectronic ArtsHomeDepotNasdaqRakutenTata Consultancy Services

QuotationMarkO’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.
Julian F.
Head of Cybersecurity
QuotationMarkI wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.
Addison B.
Field Engineer
QuotationMarkI’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.
Amir M.
Data Platform Tech Lead
QuotationMarkI'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
Mark W.
Embedded Software Engineer

You might also like

プログラミングRust 第2版

プログラミングRust 第2版

Jim Blandy, Jason Orendorff, Leonora F. S. Tindall, 中田 秀基
仕事ではじめる機械学習 第2版

仕事ではじめる機械学習 第2版

有賀 康顕, 中山 心太, 西林 孝
バイオインフォマティクスデータスキル ―オープンソースツールを使ったロバストで再現性のある研究

バイオインフォマティクスデータスキル ―オープンソースツールを使ったロバストで再現性のある研究

Vince Buffalo, 片山 俊明, 川島 秀一, 鈴木 治夫, 山本 泰智, 酒匂 寛, 山村 吉信
詳説 イーサネット 第2版

詳説 イーサネット 第2版

Charles E. Spurgeon, Joann Zimmerman, 三浦 史光, 豊沢 聡

Publisher Resources

ISBN: 9784814400119Other