譯者序
作者簡介
序言
前言
第1章　木材、樹木、森林 1
1.1　概述 1
1.2　日誌數據基礎 2
1.2.1　什麼是日誌數據 2
1.2.2　日誌數據是如何傳輸和收集的 3
1.2.3　什麼是日誌消息 5
1.2.4　日誌生態係統 6
1.3　看看接下來的事情 12
1.4　被低估的日誌 13
1.5　日誌會很有用 14
1.5.1　資源管理 14
1.5.2　入侵檢測 14
1.5.3　故障排除 17
1.5.4　取證 17
1.5.5　無聊的審計，有趣的發現 18
1.6　人、過程和技術 19
1.7　安全信息和事件管理（siem） 19
1.8　小結 22
參考文獻 22
第2章　日誌是什麼 23
2.1　概述 23
2.2　日誌的概念 25
2.2.1　日誌格式和類型 27
2.2.2　日誌語法 32
2.2.3　日誌內容 35
2.3　良好日誌記錄的標準 36
2.4　小結 38
參考文獻 38
第3章　日誌數據來源 39
3.1　概述 39
3.2　日誌來源 39
3.2.1　syslog 40
3.2.2　snmp 45
3.2.3　windows事件日誌 48
3.3　日誌來源分類 50
3.3.1　安全相關主機日誌 50
3.3.2　安全相關的網絡日誌 52
3.3.3　安全主機日誌 52
3.4　小結 54
第4章　日誌存儲技術 55
4.1　概述 55
4.2　日誌留存策略 55
4.3　日誌存儲格式 57
4.3.1　基於文本的日誌文件 57
4.3.2　二進製文件 59
4.3.3　壓縮文件 59
4.4　日誌文件的數據庫存儲 60
4.4.1　優點 61
4.4.2　缺點 61
4.4.3　定義數據庫存儲目標 61
4.5　hadoop日誌存儲 63
4.5.1　優點 63
4.5.2　缺點 64
4.6　雲和hadoop 64
4.6.1　amazon elastic mapreduce入門 64
4.6.2　瀏覽amazon 64
4.6.3　上傳日誌到amazon簡單存儲服務（s3） 65
4.6.4　創建一個pig腳本分析apache訪問日誌 67
4.6.5　在amazon elastic mapreduce (emr)中處理日誌數據 68
4.7　日誌數據檢索和存檔 70
4.7.1　在綫存儲 70
4.7.2　近綫存儲 70
4.7.3　離綫存儲 70
4.8　小結 70
參考文獻 71
第5章　syslog-ng案例研究 72
5.1　概述 72
5.2　獲取syslog-ng 72
5.3　什麼是syslog-ng 73
5.4　部署示例 74
5.5　syslog-ng故障排除 77
5.6　小結 79
參考文獻 79
第6章　隱蔽日誌 80
6.1　概述 80
6.2　完全隱藏日誌設置 82
6.2.1　隱藏日誌生成 82
6.2.2　隱藏日誌采集 82
6.2.3　ids日誌源 83
6.2.4　日誌收集服務器 83
6.2.5　“僞”服務器或“蜜罐” 85
6.3　在“蜜罐”中的日誌記錄 85
6.3.1　蜜罐網絡的隱蔽shell擊鍵記錄器 86
6.3.2　蜜罐網絡的sebek2案例研究 87
6.4　隱蔽日誌通道簡述 88
6.5　小結 89
參考文獻 89
第7章　分析日誌的目標、規劃和準備 90
7.1　概述 90
7.2　目標 90
7.2.1　過去的問題 91
7.2.2　未來的問題 92
7.3　規劃 92
7.3.1　準確性 92
7.3.2　完整性 93
7.3.3　可信性 93
7.3.4　保管 94
7.3.5　清理 94
7.3.6　規範化 94
7.3.7　時間的挑戰 95
7.4　準備 96
7.4.1　分解日誌消息 96
7.4.2　解析 96
7.4.3　數據精簡 96
7.5　小結 98
第8章　簡單分析技術 99
8.1　概述 99
8.2　一行接一行：絕望之路 100
8.3　簡單日誌查看器 101
8.3.1　實時審核 101
8.3.2　曆史日誌審核 102
8.3.3　簡單日誌操縱 103
8.4　人工日誌審核的局限性 105
8.5　對分析結果做齣響應 105
8.5.1　根據關鍵日誌采取行動 106
8.5.2　根據非關鍵日誌的摘要采取行動 107
8.5.3　開發行動計劃 109
8.5.4　自動化的行動 109
8.6　示例 110
8.6.1　事故響應的場景 110
8.6.2　例行日誌審核 110
8.7　小結 111
參考文獻 111
第9章　過濾、規範化和關聯 112
9.1　概述 112
9.2　過濾 114
9.3　規範化 115
9.3.1　ip地址驗證 116
9.3.2　snort 116
9.3.3　windows snare 117
9.3.4　通用cisco ios消息 117
9.3.5　正則錶達式性能考慮因素 118
9.4　關聯 119
9.4.1　微觀關聯 121
9.4.2　宏觀關聯 122
9.4.3　使用環境中的數據 125
9.4.4　簡單事件關聯器 126
9.4.5　狀態型規則示例 127
9.4.6　構建自己的規則引擎 132
9.5　常見搜索模式 139
9.6　未來 140
9.7　小結 140
參考文獻 140
第10章　統計分析 141
10.1　概述 141
10.2　頻率 141
10.3　基綫 142
10.3.1　閾值 145
10.3.2　異常檢測 145
10.3.3　開窗 145
10.4　機器學習 146
10.4.1　knn算法 146
10.4.2　將knn算法應用到日誌 146
10.5　結閤統計分析和基於規則的關聯 147
10.6　小結 148
參考文獻 148
第11章　日誌數據挖掘 149
11.1　概述 149
11.2　數據挖掘簡介 150
11.3　日誌數據挖掘簡介 153
11.4　日誌數據挖掘需求 155
11.5　挖掘什麼 155
11.6　深入感興趣的領域 157
11.7　小結 158
參考文獻 158
第12章　報告和總結 159
12.1　概述 159
12.2　定義最佳報告 160
12.3　身份認證和授權報告 160
12.4　變更報告 161
12.5　網絡活動報告 163
12.6　資源訪問報告 164
12.7　惡意軟件活動報告 165
12.8　關鍵錯誤和故障報告 166
12.9　小結 167
第13章　日誌數據可視化 168
13.1　概述 168
13.2　視覺關聯 168
13.3　實時可視化 169
13.4　樹圖 169
13.5　日誌數據閤成 170
13.6　傳統日誌數據圖錶 175
13.7　小結 176
參考文獻 176
第14章　日誌法則和日誌錯誤 177
14.1　概述 177
14.2　日誌法則 177
14.2.1　法則1——收集法則 178
14.2.2　法則2——留存法則 178
14.2.3　法則3——監控法則 178
14.2.4　法則4——可用性法則 179
14.2.5　法則5——安全性法則 179
14.2.6　法則6——不斷變化法則 179
14.3　日誌錯誤 179
14.3.1　完全沒有日誌 180
14.3.2　不查看日誌數據 181
14.3.3　保存時間太短 182
14.3.4　在收集之前排定優先順序 183
14.3.5　忽略應用程序日誌 184
14.3.6　隻搜索已知的不良條目 184
14.4　小結 185
參考文獻 185
第15章　日誌分析和收集工具 186
15.1　概述 186
15.2　外包、構建或者購買 186
15.2.1　構建一個解決方案 187
15.2.2　購買 187
15.2.3　外包 188
15.2.4　問題 189
15.3　日誌分析基本工具 189
15.3.1　grep 189
15.3.2　awk 191
15.3.3　microsoft日誌解析器 192
15.3.4　其他可以考慮的基本工具 193
15.3.5　基本工具在日誌分析中的作用 194
15.4　用於集中化日誌分析的實用工具 195
15.4.1　syslog 195
15.4.2　rsyslog 196
15.4.3　snare 197
15.5　日誌分析專業工具 197
15.5.1　ossec 198
15.5.2　ossim 200
15.5.3　其他值得考慮的分析工具 201
15.6　商業化日誌工具 202
15.6.1　splunk 202
15.6.2　netiq sentinel 203
15.6.3　ibm q1labs 203
15.6.4　loggly 204
15.7　小結 204
參考文獻 204
第16章　日誌管理規程 205
16.1　概述 205
16.2　假設、需求和預防措施 206
16.2.1　需求 206
16.2.2　預防措施 207
16.3　常見角色和職責 207
16.4　pci和日誌數據 208
16.4.1　關鍵需求10 208
16.4.2　與日誌記錄相關的其他需求 211
16.5　日誌記錄策略 213
16.6　審核、響應、升級規程 初始基綫 217
16.6.3　人工構建初始基綫 219
16.6.4　主要工作流程：每天日誌審核 220
16.6.5　異常調查與分析 222
16.6.6　事故響應和升級 225
16.7　日誌審核的驗證 225
16.7.1　日誌記錄的證據 226
16.7.2　日誌審核的證據 226
16.7.3　異常處理的證據 226
16.8　日誌簿——異常調查的證據 227
16.8.1　日誌簿推薦格式 227
16.8.2　日誌簿條目示例 228
16.9　pci依從性證據包 230
16.10　管理報告 230
16.11　定期運營任務 231
16.11.1　每日任務 231
16.11.2　每周任務 232
16.11.3　每月任務 232
16.11.4　季度任務 233
16.11.5　年度任務 233
16.12　其他資源 233
16.13　小結 233
參考文獻 234
第17章　對日誌係統的攻擊 235
17.1　概述 235
17.2　各類攻擊 235
17.2.1　攻擊什麼 236
17.2.2　對機密性的攻擊 236
17.2.3　對完整性的攻擊 241
17.2.4　對可用性的攻擊 245
17.3　小結 252
參考文獻 252
第18章　供程序員使用的日誌 253
18.1　概述 253
18.2　角色與職責 253
18.3　程序員所用的日誌記錄 254
18.3.1　日誌應該記錄哪些信息 255
18.3.2　程序員使用的日誌記錄api 256
18.3.3　日誌輪轉 257
18.3.4　不好的日誌消息 259
18.3.5　日誌消息格式 259
18.4　安全考慮因素 261
18.5　性能考慮因素 262
18.6　小結 263
參考文獻 263
第19章　日誌和依從性 264
19.1　概述 264
19.2　pci dss 265
19.3　iso 2700x係列 269
19.4　hipaa 271
19.5　fisma 276
19.6　小結 281
第20章　規劃自己的日誌分析係統 282
20.1　概述 282
20.2　規劃 282
20.2.1　角色和職責 283
20.2.2　資源 284
20.2.3　目標 284
20.2.4　選擇日誌記錄的係統和設備 285
20.3　軟件選擇 285
20.3.1　開源軟件 285
20.3.2　商業化軟件 286
20.4　策略定義 287
20.4.1　日誌記錄策略 287
20.4.2　日誌文件輪轉 288
20.4.3　日誌數據收集 288
20.4.4　留存/存儲 288
20.4.5　響應 289
20.5　架構 289
20.5.1　基本模型 289
20.5.2　日誌服務器和日誌收集器 290
20.5.3　日誌服務器和具備長期存儲的日誌收集器 290
20.5.4　分布式部署 290
20.6　擴展 291
20.7　小結 291
第21章　雲日誌 292
21.1　概述 292
21.2　雲計算 293
21.2.1　服務交付模型 293
21.2.2　雲部署模型 294
21.2.3　雲基礎設施特性 295
21.2.4　標準？我們不需要討厭的標準 295
21.3　雲日誌 296
21.4　監管、依從性和安全問題 300
21.5　雲中的大數據 301
21.6　雲中的siem 303
21.7　雲日誌的優缺點 304
21.8　雲日誌提供者目錄 305
21.9　其他資源 305
21.10　小結 305
參考文獻 306
第22章　日誌標準和未來的趨勢 307
22.1　概述 307
22.2　從今天推知未來 308
22.2.1　更多的日誌數據 308
22.2.2　更多動力 309
22.2.3　更多分析 310
22.3　日誌的未來和標準 310
22.4　渴望的未來 314
22.5　小結 314
· · · · · · (收起)