Squid中文权威指南

Size: px

Start display at page:

Download "Squid中文权威指南"

累顾
6 years ago
Views:

1 Squid 中文权威指南 ( 第 16 章 ) 译者序 : 本人在工作中维护着数台 Squid 服务器, 多次参阅 Duane Wessels( 他也是 Squid 的创始人 ) 的这本书, 原书名是 "Squid: The Definitive Guide", 由 O'Reilly 出版我在业余时间把它翻译成中文, 希望对中文 Squid 用户有所帮助对普通的单位上网用户,Squid 可充当代理服务器 ; 而对 Sina,NetEase 这样的大型站点,Squid 又充当 WEB 加速器这两个角色它都扮演得异常优秀窗外繁星点点, 开源的世界亦如这星空般美丽, 而 Squid 是其中耀眼的一颗星对本译版有任何问题, 请跟我联系, 我的是 :yonghua_peng@yahoo.com.cn 彭勇华

2 目录第 16 章调试和故障处理一些通用问题 "Failed to make swap directory" "Address already in use" "Could not determine fully qualified hostname" "DNS name lookup tests failed" "Illegal character in hostname" "Running out of filedescriptors" "icmprecv: Connection refused" 在运行一段时间后,Squid 变慢了调试访问控制通过 cache.log 进行调试 Coredump, 断点, 和堆栈跟踪不能找到 core 文件? 重现问题报告 Bug...17 译后序...19 Squid 中文权威指南 1

3 第 16 章调试和故障处理 16.1 一些通用问题在讨论通用 debug 前, 我先提起一些经常发生的问题 "Failed to make swap directory" Failed to make swap directory /var/spool/cache: (13) Permission denied 这点发生在你运行 squid -z, 并且 squid 的用户 ID 没有对 /var/spool 目录的写权限的时候记住假如以 root 来启动 squid, 并且没有增加 cache_effective_user 行, 那么 squid 默认以 nobody 用户运行解决方法很简单 : # chown nobody:nobody /var/spool "Address already in use" commbind: Cannot bind socket FD 10 to *:3128: Address already in use 这个消息出现在 bind() 系统调用失败时, 因为请求端口已经被其他应用程序所打开通常, 若已有一个 squid 在运行, 而又试图启动第 2 个 squid 实例, 就会发生这种情况假如你见到这个错误消息, 请使用 ps 来观察是否 squid 已经在运行 Squid 使用 SO_REUSEADDR socket 选项, 以便 bind() 调用总能成功, 即使仍有一些残余的 socket 位于 TIME_WAIT 状态若该消息出现, 尽管 squid 没有在运行, 但你的操作系统可能在处理这个问题上有 bug 重启操作系统是解决问题的一个方法另一个可能性是端口 ( 例如 3128) 当前已被其他应用程序使用假如你怀疑这点, 就可使用 lsof 程序来发现哪个应用正在该端口上侦听 FreeBSD 用户能使用 sockstat 代替 "Could not determine fully qualified hostname" FATAL: Could not determine fully qualified hostname. Please set 'visible_hostname' 法 : 假如 squid 不能识别它自己的完整可验证域名, 就会报这个错如下是 squid 使用的算 1) 假如你将 squid 的 HTTP 端口绑定在指定的接口地址上,squid 试图对该地址执行反向 DNS 查询假如成功, 查询答案就被用上 Squid 中文权威指南 2

4 2) Squid 调用 gethostname( ) 函数, 然后使用 gethostbyname( ) 函数, 试着解析其 IP 地址假如成功,squid 使用后者函数返回的官方主机名串假如以上 2 项技术都不能工作,squid 以前面提到的致命错误消息退出在该情形下, 必须使用 visible_hostname 指令来告诉 squid 它的主机名例如 : visible_hostname my.host.name "DNS name lookup tests failed" 默认情况下,squid 在启动前执行一些 DNS 查询这点确保你的 DNS 服务器可到达, 并且运行正确假如测试失败, 可在 cache.log 或 syslog 里见到如下消息 : FATAL: ipcache_init: DNS name lookup tests failed 假如你在内网里使用 squid,squid 可能不能查询到它的标准主机名列表可使用 dns_testnames 指令来指定你自己的主机名只要接受到响应,squid 就会认为 DNS 测试成功假如你想完全跳过 DNS 测试, 简单的在启动 squid 时, 使用 -D 命令行选项 : % squid -D "Illegal character in hostname" urlparse: Illegal character in hostname 'super_bikes.tripod.com' 默认情况下,squid 检查 URL 的主机名部分的字符, 假如它发现了非标准的字符,squid 会抱怨参考 RFC 1034 和 1035, 名字必须由字母 A-Z, 数字 0-9, 以及短横线 (-) 组成下划线 (_) 是最有问题的字符之一 Squid 验证主机名是因为, 在某些情形下,DNS 对畸形字符的解析会很困难例如 : % host super_bikes.tripod.com super_bikes.tripod.com has address % ping super_bikes.tripod.com ping: cannot resolve super_bikes.tripod.com: Unknown server error Squid 事先检查主机名, 这好过于以后返回 Unknown server error 消息然后它会告诉用户主机名包含畸形字符某些 DNS 解析器确实能处理下划线和其他非标准字符假如你想让 squid 不检查主机 Squid 中文权威指南 3

5 名, 请在运行./configure 时, 使用 disable-hostname-checks 选项假如你允许下划线作为唯一的例外, 那么使用 enable-underscores 选项 "Running out of filedescriptors" WARNING! Your cache is running out of filedescriptors 上述消息出现在 squid 用完了所有可用文件描述符时假如这点发生在正常条件下, 就有必要增加内核的文件描述符限制, 并且重新编译 squid 请见章假如 squid 成为了拒绝服务攻击的目标, 那也会见到这条消息某些人可能有意或无意的, 同时对 squid 发送成百上千条请求在这种情形下, 可以增加一条包过滤规则, 阻止来自恶意地址的 TCP 进入连接假如攻击是分布式的, 或使用假冒源地址, 就很难阻止它们转发循环 ( 见 10.2 章 ) 也可能耗尽 squid 的所有文件描述符, 但仅仅发生在 squid 不能检测到死循环时 Via 头部包含了某个请求遍历过的所有代理的主机名 squid 在头部里查找它自己的主机名, 假如发现了, 就报告这个循环假如因为某些理由,Via 头部从外出或进入 HTTP 请求里过滤掉了,squid 就不能检测到循环在该情形下, 所有文件描述符被循环遍历 squid 的同一请求迅速耗完 "icmprecv: Connection refused" 假如 pinger 程序没有正确的安装, 可见到下列消息 : icmprecv: recv: (61) Connection refused 不过看起来更象是因为没有打开 ICMP socket 的权限,pinger 立刻退出了因为该进程未在运行, 当 squid 试图与它会话时, 会接受到 I/O 错误为了解决该问题, 请到源代码目录以 root 运行 : # make install-pinger 假如成功, 你可见到 pinger 程序有下列文件属主和许可设置 : # ls -l /usr/local/squid/libexec/pinger -rws--x--x 1 root squid Sep 16 19:58 /usr/local/squid/libexec/pinger 在运行一段时间后,Squid 变慢了看起来更象 squid 与其他进程, 或与它自己, 在竞争系统中的内存当 squid 进程的内存不再充足时, 操作系统被迫从交换空间进行内存读写这对 squid 的性能有强烈影响 Squid 中文权威指南 4

6 为了证实这个想法, 请使用 top 和 ps 等工具检查 squid 的进程大小也检查 squid 自己的页面错误计数器, 见章的描述一旦你已确认内存耗费是问题所在, 请执行下列步骤来减少 squid 的内存使用 : 1. 减少 cache_mem 值, 见附录 B 2. 关掉内存池, 用该选项 : memory_pools off 3. 通过降低一个或多个 cache 目录的 size, 减少磁盘 cache 大小调试访问控制假如访问控制不能正确工作, 如下是一些有用帮助编辑 squid.conf 文件, 设置 debug_options 行如下 : debug_options ALL,1 33,2 然后, 重配置 squid: % squid -k reconfigure 现在, 对每个客户端请求以及每个响应,squid 都写一条消息到 cache.log 该消息包含了请求方式,URI, 是否请求 / 响应被允许或拒绝, 以及与之匹配的最后 ACL 的名字例如 : 2003/09/29 20:22:05 The request GET is ALLOWED, because it matched 'localhost' 2003/09/29 20:22:05 The reply for GET is ALLOWED, because it matched 'all' 知道 ACL 的名字, 并非总能知道相应的 http_access 行, 但也相当接近了假如必要, 可以复制 acl 行, 并给予它们唯一的名字, 以便给定的 ACL 名字仅仅出现在一个 http_access 规则里 16.2 通过 cache.log 进行调试从 13.1 章已了解到,cache.log 包含了不同的操作消息,squid 认为这些消息足够重要, 从而告诉了你我们也将这些作为 debug 消息考虑可以使用 debug_options 指令来控制出现在 cache.log 里的消息的冗长度通过增加 debug 等级, 可以见到更详细的消息, 有助于 Squid 中文权威指南 5

7 理解 squid 正在做什么例如 : debug_options ALL,1 11,3 20,3 在 squid 源代码里的每个 debug 消息有 2 个数字特征 :1 个节和 1 个等级节范围从 0 到 100, 等级范围从 0 到 10 通常来说, 节号对应着源代码的组成成分换句话说, 在单一源文件里的所有消息, 有相同的节号在某些情形下, 多个文件使用同一 debug 节, 这意味着某个源文件变得太大, 从而被拆分成多个小块每个源文件的顶部有一行, 用于指示 debug 节它看起来如此 : * DEBUG: section 9 File Transfer Protocol (FTP) 我不指望你通过查看源文件来查找节号, 所有相关信息定义在表 16-1 里 Table Debugging section numbers for the debug_options directive Number Description Source file(s) 0 Client Database client_db.c 1 Startup and Main Loop main.c 2 Unlink Daemon unlinkd.c 3 Configuration File Parsing cache_cf.c 4 Error Generation errorpage.c 5 Socket Functions comm.c 5 Socket Functions comm_select.c 6 Disk I/O Routines disk.c 7 Multicast multicast.c 8 Swap File Bitmap filemap.c 9 File Transfer Protocol (FTP) ftp.c 10 Gopher gopher.c 11 Hypertext Transfer Protocol (HTTP) http.c 12 Internet Cache Protocol icp_v2.c 12 Internet Cache Protocol icp_v3.c 13 High Level Memory Pool Management mem.c Squid 中文权威指南 6

8 Table Debugging section numbers for the debug_options directive Number Description Source file(s) 14 IP Cache ipcache.c 15 Neighbor Routines neighbors.c 16 Cache Manager Objects cache_manager.c 17 Request Forwarding forward.c 18 Cache Manager Statistics stat.c 19 Store Memory Primitives stmem.c 20 Storage Manager store.c Storage Manager Client-Side Interface Storage Manager Heap-Based Replacement Storage Manager Logging Functions Storage Manager MD5 Cache Keys Storage Manager Swapfile Metadata Storage Manager Swapin Functions Storage Manager Swapout Functions store_client.c repl/heap/store_heap_replacement.c store_log.c store_key_md5.c store_swapmeta.c store_swapin.c store_swapout.c 20 Store Rebuild Routines store_rebuild.c 21 Misc Functions tools.c 22 Refresh Calculation refresh.c 23 URL Parsing url.c 24 WAIS Relay wais.c 25 MIME Parsing mime.c 26 Secure Sockets Layer Proxy ssl.c 27 Cache Announcer send-announce.c 28 Access Control acl.c Squid 中文权威指南 7

9 Table Debugging section numbers for the debug_options directive Number Description Source file(s) 29 Authenticator auth/basic/auth_basic.c 29 Authenticator auth/digest/auth_digest.c 29 Authenticator authenticate.c 29 NTLM Authenticator auth/ntlm/auth_ntlm.c 30 Ident (RFC 1413) ident.c 31 Hypertext Caching Protocol htcp.c 32 Asynchronous Disk I/O fs/aufs/async_io.c 33 Client-Side Routines client_side.c 34 Dnsserver Interface dns.c 35 FQDN Cache fqdncache.c 37 ICMP Routines icmp.c 38 Network Measurement Database net_db.c 39 Cache Array Routing Protocol carp.c 40 Referer Logging referer.c 40 User-Agent Logging useragent.c 41 Event Processing event.c 42 ICMP Pinger Program pinger.c 43 AIOPS fs/aufs/aiops.c 44 Peer Selection Algorithm peer_select.c 45 Callback Data Registry cbdata.c 45 Callback Data Registry leakfinder.c 46 Access Log access_log.c 47 Store COSS Directory Routines fs/coss/store_dir_coss.c 47 Store Directory Routines fs/aufs/store_dir_aufs.c 47 Store Directory Routines fs/diskd/store_dir_diskd.c 47 Store Directory Routines fs/null/store_null.c Squid 中文权威指南 8

10 Table Debugging section numbers for the debug_options directive Number Description Source file(s) 47 Store Directory Routines fs/ufs/store_dir_ufs.c 47 Store Directory Routines store_dir.c 48 Persistent Connections pconn.c 49 SNMP Interface snmp_agent.c 49 SNMP Support snmp_core.c 50 Log File Handling logfile.c 51 File Descriptor Functions fd.c 52 URN Parsing urn.c 53 AS Number Handling asn.c 54 Interprocess Communication ipc.c 55 HTTP Header HttpHeader.c 56 HTTP Message Body HttpBody.c 57 HTTP Status-Line HttpStatusLine.c 58 HTTP Reply (Response) HttpReply.c Auto-Growing Memory Buffer with printf Packer: A Uniform Interface to Store Like Modules MemBuf.c Packer.c 61 Redirector redirect.c 62 Generic Histogram StatHist.c 63 Low Level Memory Pool Management MemPool.c 64 HTTP Range Header HttpHdrRange.c 65 HTTP Cache Control Header HttpHdrCc.c 66 HTTP Header Tools HttpHeaderTools.c 67 String String.c 68 HTTP Content-Range Header HttpHdrContRange.c 69 HTTP Header: Extension Field HttpHdrExtField.c 70 Cache Digest CacheDigest.c Squid 中文权威指南 9

11 Table Debugging section numbers for the debug_options directive Number Description Source file(s) 71 Store Digest Manager store_digest.c 72 Peer Digest Routines peer_digest.c 73 HTTP Request HttpRequest.c 74 HTTP Message HttpMsg.c 75 WHOIS Protocol whois.c 76 Internal Squid Object handling internal.c 77 Delay Pools delay_pools.c DNS Lookups; interacts with lib/rfc1035.c Squid-Side DISKD I/O Functions Storage Manager COSS Interface Storage Manager UFS Interface dns_internal.c fs/diskd/store_io_diskd.c fs/coss/store_io_coss.c fs/ufs/store_io_ufs.c 80 WCCP Support wccp.c 82 External ACL external_acl.c 83 SSL Accelerator Support ssl_support.c 84 Helper Process Maintenance helper.c debug 等级这样分配 : 重要消息有较低值, 非重要消息有较高值 0 等级是非常重要的消息,10 等级是相对不紧要的消息另外, 关于等级其实并没有严格的向导或要求开发者通常自由选择适应的 debug 等级 debug_options 指令决定哪个消息出现在 cache.log, 它的语法是 : debug_options section,level section,level... 默认设置是 ALL,1, 这意味着 squid 会将所有等级是 0 或 1 的 debug 消息打印出来假如希望 cache.log 里出现更少的 debug 消息, 可设置 debug_options 为 ALL,0 假如想观察某个组件的其他 debug 信息, 简单的将相应的节号和等级增加到 debug_options 列表的末端例如, 如下行对 FTP 服务端代码增加了等级 5 的 debug: Squid 中文权威指南 10

12 debug_options ALL,1 9,5 如同其他配置指令一样, 可以改变 debug_options, 然后给 squid 发送重置信号 : % squid -k reconfigure 注意 debug_options 参数是按顺序处理的, 后来的值会覆盖先前的值假如使用 ALL 关键字, 这点尤其要注意考虑如下示例 : debug_options 9,5 20,9 4,2 ALL,1 级为 1 在该情形下, 最后的值覆盖了所有先前的设置, 因为 ALL,1 对所有节设置了 debug 等选择合适的 debug 节号和等级有时非常困难, 尤其是对 squid 新手而言许多更详细的 debug 消息仅对 squid 开发者和熟悉源代码的用户有意义无经验的 squid 用户会发现许多 debug 消息无意义和不可理解进一步的说, 假如 squid 相对忙的话, 你可能对某个特殊请求或事件进行独立 debug 有困难假如你能一次用一个请求来测试 squid, 那么高的 debug 等级通常更有用若以高 debug 等级来运行 squid 较长时间, 需要特别谨慎假如 squid 繁忙,cache.log 增长非常快, 并可能最终耗尽它的分区的剩余空间假如这点发生,squid 以致命消息退出另一个关注点是性能可能下降明显因为有大量的 debug 消息,squid 要耗费许多 CPU 资源来格式化和打印字符串将所有 debug 消息写往 cache.log, 也浪费了大量的磁盘带宽 16.3 Coredump, 断点, 和堆栈跟踪假如不幸,squid 可能在运行时遭遇致命错误这类型的错误来自 3 个风格 : 断点, 总线错误, 和异常分片断点是源代码里的正常检测它是一个工具, 被开发者用来确认在处理某事情前, 相应的条件总为真假如条件为假, 程序退出并创建一个 core 文件, 以便开发者能分析形势如下是个典型的示例 : int some_array[100]; void some_func(int idx) {... assert(idx < 100); some_array[idx]++;... Squid 中文权威指南 11

13 } 这里, 断点确保数组索引的值位于数组范围内假如去访问大于或等于 100 的数组元素, 就会遇到错误假如不知何故,idx 的值不小于 100, 程序运行时会打印如下消息 : assertion failed: filename.c:123: "idx < 100" 假如这点发生在 squid 上, 就可在 cache.log 里见到 "assertion failed" 消息另外, 操作系统会创建一个 core 文件, 这对事后分析有用在本节结尾, 我会解释如何去处理 core 文件总线错误是 : 由于处理器检测到其总线上的异常条件, 会引发机器语言指令执行时致命失败当处理器试图操作非连续的内存地址时, 通常会发生这种错误在 64 位处理器系统上可能更容易见到总线错误, 例如 Alpha 和某些 SPARC CPU 幸运的是, 它们容易修复异常分片错误不幸的更常见, 且有时难以修复 SEGV 通常发生在进程试图访问无效内存区域时 ( 可能是个 NULL 指针, 或超出进程空间之外的内存地址 ) 当 bug 原因和 SEGV 影响在不同时间呈现时, 它们特别难于捕获到 Squid 默认捕获总线错误和异常分片, 当它们发生时,squid 试图执行一个 clean shutdown ( 清理关闭 ) 可在 cache.log 里见到类似的语句 : FATAL: Received Bus Error...dying. 2003/09/29 23:18:01 storedirwritecleanlogs: Starting... 大多数情形下,squid 能够写 swap.state 文件的 clean 版本在退出前,squid 调用 abort() 函数来创建 core 文件 core 文件可以帮助你或其他开发者来捕获和修复 bug 在错误发生时马上创建 core 文件, 而不是先调用 clean shutdown 过程, 这样更利于调试使用 -C 命令行选项, 可以告诉 squid 不去捕获总线错误和异常分片 : % squid -C... 注意某些操作系统使用文件名 core, 而另外一些优先考虑进程名 ( 例如 squid.core) 一旦找到 core 文件, 请使用调试器来进行堆栈跟踪 gdb 是 GNU 调试器 --GNU C 编译器的配套工具假如没有 gdb, 可试着运行 dbx 或 adb 代替如下显示如何使用 gdb 来进行堆栈跟踪 : % gdb /usr/local/squid/sbin/squid /path/to/squid.core... Core was generated by 'squid'. Program terminated with signal 6, Abort trap.... Squid 中文权威指南 12

14 然后, 敲入 where 来打印堆栈轨迹 : (gdb) where #0 0x28168b54 in kill ( ) from /usr/lib/libc.so.4 #1 0x281aa0ce in abort ( ) from /usr/lib/libc.so.4 #2 0x80a2316 in death (sig=10) at tools.c:301 #3 0xbfbfffac in?? ( ) #4 0x80abe0a in storediskdsend (mtype=4, sd=0x82101e0, id= , sio=0x9e90a10, size=4096, offset=-1, shm_offset=0) at diskd/store_io_diskd.c:485 #5 0x80ab726 in storediskdwrite (SD=0x82101e0, sio=0x9e90a10, buf=0x13e94000 "...", size=4096, offset=-1, free_func=0) at diskd/store_io_diskd.c:251 #6 0x809d2fb in storewrite (sio=0x9e90a10, buf=0x13e94000 "...", size=4096, offset=-1, free_func=0) at store_io.c:89 #7 0x80a1c2d in storeswapout (e=0xc5a7800) at store_swapout.c:259 #8 0x809b667 in storeappend (e=0xc5a7800, buf=0x810f9a0 "...", len=57344) at store.c:533 #9 0x807873b in httpreadreply (fd=134, data=0xc343590) at http.c:642 #10 0x806492f in comm_poll (msec=10) at comm_select.c:445 #11 0x in main (argc=2, argv=0xbfbffa8c) at main.c:742 #12 0x804a465 in _start ( ) 你可见到, 堆栈轨迹打印了每个函数的名字, 它的参数, 以及源代码文件名和行数当捕获 bug 时, 这些信息特别有用然而在某些情形下, 这些还不够可能要求你在调试器里 Squid 中文权威指南 13

15 执行其他命令, 例如打印来自某个函数的变量的值 : (gdb) frame 4 #4 0x80abe0a in storediskdsend (mtype=4, sd=0x82101e0, id= , sio=0x9e90a10, size=4096, offset=-1, shm_offset=0) at diskd/store_io_diskd.c: x = msgsnd(diskdinfo->smsgid, &M, msg_snd_rcv_sz, IPC_NOWAIT); (gdb) set print pretty (gdb) print M $2 = { mtype = 4, id = , seq_no = , callback_data = 0x9e90a10, size = 4096, offset = -1, status = -1, shm_offset = 0 } 在报告了某个 bug 后, 请保留 core 文件一些天, 可能还需要从它获取其他信息不能找到 core 文件? core 文件写在进程的当前目录 squid 在启动时默认不改变其当前目录这样你的 core 文件 ( 如果有的话 ), 会写在启动 squid 的目录假如文件系统没有足够的自由空间, 或进程属主没有对该目录的写权限, 就无法产生 core 文件可以使用 coredump_dir 指令来让 squid 使用指定的 coredump 目录 -- 位于其他地方的有充足自由空间和完全权限的目录进程资源限制也会阻止产生 core 文件进程限制参数之一是 coredump 文件的大小大部分操作系统默认设置这个值为 " 无限 " 在当前 shell 里使用 limits 或 ulimit 命令, 可以检查当前限制然而请注意, 你的 shell 的限制可能不同于 squid 的进程限制, 特别是当 squid 随系统启动而自动启动时假如怀疑进程限制阻止了 core 文件的产生, 试试这样 : csh% limit coredumpsize unlimited csh% squid -NCd1 在 FreeBSD 上, 某个 sysctl 参数控制了操作系统对调用了 setuid() 或 setgid() 函数的进程, 是否产生 core 文件假如以 root 启动,squid 会用到这些函数这样为了得到 coredump, 必须告诉内核创建 core 文件, 用这个命令 : Squid 中文权威指南 14

16 # sysctl kern.sugid_coredump=1 请见 sysctl.conf 的 manpage, 关于在系统启动时如何自动设置变量的信息 16.4 重现问题有时候可能遇到这样的问题 : 某个请求, 或原始服务器看起来不能与 squid 协调工作可以使用下面的技术来确定问题在于 squid, 客户端, 或原始服务器技巧就是捕获 HTTP 请求, 然后用不同的方法响应它, 直到你验证了问题捕获 HTTP 请求意味着获取除了 URL 外的更多信息, 包括请求方式,HTTP 版本号, 和所有请求头部捕获请求的一个方法是, 短期激活 squid 的完整 debug 模式在 squid 主机上, 敲入 : % squid -kdebug 然后, 到 web 浏览器上发布请求 squid 几乎会立刻接受到请求在若干秒后, 回到 squid 主机, 并发布同样的命令 : % squid -kdebug 现在 cache.log 文件包含了上述客户端的请求假如 squid 繁忙,cache.log 会包含大量的请求, 所以你必须查找它它看起来如下 : 2003/09/29 10:37:40 parsehttprequest: Method is 'GET' 2003/09/29 10:37:40 parsehttprequest: URI is ' 2003/09/29 10:37:40 parsehttprequest: Client HTTP version /09/29 10:37:40 parsehttprequest: req_hdr = { User-Agent: Mozilla/5.0 (compatible; Konqueror/3) Pragma: no-cache Cache-control: no-cache Accept: text/*, image/jpeg, image/png, image/*, */* Accept-Encoding: x-gzip, gzip, identity Accept-Charset: iso , utf-8;q=0.5, *;q=0.5 Accept-Language: en Host: squidbook.org 注意 squid 把首行元素分开打印, 必须手工组合它们如下 : GET HTTP/1.1 捕获完整请求的另一个方法是使用工具例如 netcat 或 socket ( ) 启动 socket 程序侦听在某个端口, 然后配置浏览器使用该 Squid 中文权威指南 15

17 端口作为代理地址当再次发起请求时,socket 打印出 HTTP 请求 : % socket -s 8080 GET HTTP/1.1 User-Agent: Mozilla/5.0 (compatible; Konqueror/3) Pragma: no-cache Cache-control: no-cache Accept: text/*, image/jpeg, image/png, image/*, */* Accept-Encoding: x-gzip, gzip, identity Accept-Charset: iso , utf-8;q=0.5, *;q=0.5 Accept-Language: en Host: squidbook.org 最后, 还可以使用网络包分析工具例如 tcpdump 或 ethereal 使用 tcpdump 捕获到一些包后, 可以使用 tcpshow 来查看它们 : # tcpdump -w tcpdump.log -c 10 -s 1500 port 80 # tcpshow -nohostnames -noportnames < tcpdump.log less... Packet 4 TIME: 08:39: ( ) LINK: 00:90:27:16:AA:75 -> 00:00:24:C0:0D:25 type=ip IP: > hlen=20 TOS=00 dgramlen=304 id=4b29 MF/DF=0/1 frag=0 TTL=64 proto=tcp cksum=15dc TCP: port > 80 seq= ack= hlen=32 (data=252) UAPRSF= wnd=57920 cksum=eb38 urg=0 DATA: GET / HTTP/1.0. Host: Accept: text/html, text/plain, application/pdf, application/ postscript, text/sgml, */*;q=0.01. Accept-Encoding: gzip, compress. Accept-Language: en. Negotiate: trans. User-Agent: Lynx/2.8.1rel.2 libwww-fm/ Squid 中文权威指南 16

18 注意 tcpshow 按数据里的新行字符为周期来进行打印一旦捕获到了某个请求, 就将它存到文件然后可以使用 netcat 或 socket 来让它重新通过 squid: % socket squidhost 3128 < request less 假如响应看起来正常, 问题可能在于用户代理否则, 可以改变不同事情来孤立问题例如, 假如你看到一些古怪的 HTTP 头部, 那就从请求里删除它们, 然后再试一次让请求直接到达原始服务器, 而不是经过 squid, 这样做也可调试方法就是从请求里删除并将请求发送到原始服务器 : % cat request GET / HTTP/1.1 User-Agent: Mozilla/5.0 (compatible; Konqueror/3) Pragma: no-cache Cache-control: no-cache Accept: text/*, image/jpeg, image/png, image/*, */* Accept-Encoding: x-gzip, gzip, identity Accept-Charset: iso , utf-8;q=0.5, *;q=0.5 Accept-Language: en Host: squidbook.org % socket squidbook.org 80 < request less 本书以这种方式使用 HTTP 时, 请参考 RFC 2616 和 Oreilly 的 Definitive Guide 这 16.5 报告 Bug 假如你的 squid 版本已经有几个月未更新了, 在报告 bug 前你应该更新它因为其他人可能也注意了同样的 bug, 并且它已被修复假如你发现了 squid 的合理 bug, 请将它填入到 squid 的 bug 跟踪数据库 : 它当前是个 "bugzilla" 数据库, 需要你创建一个帐号当 bug 被 squid 开发者处理了时, 你会接到更新通知假如你对报告 bug 很陌生, 请先花时间阅读 Simon Tatham 写的 "How to Report Bugs Effectively" ( ) 当报告 bug 时, 确认包含下列信息 : Squid 中文权威指南 17

19 1) Squid 版本号假如 bug 发生在不止一个版本上, 就也要写上其他版本号 2) 操作系统名字和版本 3) bug 每次都发生, 还是偶尔发生 4) 所发生事情的精确描述类似于 " 它不能工作 "," 请求失败 " 之类的语句, 本质上对 bug 修复者无用记得要非常详细 5) 对断点, 总线错误, 或异常分片的堆栈跟踪记住 squid 开发者通常是无报酬的义务劳动, 所以要有耐心严重 bug 比小问题享有更高的解决优先级 Squid 中文权威指南 18

20 译后序当译完本书最后一章时, 心头袭来深深的寂寞在计算机领域, 国内外技术水平差之甚远, 部分原因归咎于语言的差异某种技术在国外流行若干年后, 才有相应的中文文档出现没有文档, 技术人员无法起步 ; 而不规范的发行文档, 更是误导了一批又一批的初学者本书的作者 Duane Wessels 是位大师级的人物, 除了精湛的技术外, 他写的本书文笔通畅, 脉络清晰, 丝毫不晦涩若对研究 Squid 抱着严肃的态度, 那么请认真的拜读原著而我所能做的, 只是按照我自己的理解, 把原著译成中文好的软件只是解决了某一方面的问题, 而真正可贵的, 是开源的精神在开源的世界里, 可以体会到现实中所没有的无私与奉献想起陈玉莲演的小龙女, 和金轮法王有过这么一段对话 : 金轮法王 : 你能接住十招, 我就放过你们小龙女 : 试试看咯金轮法王 : 若接不住呢? 小龙女 : 接不住就接不住咯多年来让我记住的, 是陈玉莲这种不食人间烟火, 与世无争的神韵彭勇华 yonghua_peng@yahoo.com.cn 2005 年 10 月于广州 Squid 中文权威指南 19

Chapter #

Chapter # 第三章 TCP/IP 协议栈本章目标通过本章的学习, 您应该掌握以下内容 : 掌握 TCP/IP 分层模型掌握 IP 协议原理理解 OSI 和 TCP/IP 模型的区别和联系 TCP/IP 介绍主机主机 Internet TCP/IP 早期的协议族全球范围 TCP/IP 协议栈 7 6 5 4 3 应用层表示层会话层传输层网络层应用层主机到主机层 Internet 层 2 1 数据链路层