花名 : 君山真名 : 许令波博客 : 微博 :@ 淘宝君山邮箱 :xulingbo0201@163.com 简介 :2009 年毕业加入淘宝, 一直在做淘宝商品详情系统的团队做开发和

Size: px

Start display at page:

Download "花名 : 君山真名 : 许令波博客 :http://xulingbo.net 微博 :@ 淘宝君山邮箱 :xulingbo0201@163.com 简介 :2009 年毕业加入淘宝, 一直在做淘宝商品详情系统的团队做开发和"

狮俞
7 years ago
Views:

1 君山 GreenTeaJUG

花名 : 君山真名 : 许令波博客 :http://xulingbo.net 微博 :@ 淘宝君山邮箱 :xulingbo0201@163.

2 花名 : 君山真名 : 许令波博客 : 微博 :@ 淘宝君山邮箱 :xulingbo0201@163.com 简介 :2009 年毕业加入淘宝, 一直在做淘宝商品详情系统的团队做开发和性能优化方面的工作, 开发过一个 Sketch 模板引擎给 developerworks 投稿获得过最佳作者, 著有深入分析 Java Web 技术内幕一书

3 前端优化 assets 合并整合页面中 inline 的 js\css combo 合并 css js 文件 BigRender( 使用 textarea, 控制浏览器渲染节奏 ) 服务端优化将 iframe 改为 jsonp 调用建立异步系统 (JS 触发加载 ) Velocity 模板优化 (sketch 框架 ) 逐步去除 DB 依赖 ( 各个 C 走 Tair 缓存 ) 网络优化 TCP 初始拥塞窗口优化去除空格 TAB 压缩字符串, 减少页面大小静态化 CDN 化今年要做的事交易链路优化欢迎加入我们的团队

Velocity 模板优化 (sketch 框架 ) 逐步去除 DB 依赖 ( 各个 C 走 Tair 缓存 ) 网络优化 TCP 初始拥塞窗

4 1. 当前存在的问题 2. 解决问题的思路 3. 优化的原则和目标 4. 传统办法解决思路 5. 激进的解决问题的思路具体实例介绍和成果 6. 遇到的一些问题介绍 7. Q&A

5 发现模板方面的问题 1. Velocity 是动态解释性语言, 执行效率较差 2. 页面复杂, 反射调用非常多 3. CPU 压力较大, 压力测试时 CPU 基本都达到 80% 左右, 通过检测工具可以发现模板渲染占用了 60% 以上的 CPU 时间 4. 模版渲染占去大部分响应时间是前台系统的一个瓶颈, 模板渲染时产生很多临时对象, 对 JVM 的 GC 影响很大, 导致系统频繁 GC 5. 整个页面输出比较大, 平均在 80KB 左右, 大部分时间都在 out.print 页面模板中空白字符比较多, 浪费网络传输量

模版渲染占去大部分响应时间是前台系统的一个瓶颈, 模板渲染时产生很多临时对象, 对 JVM 的 GC 影响很大, 导致系

6 针对性解决问题 1. 将 Velocity 模板直接转成 Java 类去执行, 将 Velocity 语法转成 Java 语法 2. 将方法的反射调用转成直接 Java 原生方法调用 3. 减少页面大小, 删除空行等无效字符输出 4. 将页面中的字符转成字节输出减少编码转换

7 三角结构减少翻译的代价一步到位将变的转化为不变的对不变的做预处理

8 1. 试图减少代码量, 从而减少代码的执行时间 2. 减少临时对象, 降低内存开销 3. Velocity 静态化, 类型确定 4. 动态编译, 类似 JIT 技术

9 减少树的总节点数量 #set($one=-1) #set($pageid = "$!page.pageid") #set($pages = $tbstringutil.getint("$pageid")+$one) #set($offsets=$pages*($count+$rightcount)) 优化成 #set($offsets=($!page.pageid - 1)*($count + $rightcount)) 这样可以减少很多语法节点

10 减少树的总节点数量 $parent.getchildren().getson().getname() $parent.getchildren().getson().getage() 优化成 #set($son= $parent.getchildren().getson()) $son.getname() $son.getage() 这样可以减少方法的反射调用

11 1. 减少宏的调用, 因为每次调用都要都要 reload, 而 Velocity 针对 macros 的自动 reload, 采用了同步排他锁进行控制, 比较影响性能 2. 减少 vm 模板的检查频率, 设置 modificationcheckinterval 3. 页面 Cache 减少生成 JJTree 的频率 4. MapGetExecutor 改造, 用 clazz.isassignablefrom(map.class) 替代 Class [] interfaces = clazz.getinterfaces(); for (int i = 0 ; i < interfaces.length; i++) { if (interfaces[i].equals(map.class))

页面 Cache 减少生成 JJTree 的频率 4. MapGetExecutor 改造, 用 clazz.isassignablefrom(map.

12 1. vm 模板如何被转成 java 类 2. 方法调用的无反射优化 3. 字符输出改成字节输出

13 1. 如何将 Velocity 的语法转成 Java 语法 2. 如何构建 Java 的代码结构 3. 如何生成 Java 类 4. 如何编译 Java 类 5. 如何执行 Java 类 6. 出错处理 7. 如何和其他框架结合起来

14 仍然沿用 Velocity 中将一个 vm 模板解释成一棵 AST 语法树, 但是重新修改这棵树的渲染规则, 我们将重新定义每个语法节点生成对应的 Java 语法, 而不是渲染出结果在 SimpleNode 类中重新定义一个 generate 方法, 如下 : public Object generater(object data, Writer writer) throws IOException, ParseException { SketchCompilationContext context = (SketchCompilationContext) data; int i, k = jjtgetnumchildren(); for (i = 0; i < k; i++) { StringWriter spwriter = new StringWriter(); jjtgetchild(i).generater(data, spwriter); writer.write(spwriter.tostring()); } return data; }

ParseException { SketchCompilationContext context = (SketchCompilationContext) data; int i, k = jjtgetnumchildren(); for (i = 0; i < k;

15 #foreach ($i in [0..10]) #if ($i % 2 == 0) #set ($str = " 偶数 ") #else #set ($str = " 奇数 ") #end $i 是 $str #end

16 private Object _foreach_ _ (final PageContext pagecontext, final I _I) throws Exception { final ContextAdapter context = pagecontext.getcontext(); final PageWriter out = pagecontext.getout(); Iterator _it = _COLLE((_I.exampleDO == null? null : ((Mode) _I.exampleDO).getItemList())); int _VelocityCount = 1; while (_it.hasnext()) { Object _i = _it.next(); pagecontext.addforvarsdef("_i", _i); pagecontext.addforvarsdef("_velocitycount", _VelocityCount); out.write(_s0); if (EPUT.is(EPUT.eq(EPUT.mod(_i, 2), 0))) { context.put("str", " 偶数 "); out.write(_s0); } else { context.put("str", " 奇数 "); out.write(_s0); } out.write(_s0); out.write(_evtck(context, "$i", _i)); out.write(_s1); out.write(_evtck(context, "$str", context.get("str"))); out.write(_s2); _VelocityCount++; } return Boolean.TRUE; }

$hasnext()) { Object _i = _it.next(); pagecontext.addforvarsdef("_i", _i); pagecontext.addforvarsdef("_velocitycount", _VelocityCount); out.write(_s0); if (EPUT.is(EPUT.eq(EPUT.$

17 1. 大部分情况下 $exampledo.getitemlist() 方法调用这种调用类型都是确定的 2. 通过在模板渲染时跟踪变量 $exampledo 的 java 类型就可以将 $exampledo.getitemlist() 的反射调用转成原生的 java 方法调用如通过 _TRACE() 方法跟踪 exampledo 的执行 Iterator _it = _COLLE(_TRACE("", "_I.exampleDO", " ", context.get("exampledo"),"getitemlist", new Object[]{})); 最终直接转成 Iterator _it = _COLLE(( ExampleDO )(I.exampleDO).getItemList()));

getitemlist() 的反射调用转成原生的 java 方法调用如通过 _TRACE() 方法跟踪 exampledo 的执行 Iterator _it =

18 由于一个模板中一次执行并不能执行到所有的方法, 所以一次执行并不能将所有的方法调用转变成反射方式这种情况下就会多次生成模板对应的 Java 类及多次编译

19 1. 将模板中的静态字符串直接是 out.write(_s0) 输出, 这里的 _S0 是一个字节数组, 而 vm 模板中是字符串, 将字符串转成字节数组是在这个模板类初始化时完成的你可能有疑问, 为何将字符串转成字节数组来输出, 如果看过 Java 中文编码一章你就会知道, 字符的编码是非常耗时的, 如果我们将静态字符串提前编码好, 那么在最终写 Socket 流时就会省去这个编码时间, 从而提高执行效率从实际的测试来看, 这对提升性能很有帮助 2. 删除空格 tab 等无用字符串, 减少 java 系统往外突出的字节数

的你可能有疑问, 为何将字符串转成字节数组来输出, 如果看过 Java 中文编码一章你就会知道, 字符的编码是非常耗时的, 如

21 1. #foreach 难题 --- 重复定义变量 #foreach($i in $list) #foreach($i in $list) $i #end #end 2. #define 难题 --- 变量中的变量 #define( $hello ) Hello $who #end #set( $who = "World!") $hello 3. #break #stop 等

22 1. #foreach 难题 --- 重复定义变量 #foreach($i in $list) #foreach($i in $list) $i #end #end 2. #define 难题 --- 变量中的变量 #define( $hello ) Hello $who #end #set( $who = "World!") $hello 3. #break #stop 等

23 1. 必须能够重复能够渲染语法树 2. 确定方法中的参数变量类型 3. 方法反射调用改成正常的方法调用 : 如 $foo.var 改成 foo.getvar()/foo.get( var ) 4. 构建新的 classloader, 重新编译的模版类重复加载到 jvm 中 5. JavaC 编译器的限制

27 1. 模版的动静分离 2. 静态模版的 CDN 化 3. JS 渲染 orapache 渲染

28 一起交流

《C语言基础入门》课程教学大纲

《C语言基础入门》课程教学大纲 C 语言开发入门教程课程教学大纲课程编号 :201409210011 学分 :5 学分学时 :58 学时 ( 其中 : 讲课学时 :39 学时上机学时 :19 学时 ) 先修课程 : 计算机导论后续课程 :C++ 程序设计适用专业 : 信息及其计算机相关专业开课部门 : 计

花 名 : 君 山 真 名 : 许 令 波 博 客 : 微 博 :@ 淘 宝 君 山 邮 箱 :xulingbo0201@163.com 简 介 :2009 年 毕 业 加 入 淘 宝, 一 直 在 做 淘 宝 商 品 详 情 系 统 的 团 队 做 开 发 和

花名 : 君山真名 : 许令波博客 : 微博 :@ 淘宝君山邮箱 :xulingbo0201@163.com 简介 :2009 年毕业加入淘宝, 一直在做淘宝商品详情系统的团队做开发和