滴滴曹大:查看 Go 的代码优化过程

之前有人在某群里询问 Go 的编译器是怎么识别下面的代码始终为 false,并进行优化的:

package main
func main() {
    var a = 1
    if a != 1 {
        println("oh no")
    }
}

先说是不是,再说为什么。先看看他的结论对不对:

TEXT main.main(SB) /Users/xargin/test/com.go
  com.go:3              0x104ea70               c3                      RET
  .... 后面都是填充物

整个 main 函数的逻辑都被优化掉了,二进制文件中 main 函数什么都没干就直接 RET 了。说明在编译过程中,Go 的编译器确实会对这段无效代码进行优化。

之前有接触过 Go 的静态扫描工具的同学就问了,Go 编译器的这种优化我们能不能进行复用呢。把逻辑从编译器中抽出来,直接做个静态扫描工具来告诉你又写出了垃圾代码。

嗯,我们来看看到底行不行,首先需要简单理解 Go 的编译过程。

Go 从代码文本到可执行执行文件的编译过程大致为:

词法分析 ------------> 语法分析 ----------> 中间代码生成 ----------> 目标代码生成
        token stream            ast                    SSA           asm

当前开源社区的静态扫描工具,分析的对象都是 ast,因为 Go 的 compiler 接口是开放的,所以我们可以直接用 go/parser 、 go/ast 库来生成这个 ast。之后再调用 Walk 来遍历语法树,或者我们自己写一个遍历 ast 的流程也不麻烦。在遍历过程中,可以根据单句代码(比如有个东西叫 ineff assign),或者根据代码的上下文来给出一些建议和警示(比如一些什么 go vet、gosimple 啊之类的东西)。

从词法分析到语法分析一般被称为编译器的前端(frontend),而中间代码生成和目标代码生成则是编译器后端(backend)。

所以不管怎么说,想做静态扫描,就是在和 ast 打交道,即在编译器前端折腾。这里的问题是,Go 的编译器对前述代码的优化究竟是在编译过程的哪一步进行的呢?

获得代码的 ast 很简单:

package main
import (
  "go/ast"
  "go/parser"
  "go/token"
)
func main() {
    fset := token.NewFileSet()
    f, _ := parser.ParseFile(fset, "./demo.go", nil, parser.Mode(0))
    for _, d := range f.Decls {
        ast.Print(fset, d)
    }
}

输出 ast:

0  *ast.FuncDecl {
  .  Name: *ast.Ident {
  .  .  NamePos: ./com.go:3:6
  .  .  Name: "main"
  .  .  Obj: *ast.Object {
  .  .  .  Kind: func
  .  .  .  Name: "main"
  .  .  .  Decl: *(obj @ 0)
  .  .  }
  .  }
  .  Type: *ast.FuncType {
  .  .  Func: ./com.go:3:1
  .  .  Params: *ast.FieldList {
  .  .  .  Opening: ./com.go:3:10
  .  .  .  Closing: ./com.go:3:11
  .  .  }
  .  }
  .  Body: *ast.BlockStmt {
  .  .  Lbrace: ./com.go:3:13
  .  .  List: []ast.Stmt (len = 2) {
  .  .  .  0: *ast.DeclStmt {
  .  .  .  .  Decl: *ast.GenDecl {
  .  .  .  .  .  TokPos: ./com.go:4:2
  .  .  .  .  .  Tok: var
  .  .  .  .  .  Lparen: -
  .  .  .  .  .  Specs: []ast.Spec (len = 1) {
  .  .  .  .  .  .  0: *ast.ValueSpec {
  .  .  .  .  .  .  .  Names: []*ast.Ident (len = 1) {
  .  .  .  .  .  .  .  .  0: *ast.Ident {
  .  .  .  .  .  .  .  .  .  NamePos: ./com.go:4:6
  .  .  .  .  .  .  .  .  .  Name: "a"
  .  .  .  .  .  .  .  .  .  Obj: *ast.Object {
  .  .  .  .  .  .  .  .  .  .  Kind: var
  .  .  .  .  .  .  .  .  .  .  Name: "a"
  .  .  .  .  .  .  .  .  .  .  Decl: *(obj @ 26)
  .  .  .  .  .  .  .  .  .  .  Data: 0
  .  .  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  .  Values: []ast.Expr (len = 1) {
  .  .  .  .  .  .  .  .  0: *ast.BasicLit {
  .  .  .  .  .  .  .  .  .  ValuePos: ./com.go:4:10
  .  .  .  .  .  .  .  .  .  Kind: INT
  .  .  .  .  .  .  .  .  .  Value: "1"
  .  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  }
  .  .  .  .  .  }
  .  .  .  .  .  Rparen: -
  .  .  .  .  }
  .  .  .  }
  .  .  .  1: *ast.IfStmt {
  .  .  .  .  If: ./com.go:5:2
  .  .  .  .  Cond: *ast.BinaryExpr {
  .  .  .  .  .  X: *ast.Ident {
  .  .  .  .  .  .  NamePos: ./com.go:5:5
  .  .  .  .  .  .  Name: "a"
  .  .  .  .  .  .  Obj: *(obj @ 31)
  .  .  .  .  .  }
  .  .  .  .  .  OpPos: ./com.go:5:7
  .  .  .  .  .  Op: !=
  .  .  .  .  .  Y: *ast.BasicLit {
  .  .  .  .  .  .  ValuePos: ./com.go:5:10
  .  .  .  .  .  .  Kind: INT
  .  .  .  .  .  .  Value: "1"
  .  .  .  .  .  }
  .  .  .  .  }
  .  .  .  .  Body: *ast.BlockStmt {
  .  .  .  .  .  Lbrace: ./com.go:5:12
  .  .  .  .  .  List: []ast.Stmt (len = 1) {
  .  .  .  .  .  .  0: *ast.ExprStmt {
  .  .  .  .  .  .  .  X: *ast.CallExpr {
  .  .  .  .  .  .  .  .  Fun: *ast.Ident {
  .  .  .  .  .  .  .  .  .  NamePos: ./com.go:6:3
  .  .  .  .  .  .  .  .  .  Name: "println"
  .  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  .  .  Lparen: ./com.go:6:10
  .  .  .  .  .  .  .  .  Args: []ast.Expr (len = 1) {
  .  .  .  .  .  .  .  .  .  0: *ast.BasicLit {
  .  .  .  .  .  .  .  .  .  .  ValuePos: ./com.go:6:11
  .  .  .  .  .  .  .  .  .  .  Kind: STRING
  .  .  .  .  .  .  .  .  .  .  Value: ""oh no""
  .  .  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  .  .  Ellipsis: -
  .  .  .  .  .  .  .  .  Rparen: ./com.go:6:18
  .  .  .  .  .  .  .  }
  .  .  .  .  .  .  }
  .  .  .  .  .  }
  .  .  .  .  .  Rbrace: ./com.go:7:2
  .  .  .  .  }
  .  .  .  }
  .  .  }
  .  .  Rbrace: ./com.go:8:1
  .  }
  }

显然,到语法分析完毕之后,ast 中的 if 节点还活得好好的。只能看看后端部分了:

GOSSAFUNC=main go build com.go

deadcode

SSA 的多轮优化就是编译原理里常说的后端优化,这一步是 deadcode opt,顾名思义。

dump 过程中可能会有权限问题:

# runtime
: internal compiler error: 'main': open ssa.html: permission denied
Please file a bug report including a short program that triggers the error.
https://golang.org/issue/new

加个 sudo 就好。

既然 Go 是在编译后端进行的死代码消除,那么对于我们来说,想要复用编译器代码,并提前提示就不太方便了。从原理上来讲,我们仍然可以在遍历 ast 的时候存储一些常量、变量的值来完成前文中提出的需求。这就看你有没有兴趣去实现了。

4