PHP(parse_url) VS Golang(url.Parse)の挙動の違い!

PHP(parse_url) VS Golang(url.Parse)の挙動の違い!

はじめまして。塚本です。

とあるシステムを、PHPからGolangにマイグレーションした時に

幾つかやらかしたので、忘れない様にメモっときます。

PHP(parse_url)

php -r “echo var_dump(parse_url(‘http://usr:pss@example.com:81/mypath/myfile.html?a=b&b[]=2&b[]=3#myfragment'));"
array(8) {
[“scheme”]=> string(4) “http”
[“host”]=> string(11) “example.com”
[“port”]=> int(81)
[“user”]=> string(3) “usr”
[“pass”]=> string(3) “pss”
[“path”]=> string(19) “/mypath/myfile.html”
[“query”]=> string(15) “a=b&b[]=2&b[]=3”
[“fragment”]=> string(10) “myfragment”
}
https://www.php.net/manual/ja/function.parse-url.php

Golang(url.Parse)

u, _ := url.Parse("http://usr:pss@example.com:81/mypath/myfile.html?a=b&b[]=2&b[]=3#myfragment")
fmt.Printf("%v", u.Scheme) // outPut -> http
fmt.Printf("%v", u.Opaque) // outPut -> ""
fmt.Printf("%v", u.User) // outPut -> usr:pss
fmt.Printf("%v", u.Host) // outPut -> example.com:81
fmt.Printf("%v", u.Path) // outPut -> /mypath/myfile.html
fmt.Printf("%v", u.RawPath) // outPut -> ""
fmt.Printf("%v", u.ForceQuery) // outPut -> false
fmt.Printf("%v", u.RawQuery) // outPut -> a=b&b[]=2&b[]=3
fmt.Printf("%v", u.Fragment) // outPut -> myfragment

URL構造体定義

https://golang.org/src/net/url/url.go?s=9835:10351#L346

URLをそれぞれの要素に分解してくれます。

ここまでは想定通り。

検証済みだったのでこれで実装。

後で問題となったのは、pathの一部がURLエンコードされている場合。

今思うと、APIしっかり読んでおけばよかった・・・

PHP(parse_url)

php -r "echo var_dump(parse_url('http://www.sample.com/sample/test-%e3%83%86%e3%82%b9%e3%83%88/index.html'));"
array(3) {
["scheme"]=> string(4) "http"
["host"]=> string(14) "www.sample.com"
["path"]=> string(51) "/sample/test-%e3%83%86%e3%82%b9%e3%83%88/index.html"
}

pathに格納されている値は、URLエンコードされた値

Golang(url.Parse)

u, _ := url.Parse("http://usr:pss@example.com:81/mypath/myfile.html?a=b&b[]=2&b[]=3#myfragment")
fmt.Printf("%v", u.Scheme) // outPut -> http
fmt.Printf("%v", u.Opaque) // outPut -> ""
fmt.Printf("%v", u.User) // outPut -> ""
fmt.Printf("%v", u.Host) // outPut -> www.sample.com
fmt.Printf("%v", u.Path) // outPut -> /sample/test-テスト/index.html
fmt.Printf("%v", u.RawPath) // outPut -> /sample/test-%e3%83%86%e3%82%b9%e3%83%88/index.html
fmt.Printf("%v", u.ForceQuery) // outPut -> false
fmt.Printf("%v", u.RawQuery) // outPut -> 
fmt.Printf("%v", u.Fragment) // outPut -> 

Pathの値はURLデコードされてる・・・

そしてRawPathにも値が設定されていて、こっちはURLエンコードされている元の値が!

url.setPathでやってました。正確にはエスケープした文字列とエスケープしない文字列を設定してます。

// setPath sets the Path and RawPath fields of the URL based on the provided
// escaped path p. It maintains the invariant that RawPath is only specified
// when it differs from the default encoding of the path.
// For example:
// - setPath("/foo/bar")   will set Path="/foo/bar" and RawPath=""
// - setPath("/foo%2fbar") will set Path="/foo/bar" and RawPath="/foo%2fbar"
// setPath will return an error only if the provided path contains an invalid
// escaping.
func (u *URL) setPath(p string) error {
path, err := unescape(p, encodePath)
if err != nil {
return err
}
u.Path = path
if escp := escape(path, encodePath); p == escp {
// Default encoding is fine.
u.RawPath = ""
} else {
u.RawPath = p
}
return nil
}
https://golang.org/src/net/url/url.go?s=19478:19515#L663

プログラム的には正しい挙動なので、テストケース漏れですね。

改めてマイグレーションの厳しさを知った43才の夏でした。