golang walk dir

在golang开发领域，对于文件和目录的遍历是一个非常常见且重要的操作。通过遍历目录，我们可以获取目录下所有文件的相关信息，如名称、大小、修改时间等。本文将会介绍如何使用golang的walk dir函数来遍历目录，并展示一些实际应用中的例子。

文件目录遍历

golang提供了一个非常便捷的文件目录遍历函数，那就是walk dir函数。该函数位于path/filepath包中，通过该函数可以递归地遍历一个目录及其子目录下的所有文件。具体使用方法如下：

import (
    "fmt"
    "path/filepath"
)

func walkFunc(path string, info os.FileInfo, err error) error {
    if err != nil {
        return err
    }

    // 处理文件或目录
    fmt.Println(path)
    return nil
}

func main() {
    root := "/path/to/directory"
    err := filepath.Walk(root, walkFunc)
    if err != nil {
        fmt.Printf("Error walking the path %s: %v\n", root, err)
    }
}

在上述代码中，首先我们需要定义一个walkFunc函数作为文件遍历的回调函数，该函数将会在遍历每个文件或目录时被调用。在walkFunc函数内部，我们可以针对每个文件或目录进行自定义操作，例如打印其路径、获取其属性等。

筛选特定文件类型

有时候我们只想获取特定类型的文件，例如只想获取所有的文本文件。在golang中，可以使用filepath包提供的一些函数来做到这一点。

import (
    "fmt"
    "path/filepath"
    "strings"
)

func walkFunc(path string, info os.FileInfo, err error) error {
    if err != nil {
        return err
    }

    // 筛选文本文件
    ext := strings.ToLower(filepath.Ext(path))
    if ext == ".txt" {
        fmt.Println(path)
    }

    return nil
}

在上述代码中，我们通过使用filepath.Ext函数获取文件的后缀名，并将其转换为小写字母。然后，我们可以根据需要来匹配特定的后缀名，例如".txt"代表文本文件。如果文件的后缀名匹配我们的条件，就可以将其路径打印出来或进行其他操作。

并发遍历

通过并发遍历目录，我们可以大幅度提升文件遍历的效率。golang中的goroutine和channel结合使用，非常适合处理并发任务。下面是一个使用并发遍历目录的示例：

import (
    "fmt"
    "os"
    "path/filepath"
)

func main() {
    root := "/path/to/directory"
    var files []string

    fileChan := make(chan string)
    done := make(chan bool)

    // 并发遍历目录
    go func() {
        filepath.Walk(root, func(path string, info os.FileInfo, err error) error {
            if !info.IsDir() {
                fileChan <- path
            }
            return nil
        })

        close(fileChan)
    }()

    // 收集文件路径
    go func() {
        for file := range fileChan {
            files = append(files, file)
        }

        done <- true
    }()

    <-done

    // 输出文件列表
    for _, file := range files {
        fmt.Println(file)
    }
}

在上述代码中，我们使用了两个goroutine。第一个goroutine主要负责并发地遍历目录，并将文件路径发送到fileChan通道中。第二个goroutine负责接收fileChan通道中的文件路径，并将其收集到files切片中。

通过并发遍历目录，我们可以充分利用CPU和I/O资源，提升文件遍历的速度和效率。