利用Python或者Go搭建文件服务器，高效解决数据迁移难题

数据库驾驶舱 2024-03-23

背景：

在实际工作中，经常会遇到需要迁移数据的情况，比如将数据库、文件等从一个服务器迁移到另一个服务器。然而，由于某些限制（比如堡垒机），无法直接在两台服务器之间进行数据传输，导致需要先将数据下载到本地，再上传到目标服务器，这样操作会浪费大量时间和带宽资源。

解决方案：

为了提高数据迁移的效率，我们可以利用Python或者Go语言搭建一个简单而高效的文件服务器，实现直接从源服务器下载数据到目标服务器，无需中转到本地。

我们可以使用Python提供的SimpleHTTPServer
或者http.server
模块启动一个文件服务器，监听指定端口，将当前目录作为文件服务器的根目录，然后通过浏览器或者命令行工具（如wget）访问该服务器，下载所需文件。

# python2
python -m SimpleHTTPServer 8000
# python3
python -m http.server 8088

2. 我们也可以使用Go语言编写一个文件服务器程序，监听指定端口，将当前目录作为文件服务器的根目录，然后通过相应的命令将其编译为可执行文件，并上传至目标服务器，最后运行该可执行文件即可。

fileserver.go

package main


import (
    "fmt"
    "net/http"
    "os"
    "strconv"
    "net"
)


func main() {
    port := 8000 // 默认端口号


    // 检查命令行参数
    if len(os.Args) > 1 {
        portArg := os.Args[1]
        var err error
        // 是否为整数
        port, err = strconv.Atoi(portArg)
        if err != nil {
            fmt.Printf("不合法的端口号: %s\n", portArg)
            return
        }
    }


    // 获取当前工作目录作为服务器根目录
    dir, err := os.Getwd()
    if err != nil {
        fmt.Println("无法获取当前的工作目录:", err)
        return
    }


    // 创建一个FileServer处理程序
    handler := http.FileServer(http.Dir(dir))


    fmt.Printf("文件服务器启动目录是 %s , 端口号是 %d\n", dir, port)
    addrs, err := net.InterfaceAddrs()
    if err != nil {
        fmt.Printf("警告：当前服务器IP为空\n")
    }


    for _, address := range addrs {
        if ipnet, ok := address.(*net.IPNet); ok && !ipnet.IP.IsLoopback() {
            if ipnet.IP.To4() != nil {
                fmt.Printf("当前服务器的IP是: %s\n", ipnet.IP.String())
            }
        }
    }
    
    err = http.ListenAndServe(fmt.Sprintf(":%d", port), handler)
    if err != nil {
        fmt.Println("文件服务器启动失败 :", err)
    }
}


windows上跨平台编译为linux二进制可执行文件
set GOOS=linux 
set GOARCH=amd64


go build -o fileserver fileserver.go


上传fileserver到目标端
chmod +x fileserver
./fileserver

下载文件办法： wget 源头IP:端口/文件名或者直接用浏览器打开源头IP:端口

总结：

通过搭建文件服务器，我们可以直接在源服务器和目标服务器之间传输数据，避免了中转到本地再上传的繁琐步骤，极大地提高了数据迁移的效率和便利性。利用Python和Go语言，我们可以快速搭建一个稳定、高效的文件服务器，帮助我们轻松应对各种数据迁移需求。

python go 文件服务器数据迁移

文章转载自数据库驾驶舱，如果涉嫌侵权，请发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。

利用Python或者Go搭建文件服务器，高效解决数据迁移难题

评论