场景描述

起因

因项目需求,需要编写一个agent, 需支持Linux和Windows操作系统。 Agent里面有一个功能需要获取到服务器上所有已经被占用的端口。

实现方式:针对不同的操作系统,实现方式有所不同

  • linux: 使用服务器自带的 netstat 指令,然后使用 os/exec 库来调用 shell脚本实现
  • windows: windows系统不同在于,使用 exec.Command指令后,需要调用 syscall.SysProcAttrsyscall.LoadDLL, 而这两个方法是windows系统下的专用库。

问题: 这里会出出现一个问题,虽然程序在编译的时候可以通过GOOS来区分编译到指定的操作系统的二进制包, 但是在编译过程中,编译器会进行代码检查,也会加载windows的代码逻辑。

编译争端

初始代码如下:

  1. tools.go
    // get address
    func getAddress(addr string) string {
    var address string
    if strings.Contains(addr, "tcp") {
    address = strings.TrimRight(addr, "tcp")
    } else {
    address = strings.TrimRight(addr, "udp")
    }
    return address
    } // CollectServerUsedPorts, collect all of the ports that have been used
    func CollectServerUsedPorts(platform string) string {
    var (
    platformLower = strings.ToLower(platform)
    cmd *exec.Cmd
    err error
    cmdOutPut []byte
    ) if platformLower == "linux" {
    // 执行 shell 指令, 获取tcp协议占用的端口
    getUsedPortsCmd := `netstat -tln | awk '{print $4}' | awk -F: '{print $NF}' | egrep -o '[0-9]+' | sort -n | uniq | paste -s -d ","`
    cmd = exec.Command("bash", "-c", getUsedPortsCmd) } else if platformLower == "windows" {
    // 执行 powershell指令获取已经占用的端口号
    getUsedPortsCmd := SelectScriptByWindowsVersion() cmd = exec.Command("powershell", "-Command", getUsedPortsCmd)
    cmd.SysProcAttr = &syscall.SysProcAttr{HideWindow: true} } else {
    cmd = nil
    } if cmd != nil {
    if cmdOutPut, err = cmd.Output(); err != nil {
    log.Errorf("err to execute command %s, %s", cmd.String(), err.Error())
    return ""
    }
    return strings.Trim(string(cmdOutPut), "\n")
    }
    return ""
    } func SelectScriptByWindowsVersion() string {
    var getUsedPortsCmd string
    version, err := getWindowsVersion()
    if err != nil {
    log.Errorf("无法获取Windows版本信息: %s", err.Error())
    return ""
    } // if system version is lower than windows 8
    if version < 6.2 {
    log.Warnf("Windows 版本低于 Windows 8")
    getUsedPortsCmd = `(netstat -an | Select-String 'LISTENING' | ForEach-Object { $_ -replace '\s+', ' ' } | ForEach-Object { ($_ -split ' ')[2] } | Where-Object {$_ -match '\d'} | ForEach-Object {[int]($_ -split ':')[-1]} | Sort-Object | Get-Unique ) -join ",".Replace("r","")`
    } else {
    getUsedPortsCmd = `((Get-NetTCPConnection | Where-Object {$_.State -eq 'Listen'} | Select-Object -ExpandProperty LocalPort) | Sort-Object {[int]$_} | Get-Unique) -join ",".Replace("r","")`
    } return getUsedPortsCmd
    } func getWindowsVersion() (float64, error) { mod, err := syscall.LoadDLL("kernel32.dll")
    if err != nil {
    return 0, err
    }
    defer func() {
    _ = mod.Release()
    }() proc, err := mod.FindProc("GetVersion")
    if err != nil {
    return 0, err
    } version, _, _ := proc.Call()
    majorVersion := byte(version)
    minorVersion := byte(version >> 8) return float64(majorVersion) + float64(minorVersion)/10, nil
    }
  2. 上面代码编译成windows没问题,但是编译linux二进制文件时,会提示:
    # 编译linux二进制文件
    go build -ldflags "-linkmode external -extldflags '-static'" -tags musl -o main main.go # 错误输出如下
    windows.go:31:22: undefined: syscall.LoadDLL
    windows.go:56:41: unknown field 'HideWindow' in struct literal of type syscall.SysProcAttr # 错误原因
    - 内置库syscall,在linux编译时,其syscall.SysProcAttr 结构体并没有`HideWindow`字段;
    - linux 下也没有 syscall.LoadDLL方法
    - 编译和代码执行逻辑不一样,虽然代码有检查系统服务器类型的逻辑,但是编译时需要加载代码中的每一行代码逻辑,
    - 将其编译成汇编,然后再交给计算机执行,所以会出现编译错误

矛盾化解

Go语言在编译时除了有对整个项目编译的 参数控制 , 如 参数GOOS=windows表示编译成widnwos系统下的二进制文件。 但是这个参数只能控制项目级别的, 对于上面这种情况,需要控制文件级别的编译, 当然 Go也是支持的,在提取出 windows 逻辑的代码为独立文件,在文件开头使用 // + build windows 语法。修改如下:

  1. used_ports/windows.go如下:
      //  +build windows
    func SelectScriptByWindowsVersion() string {
    var getUsedPortsCmd string
    version, err := getWindowsVersion()
    if err != nil {
    log.Errorf("无法获取Windows版本信息: %s", err.Error())
    return ""
    } // if system version is lower than windows 8
    if version < 6.2 {
    log.Warnf("Windows 版本低于 Windows 8")
    getUsedPortsCmd = `(netstat -an | Select-String 'LISTENING' | ForEach-Object { $_ -replace '\s+', ' ' } | ForEach-Object { ($_ -split ' ')[2] } | Where-Object {$_ -match '\d'} | ForEach-Object {[int]($_ -split ':')[-1]} | Sort-Object | Get-Unique ) -join ",".Replace("r","")`
    } else {
    getUsedPortsCmd = `((Get-NetTCPConnection | Where-Object {$_.State -eq 'Listen'} | Select-Object -ExpandProperty LocalPort) | Sort-Object {[int]$_} | Get-Unique) -join ",".Replace("r","")`
    } return getUsedPortsCmd
    } func getWindowsVersion() (float64, error) { mod, err := syscall.LoadDLL("kernel32.dll")
    if err != nil {
    return 0, err
    }
    defer func() {
    _ = mod.Release()
    }() proc, err := mod.FindProc("GetVersion")
    if err != nil {
    return 0, err
    } version, _, _ := proc.Call()
    majorVersion := byte(version)
    minorVersion := byte(version >> 8) return float64(majorVersion) + float64(minorVersion)/10, nil
    }
  1. 将原来逻辑改成如下:

    • windows.go
      // CollectServerUsedPorts, collect all of the ports that have been used
      func CollectServerUsedPorts(platform string) string {
      var (
      platformLower = strings.ToLower(platform)
      cmd *exec.Cmd
      err error
      cmdOutPut []byte
      ) if platformLower == "linux" {
      // 执行 shell 指令, 获取tcp协议占用的端口
      getUsedPortsCmd := `netstat -tln | awk '{print $4}' | awk -F: '{print $NF}' | egrep -o '[0-9]+' | sort -n | uniq | paste -s -d ","`
      cmd = exec.Command("bash", "-c", getUsedPortsCmd) } else if platformLower == "windows" {
      // todo: 需要优化,通过接口映射避免编译的问题
      // Linux 编译时需要隐藏下面代码,
      getUsedPortsCmd := used_ports.CollectWindowsUsedPorts()
      cmd = exec.Command("powershell", "-Command", getUsedPortsCmd)
      cmd.SysProcAttr = &syscall.SysProcAttr{HideWindow: true} } else {
      cmd = nil
      } if cmd != nil {
      if cmdOutPut, err = cmd.Output(); err != nil {
      log.Errorf("err to execute command %s, %s", cmd.String(), err.Error())
      return ""
      }
      return strings.Trim(string(cmdOutPut), "\n")
      }
      return ""
      }
  2. 光修改了上面的逻辑也不行,因为编译的时候代码依然会执行,此时会报如下错误

    tools.go:121:15: undefined: used_ports.CollectWindowsUsedPorts
    
    # 这是因为虽然linux编译时,不会编译 windows.go的文件,同时会导致 模块下的
    #CollectWindowsUsedPorts 方法不存在
  3. 最终修复方式如下

    • 编译时考虑使用 定义接口的方式, 针对不同操作系统使用不同的 结构体,然后通过结构实现接口的方式来使其两种操作系统方法来指向同一个接口
    • 使用 接口字典的方式,实现策略模式,不再使用显示的 if 判断语法来做显示判断,这样可以避免编译时显示加载因操作系统带来的编译冲突
    • 使用init() 方式初始化 接口实现
    • 最终代码如下
      /* 实现接口目录如下
      ├── used_ports
      │ ├── linux.go
      │ ├── used_ports.go
      │ └── windows.go
      */
    • used_ports.go
      package used_ports
      
      import "os/exec"
      
      type UsedPortCollector interface {
      CollectHaveUsedPorts() *exec.Cmd
      } var UsedPortCollectorMap = make(map[string]UsedPortCollector, 2) func Register(platformOS string, collector UsedPortCollector) {
      if _, ok := Find(platformOS); ok {
      return
      } UsedPortCollectorMap[platformOS] = collector
      } func Find(platformOS string) (UsedPortCollector, bool) { c, ok := UsedPortCollectorMap[platformOS]
      return c, ok
      }
    • linux.go
      package used_ports
      
      import (
      "os/exec"
      ) func init() {
      Register("linux", newLinuxUsedPorts())
      } type linuxPortCollectorImpl struct{} func (w linuxPortCollectorImpl) CollectHaveUsedPorts() *exec.Cmd {
      // 执行 shell 指令, 获取tcp协议占用的端口
      getUsedPortsCmd := `netstat -tln | awk '{print $4}' | awk -F: '{print $NF}' | egrep -o '[0-9]+' | sort -n | uniq | paste -s -d ","`
      cmd := exec.Command("bash", "-c", getUsedPortsCmd)
      return cmd
      } // newLinuxUsedPorts 返回Windows系统下的端口收集器实例
      func newLinuxUsedPorts() UsedPortCollector {
      return linuxPortCollectorImpl{}
      }
      • windows.go
      //  +build windows
      
      package used_ports
      
      import (
      "os/exec"
      "syscall"
      ) func init() {
      Register("windows", newWindowsCollector())
      } // 结构体
      type windowsPortCollectorImpl struct{} // 实现接口方法
      func (w windowsPortCollectorImpl) CollectHaveUsedPorts() *exec.Cmd {
      // 执行 powershell指令获取已经占用的端口号
      getUsedPortsCmd := selectScriptByWindowsVersion() cmd := exec.Command("powershell", "-Command", getUsedPortsCmd)
      cmd.SysProcAttr = &syscall.SysProcAttr{HideWindow: true} return cmd
      } // newWindowsCollector 返回Windows系统下的端口收集器实例,算是工厂方法
      func newWindowsCollector() UsedPortCollector {
      return windowsPortCollectorImpl{}
      } func selectScriptByWindowsVersion() string {
      var getUsedPortsCmd string
      version, err := getWindowsVersion()
      if err != nil {
      return ""
      } // if system version is lower than windows 8
      if version < 6.2 {
      getUsedPortsCmd = `(netstat -an | Select-String 'LISTENING' | ForEach-Object { $_ -replace '\s+', ' ' } | ForEach-Object { ($_ -split ' ')[2] } | Where-Object {$_ -match '\d'} | ForEach-Object {[int]($_ -split ':')[-1]} | Sort-Object | Get-Unique ) -join ",".Replace("r","")`
      } else {
      getUsedPortsCmd = `((Get-NetTCPConnection | Where-Object {$_.State -eq 'Listen'} | Select-Object -ExpandProperty LocalPort) | Sort-Object {[int]$_} | Get-Unique) -join ",".Replace("r","")`
      } return getUsedPortsCmd
      } func getWindowsVersion() (float64, error) { mod, err := syscall.LoadDLL("kernel32.dll")
      if err != nil {
      return 0, err
      }
      defer func() {
      _ = mod.Release()
      }() proc, err := mod.FindProc("GetVersion")
      if err != nil {
      return 0, err
      } version, _, _ := proc.Call()
      majorVersion := byte(version)
      minorVersion := byte(version >> 8) return float64(majorVersion) + float64(minorVersion)/10, nil
      }
    • tools.go
      ...
      
      // CollectServerUsedPorts, collect all of the ports that have been used
      func CollectServerUsedPorts(platform string) string {
      var (
      platformLower = strings.ToLower(platform)
      cmd *exec.Cmd
      err error
      cmdOutPut []byte
      ) // 策略方法,获取操作系统对应的实例(接口)
      if portCollector, ok := used_ports.Find(platformLower); ok {
      cmd = portCollector.CollectHaveUsedPorts()
      } if cmd != nil {
      if cmdOutPut, err = cmd.Output(); err != nil {
      log.Errorf("err to execute command %s, %s", cmd.String(), err.Error())
      return ""
      }
      return strings.Trim(string(cmdOutPut), "\n")
      } return ""
      }

总结

  1. 程序级别的控制可以在 编译时使用 GOOS=windows 来区分编译成对应操作系统的二进制文件
  2. 文件级别的控制可以在文件头上使用 // + build windows进行控制
  3. 代码级别的控制,可以是使用 结构体映射接口的方式进行区分
  4. init()初始化方法的使用
  5. 不同结构体只要实现了同一个接口的所有方法,那么可以使用 字典接口来实现代码层面的控制

使用interface化解一场因操作系统不同导致的编译问题的更多相关文章

  1. [转]9个offer,12家公司,35场面试,从微软到谷歌,应届计算机毕业生的2012求职之路

    1,简介 毕业答辩搞定,总算可以闲一段时间,把这段求职经历写出来,也作为之前三个半月的求职的回顾. 首先说说我拿到的offer情况: 微软,3面->终面,搞定 百度,3面->终面,口头of ...

  2. 9个offer,12家公司,35场面试,从微软到谷歌,应届计算机毕业生的2012求职之路

    1,简介 毕业答辩搞定,总算可以闲一段时间,把这段求职经历写出来,也作为之前三个半月的求职的回顾. 首先说说我拿到的offer情况: 微软,3面->终面,搞定 百度,3面->终面,口头of ...

  3. (转)9个offer,12家公司,35场面试,从微软到谷歌,应届计算机毕业生的2012求职之路

    原文:http://www.cnblogs.com/figure9/archive/2013/01/09/2853649.html 1,简介 毕业答辩搞定,总算可以闲一段时间,把这段求职经历写出来,也 ...

  4. 转:9个offer,12家公司,35场面试 从微软到谷歌,应届计算机毕业生的2012求职之路 !!!

    1,简介 毕业答辩搞定,总算可以闲一段时间,把这段求职经历写出来,也作为之前三个半月的求职的回顾. 首先说说我拿到的offer情况: 微软,3面->终面,搞定 百度,3面->终面,口头of ...

  5. 我的求职之路:9个offer,12家公司,35场面试,最终谷歌【转载】

    作者:Luc(写于2012年) 一.简介 毕业答辩搞定,总算可以闲一段时间,把这段求职经历写出来,也作为之前三个半月的求职的回顾. 首先说说我拿到的offer情况: 微软,3面->终面,搞定 百 ...

  6. 智能驾驶操作系统OS

    智能驾驶操作系统OS 自动驾驶操作系统是一个流程化.复杂的综合系统,设计到众多流程和领域.首先,分为不同的层,包括:感知层.认知层.决策规划层.控制层和执行层几个层面. 自动驾驶操作系统是一个流程化. ...

  7. Device.js – 快速检测平台、操作系统和方向信息

    在 Web 项目中,有时候我们需要根据程序运行的环境采取特定操作.Device.js 是一个很小的 JavaScript 库,它简化了编写和平台,操作系统或浏览器相关的条件 CSS 或 JavaScr ...

  8. Golang 之 interface接口全面理解

    什么是interface 在面向对象编程中,可以这么说:“接口定义了对象的行为”, 那么具体的实现行为就取决于对象了. 在Go中,接口是一组方法签名(声明的是一组方法的集合).当一个类型为接口中的所有 ...

  9. GNU/Linux操作系统总览

    计算机科学本科的专业课包括高等数学.离散数学.模拟电子技术.数字电子技术.微机原理.汇编语言原理.高级程序语言.操作系统原理.高级编译原理.嵌入式原理.网络原理.计算机组成与结构等诸多科目.GNU计算 ...

  10. c#Winform程序调用app.config文件配置数据库连接字符串 SQL Server文章目录 浅谈SQL Server中统计对于查询的影响 有关索引的DMV SQL Server中的执行引擎入门 【译】表变量和临时表的比较 对于表列数据类型选择的一点思考 SQL Server复制入门(一)----复制简介 操作系统中的进程与线程

    c#Winform程序调用app.config文件配置数据库连接字符串 你新建winform项目的时候,会有一个app.config的配置文件,写在里面的<connectionStrings n ...

随机推荐

  1. HDC2021技术分论坛:ArkUI 3.0让多设备开发更简单!

    作者:wanglei,华为UI编程框架技术专家 HarmonyOS自诞生以来,就是为满足分布式多设备应用场景而设计的,大到智慧屏.车机.平板,小到手机.手表.在多设备场景下进行应用UI界面开发,面临新 ...

  2. 【Python3.10.4】Centos7 ,centos8,centos9源码安装 python3.10.4 解释器

    1.检查是否安装wget如果没有安装则: 终端执行: yum -y install wget 2.下载python3源码包 终端执行: wget https://www.python.org/ftp/ ...

  3. nginx重新整理——————http请求的11个阶段中的preaccess[十四]

    前言 简单整理一下preaccess. 正文 主要是介绍一下上文提及到的limit_req以及limit_conn. 里面是http_limit_conn_module 默认编译进去. 生效范围: 全 ...

  4. 房屋设计H51图纸

  5. Unity性能优化——资源优化(一)

    实际项目中发现的许多问题都是源自无心之过:临时的"测试"更改和疲惫不堪的开发人员的误点击可能会暗地里添加性能不良的资源或更改现有资源的导入设置. 对于任何大规模的项目,最好是将防止 ...

  6. 【Oracle】PL/SQL制作唯一标识,固定字段+日期+流水码,流水码每日重置

    [Oracle]PL/SQL制作唯一标识,固定字段+日期+流水码,流水码每日重置 首先创建序列 create sequence sequence_name minvalue 0 maxvalue 99 ...

  7. 【笔记】go语言--(Slice)切片的概念

    go--(Slice)切片的概念 //切片是什么,定义一个arr,定义一个s为arr中的2到6,这个s就是一个切片 arr := [...]int{0,1,2,3,4,5,6,7} s := arr[ ...

  8. ModelScope初探:一行代码调用成熟AI模型

    简介: 如何用一行代码调用成熟AI模型?试试ModelScope,让AI开发者解放生产力! ModelScope是阿里推出的下一代开源的模型即服务共享平台,为泛AI开发者提供灵活.易用.低成本的一站式 ...

  9. 【USENIX ATC】支持异构GPU集群的超大规模模型的高效的分布式训练框架Whale

    简介: 高效大模型训练框架Whale(EPL)入选USENIX ATC 作者:张杰.贾贤艳 近日,阿里云机器学习PAI关于深度学习模型高效的分布式训练框架的论文< Whale: Efficien ...

  10. 最佳实践丨构建云上私有池(虚拟IDC)的5种方案详解

    ​简介:云上私有池系列终篇终于来了,本文将重点介绍构建云上的私有池(虚拟IDC)的多种方案和各自的优缺点,并给出相关的性价比优化建议. 本文作者:阿里云技术专家李雨前 摘要 围绕私有池(虚拟IDC)的 ...