easyutils

easyutils Golang 常用工具库

.
├── LICENSE
├── README.md
├── base64Captcha.go 验证码
├── crypto.go 加密解密相关
├── file.go 文件相关
├── go.mod
├── go.sum
├── miscellaneous.go 杂项
├── new_session.go session相关 新(开发中)
├── reptile.go 爬虫相关
├── session.go session相关 旧
├── simpleTime.go 时间相关
├── test 测试
│   └── tootl_test.go
├── token.go token相关
├── concurrent 并发控制
├── clog 日志工具
└── uuid.go uuid相关

把生活和工作当中常用的东西抽离出来 严格单元测试 保证代码质量

简单用法

获取

go get github.com/dollarkillerx/easyutils

crypto加密包

• 把str转为md5

  md5str := Md5Encode(string)
  

• sha1

  sha1str := Sha1Encode("hello")
  

• SHA256

  Sha256Encode(str string) string
  

• RSA256 公钥密钥对生成

  e, priKey, pubKey := GenRsaKey(1024) // 1024 密钥长度
  

• Rsa256 加密

  RsaEncrypt(origData,pubKey []byte) ([]byte,error)
  

• Rsa256 加密简单

  RsaEncryptSimple(origData,pubKey string) (string,error)
  

• Rsa256 解密

  RsaDecrypt(ciphertext,privateKey []byte) ([]byte, error)
  

• Rsa256 解密简单

  RsaDecryptSimple(ciphertext,privateKey string) (string, error)
  

• Rsa256 签名

  RsaSignVer(data,signature,publicKey []byte) error
  

• Rsa256 简单签名

  RsaSignSimple(data, prvKey string) (string, error)
  

• Rsa256 验签

  RsaSignVer(data,signature,publicKey []byte) error
  

• Rsa256 简单验签

  RsaSignVerSimple(data,signature,publicKey string) error
  

• Base64标准编码

  Base64Encode(data []byte) string
  

• Base64标准解码

  Base64Decode(s string) ([]byte,error)
  

• Base64URL编码

  Base64URLEncode(data []byte) string
  

• Base64URL解码

  Base64URLDecode(s string) ([]byte,error)
  

simpleTime 时间包

• 获取当前时间戳,时区默认亚洲上海

  timeString := TimeGetNowTimeStr()
  

• 时间戳转换为日期

  日期,err := TimeGetTimeToString(时间戳string)
  

• 日期转换为时间戳

  时间戳str,err := TimeGetStringToTime(日期)
  

uuid包

• 获取uuid

  uuidstr,err := NewUUID()
  

• 获取当前uuid不带-

  uuidstr,err := NewUUIDSimplicity()
  

• 超级随机

  SuperRand() string
  

session 包

• 获取session

  session := SessionGenerate("dollarkiller",6*60*60)
  

• 获得session数据

  node, e := SessionGetData(session)
  

• 验证session

  bool := SessionCheck(session)
  

• 销毁session

  SessionDel(session)
  

file包

• 判断文件夹是否存在

  ok,err := PathExists("./file")
  

• 如果文件夹不存在就会创建文件夹

  err := DirPing("./file")
  

• 获取文件后缀

  str,err := FileGetPostfix("123.text")
  

• 获得随机文件名 传入postfilx后缀

  filename := FileGetRandomName(postfilx string)
  

• 获取文件sha1

  str := FileGetSha1(file *os.File)
  

• 获取文件MD5

  str := FileGetMD5(file *os.File)
  

• 保存文件 并从命名 Simple 版本

  FileSaveRenameSimple(name string, data []byte, path string) (string, error)
  

• 保存文件 Simple版本

  FileSaveSimple(name string, data []byte, path string) error 
  

Token

• 初始化

  _, priKey, pubKey := GenRsaKey(1024)
      jwt := NewUtilsToken(priKey, pubKey)
  

• 生成JWT

  s, e := jwt.GeneraJwtToken(head, payload)
  

• 生成JWT 缓存版本

  s, e := jwt.GeneraJwtTokenToData(head, payload)
  

• 验证JWT

  bool := jwt.VerificationToken(s)
  

• 验证JWT 缓存版本

  bool := jwt.VerificationTokenByData(s)
  

EasyToken

• 生成token

  EasyJwtGeneraToken(data *EasyJwtPayload,hour int) (string,error)
  

• 验证签名

  EasyJwtVerification(jwt string) error
  

• 验证用户是否已经登录

  EasyJwtCheckUserLogin(email string) (token string,err error)
  

验证码 是对base64Captcha包装

• 获取数字验证码

  CaptchaNum() (captchaId, base64Png string)
  

• 获取算数验证码

  CaptchaMath() (captchaId, base64Png string)
  

• 获取音频验证码

  CaptchaMP3() (captchaId, base64MP3 string)
  

• 验证

  CaptchaCheck(captchaId, verifyValue string) (int, error)
  

杂项

• 获取区间随机数

  Random(min,max int) int
  

• 计算offset

  OffsetMath(page,limit int) int 
  

• UrlEncoding

  UrlEncoding(urls string) (string,error)
  

LayUi 兼容

• 分页
  • 分页包装数据

    LayPage(count int,data interface{}) *LayUiPage
    

  • 接受用户传入结构体
  • 发送结构体
  • 默认定义 空数据 雨 数据异常发送模板

简单爬虫tools

• 初始化

  // url,username,password
  rep,err := InitProxy(arg ...string) (*ProxySt, error)
  

• 获取随机UserAgent (假装自己是普通用户)

  rep.ReptileGetUserAgent() string
  

• 获取搜索引擎UserAgent (假装自己是搜索引擎)

  rep.ReptileGetSpiderAgent() string
  

• 发送请求 (假装自己是搜索引擎)

  rep.ReptileSpiderRequestFrom(targerUrl string, body io.Reader, cookies []*http.Cookie) (*http.Response, error)
  

• 发送请求 (假装自己是普通用户)

  rep.ReptileUserRequestFrom(targerUrl string, body io.Reader, cookies []*http.Cookie) (*http.Response, error)
  

• 文件下载

  rep.ReptileDownloadSimple(targerUrl string, cookies []*http.Cookie) ([]byte, error)
  

• 文件下载并保存

  rep.ReptileDownloadAndSaveSimple(targerUrl string, cookies []*http.Cookie, name, path string) (string, error)
  

• 验证代理是否可用

  rep.CheckProxy() error
  

httplib 基于beego

• 假装用户去请求

  EuUserGet(url string) ([]byte,error)
  

• 假装搜索引擎去请求

  EuSpiderGet(url string,) ([]byte,error)
  

• post请求

  req := httplib.Post("https://google.com/")
  req.Param("username","google")
  req.Param("password","123456")
  

• 设置head

  req := httplib.Post("https://google.com/")
  req.Header("Accept-Encoding","gzip,deflate,sdch")
  

clog

• 带方法地址的打印

  clog.Println("2312")
  

• Sprint

  clog.Sprint(string) string
  

concurrent 并发包

• 对象池
  • 创建对象池

    NewObjPoll(obj interface{},num int) *ObjPoll
    

  • 获取对象

    (p *ObjPoll) GetObj(timeout time.Duration) (interface{},error)
    

  • 放回对象

    (p *ObjPoll) Release(obj interface{}) error
    

压缩相关

• Zip
  • 压缩

  err := compression.Zip("./captcha_test", "out.zip")
  

  • 解压

  err := compression.Unzip("out.zip", "./ps")
  

通知邮件 (公用邮件服务器)

gemail.SendNifoLog([]string{toUser},fromUser,subject)

form 绑定

• 自动绑定

  Band(req *http.Request, obj interface{}) error
  

• 绑定Json

  BindJson(req *http.Request, obj interface{}) error
  

• 绑定Form

  BindForm(req *http.Request, obj interface{}) error
  

简单解析Json数据不用写Struct

func TestMap(t *testing.T) {
	data := `
	{
		"device": "this is device",
		"ppc": {
			"ok":"ppc"
		},	
		"data": [
			{
				"humidity": "this is humidity",
				"time": "this is time"
			},
			"hello"
		]
	}
	`

	mapun, e := gmap.Unmarshal(data)
	if e != nil {
		panic(e)
	}

	// 获取string
	s, b := mapun.GetString("device")
	if b {
		log.Println(s)
	}

	// 获取map
	i3, i4 := mapun.GetMap("ppc")
	if i4 {
		log.Println(i3)
	}

	// 获取slice
	getMap, i := mapun.GetSlice("data")
	if i {
		log.Println(getMap)
	}

	//i2,bo := mapun.GetMap2(getMap[0])
	//if bo {
	//	log.Println(i2)
	//}

	// 获取 slice map
	sliceMap, i5 := mapun.GetSliceMap("data")
	if i5 {
		log.Println(sliceMap)
	}
}