[Go] 并发imap收信

2024-03-17 19:58
文章标签 go 并发 imap 收信

本文主要是介绍[Go] 并发imap收信,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

并发数太大会直接死,这里有时候需要多试几次

package mainimport ("flag""fmt""io/ioutil""log""math""os""sync""github.com/emersion/go-imap""github.com/emersion/go-imap/client"
)var (server, email, password stringworkernum               intimapClient              *client.ClientmailDirs                []stringmailSumNums             uint32pagesize                int = 50start                   intstop                    int
)type Pool struct {workerNum introad      chan *Carwg        sync.WaitGroup
}//初始化这个对象
func NewPool(wn int) *Pool {return &Pool{workerNum: wn, road: make(chan *Car)}
}//往channel添加具体任务
func (p *Pool) AddCar(f *Car) {p.road <- f
}//goroutine去工作
func (p *Pool) work(workId int) {for f := range p.road {log.Println("workId:", workId, "start")f.do()log.Println("workId:", workId, "done")}p.wg.Done()
}//创建goroutine等着接工作
func (p *Pool) Run() {for i := 0; i < p.workerNum; i++ {go p.work(i)p.wg.Add(1)}p.wg.Wait()
}func (p *Pool) colse() {close(p.road)
}var pool = NewPool(5)func main() {go handleMail()pool.Run()
}
func handleMail() {//获取命令行参数flag.StringVar(&server, "server", "", "imap服务地址(包含端口)")flag.StringVar(&email, "email", "", "邮箱名")flag.StringVar(&password, "password", "", "密码")flag.Parse()if flag.NFlag() < 3 {flag.PrintDefaults()os.Exit(1)}if server == "" || email == "" || password == "" {log.Fatal("服务器地址,用户名,密码,参数错误")}//连接imap服务imapClient, err := client.Dial(server)if err != nil {log.Fatal(err)}//登陆if err := imapClient.Login(email, password); err != nil {log.Fatal(err)}//创建邮件夹目录
    os.Mkdir(email, os.ModePerm)mailboxes := make(chan *imap.MailboxInfo, 20)go func() {imapClient.List("", "*", mailboxes)}()//列取邮件夹for m := range mailboxes {mailDirs = append(mailDirs, m.Name)}//循环邮件夹,创建邮件夹目录for _, mailDir := range mailDirs {//选中每个邮件夹mbox, err := imapClient.Select(mailDir, false)if err != nil {log.Fatal(err)}mailDirNums := mbox.Messageslog.Printf("%s : %d", mailDir, mailDirNums)fileDir := fmt.Sprintf("%s/%s", email, mailDir)//创建邮件夹目录
        os.Mkdir(fileDir, os.ModePerm)mailSumNums += mailDirNums}log.Printf("总邮件数 : %d", mailSumNums)//循环邮件夹,读取每个邮件夹中的邮件for _, mailDir := range mailDirs {//选中每个邮件夹mbox, err := imapClient.Select(mailDir, false)if err != nil {log.Fatal(err)}if mbox.Messages == 0{continue}//循环该邮件夹中的邮件pagecount := int(math.Ceil(float64(mbox.Messages) / float64(pagesize)))for i := 1; i <= pagecount; i++ {if i == 1 {start = 1} else {start = (i-1)*pagesize + 1}stop = i * pagesizeif stop > int(mbox.Messages) {stop = int(mbox.Messages)}car := Car{start:      start,stop:       stop,mailDir:    mailDir,imapClient: imapClient,}pool.AddCar(&car)}}pool.colse()
}/*具体做的事通过这个来传递*/
type Car struct {start, stop intmailDir     stringimapClient  *client.Client
}//具体做事
func (c *Car) do() error {seqset := new(imap.SeqSet)seqset.AddRange(uint32(c.start), uint32(c.stop))section := &imap.BodySectionName{}items := []imap.FetchItem{section.FetchItem()}messages := make(chan *imap.Message, pagesize)go func() {c.imapClient.Fetch(seqset, items, messages)}()for msg := range messages {mailFile := fmt.Sprintf("%s/%s/%d.eml", email, c.mailDir, msg.SeqNum)r := msg.GetBody(section)if r != nil {body, _ := ioutil.ReadAll(r)f, _ := os.OpenFile(mailFile, os.O_RDWR|os.O_CREATE, 0766)f.Write(body)f.Close()log.Printf("%s :第 %d ", c.mailDir, msg.SeqNum)}}return nil
}

 

这篇关于[Go] 并发imap收信的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/819990

相关文章

Go标准库常见错误分析和解决办法

《Go标准库常见错误分析和解决办法》Go语言的标准库为开发者提供了丰富且高效的工具,涵盖了从网络编程到文件操作等各个方面,然而,标准库虽好,使用不当却可能适得其反,正所谓工欲善其事,必先利其器,本文将... 目录1. 使用了错误的time.Duration2. time.After导致的内存泄漏3. jsO

Java并发编程必备之Synchronized关键字深入解析

《Java并发编程必备之Synchronized关键字深入解析》本文我们深入探索了Java中的Synchronized关键字,包括其互斥性和可重入性的特性,文章详细介绍了Synchronized的三种... 目录一、前言二、Synchronized关键字2.1 Synchronized的特性1. 互斥2.

go中空接口的具体使用

《go中空接口的具体使用》空接口是一种特殊的接口类型,它不包含任何方法,本文主要介绍了go中空接口的具体使用,具有一定的参考价值,感兴趣的可以了解一下... 目录接口-空接口1. 什么是空接口?2. 如何使用空接口?第一,第二,第三,3. 空接口几个要注意的坑坑1:坑2:坑3:接口-空接口1. 什么是空接

利用Go语言开发文件操作工具轻松处理所有文件

《利用Go语言开发文件操作工具轻松处理所有文件》在后端开发中,文件操作是一个非常常见但又容易出错的场景,本文小编要向大家介绍一个强大的Go语言文件操作工具库,它能帮你轻松处理各种文件操作场景... 目录为什么需要这个工具?核心功能详解1. 文件/目录存javascript在性检查2. 批量创建目录3. 文件

Python异步编程中asyncio.gather的并发控制详解

《Python异步编程中asyncio.gather的并发控制详解》在Python异步编程生态中,asyncio.gather是并发任务调度的核心工具,本文将通过实际场景和代码示例,展示如何结合信号量... 目录一、asyncio.gather的原始行为解析二、信号量控制法:给并发装上"节流阀"三、进阶控制

Redis中高并发读写性能的深度解析与优化

《Redis中高并发读写性能的深度解析与优化》Redis作为一款高性能的内存数据库,广泛应用于缓存、消息队列、实时统计等场景,本文将深入探讨Redis的读写并发能力,感兴趣的小伙伴可以了解下... 目录引言一、Redis 并发能力概述1.1 Redis 的读写性能1.2 影响 Redis 并发能力的因素二、

Go语言中最便捷的http请求包resty的使用详解

《Go语言中最便捷的http请求包resty的使用详解》go语言虽然自身就有net/http包,但是说实话用起来没那么好用,resty包是go语言中一个非常受欢迎的http请求处理包,下面我们一起来学... 目录安装一、一个简单的get二、带查询参数三、设置请求头、body四、设置表单数据五、处理响应六、超

Nginx实现高并发的项目实践

《Nginx实现高并发的项目实践》本文主要介绍了Nginx实现高并发的项目实践,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 目录使用最新稳定版本的Nginx合理配置工作进程(workers)配置工作进程连接数(worker_co

Golang基于内存的键值存储缓存库go-cache

《Golang基于内存的键值存储缓存库go-cache》go-cache是一个内存中的key:valuestore/cache库,适用于单机应用程序,本文主要介绍了Golang基于内存的键值存储缓存库... 目录文档安装方法示例1示例2使用注意点优点缺点go-cache 和 Redis 缓存对比1)功能特性

Go 1.23中Timer无buffer的实现方式详解

《Go1.23中Timer无buffer的实现方式详解》在Go1.23中,Timer的实现通常是通过time包提供的time.Timer类型来实现的,本文主要介绍了Go1.23中Timer无buff... 目录Timer 的基本实现无缓冲区的实现自定义无缓冲 Timer 实现更复杂的 Timer 实现总结在