[Go] 并发imap收信

2024-03-17 19:58
文章标签 go 并发 imap 收信

本文主要是介绍[Go] 并发imap收信,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

并发数太大会直接死,这里有时候需要多试几次

package mainimport ("flag""fmt""io/ioutil""log""math""os""sync""github.com/emersion/go-imap""github.com/emersion/go-imap/client"
)var (server, email, password stringworkernum               intimapClient              *client.ClientmailDirs                []stringmailSumNums             uint32pagesize                int = 50start                   intstop                    int
)type Pool struct {workerNum introad      chan *Carwg        sync.WaitGroup
}//初始化这个对象
func NewPool(wn int) *Pool {return &Pool{workerNum: wn, road: make(chan *Car)}
}//往channel添加具体任务
func (p *Pool) AddCar(f *Car) {p.road <- f
}//goroutine去工作
func (p *Pool) work(workId int) {for f := range p.road {log.Println("workId:", workId, "start")f.do()log.Println("workId:", workId, "done")}p.wg.Done()
}//创建goroutine等着接工作
func (p *Pool) Run() {for i := 0; i < p.workerNum; i++ {go p.work(i)p.wg.Add(1)}p.wg.Wait()
}func (p *Pool) colse() {close(p.road)
}var pool = NewPool(5)func main() {go handleMail()pool.Run()
}
func handleMail() {//获取命令行参数flag.StringVar(&server, "server", "", "imap服务地址(包含端口)")flag.StringVar(&email, "email", "", "邮箱名")flag.StringVar(&password, "password", "", "密码")flag.Parse()if flag.NFlag() < 3 {flag.PrintDefaults()os.Exit(1)}if server == "" || email == "" || password == "" {log.Fatal("服务器地址,用户名,密码,参数错误")}//连接imap服务imapClient, err := client.Dial(server)if err != nil {log.Fatal(err)}//登陆if err := imapClient.Login(email, password); err != nil {log.Fatal(err)}//创建邮件夹目录
    os.Mkdir(email, os.ModePerm)mailboxes := make(chan *imap.MailboxInfo, 20)go func() {imapClient.List("", "*", mailboxes)}()//列取邮件夹for m := range mailboxes {mailDirs = append(mailDirs, m.Name)}//循环邮件夹,创建邮件夹目录for _, mailDir := range mailDirs {//选中每个邮件夹mbox, err := imapClient.Select(mailDir, false)if err != nil {log.Fatal(err)}mailDirNums := mbox.Messageslog.Printf("%s : %d", mailDir, mailDirNums)fileDir := fmt.Sprintf("%s/%s", email, mailDir)//创建邮件夹目录
        os.Mkdir(fileDir, os.ModePerm)mailSumNums += mailDirNums}log.Printf("总邮件数 : %d", mailSumNums)//循环邮件夹,读取每个邮件夹中的邮件for _, mailDir := range mailDirs {//选中每个邮件夹mbox, err := imapClient.Select(mailDir, false)if err != nil {log.Fatal(err)}if mbox.Messages == 0{continue}//循环该邮件夹中的邮件pagecount := int(math.Ceil(float64(mbox.Messages) / float64(pagesize)))for i := 1; i <= pagecount; i++ {if i == 1 {start = 1} else {start = (i-1)*pagesize + 1}stop = i * pagesizeif stop > int(mbox.Messages) {stop = int(mbox.Messages)}car := Car{start:      start,stop:       stop,mailDir:    mailDir,imapClient: imapClient,}pool.AddCar(&car)}}pool.colse()
}/*具体做的事通过这个来传递*/
type Car struct {start, stop intmailDir     stringimapClient  *client.Client
}//具体做事
func (c *Car) do() error {seqset := new(imap.SeqSet)seqset.AddRange(uint32(c.start), uint32(c.stop))section := &imap.BodySectionName{}items := []imap.FetchItem{section.FetchItem()}messages := make(chan *imap.Message, pagesize)go func() {c.imapClient.Fetch(seqset, items, messages)}()for msg := range messages {mailFile := fmt.Sprintf("%s/%s/%d.eml", email, c.mailDir, msg.SeqNum)r := msg.GetBody(section)if r != nil {body, _ := ioutil.ReadAll(r)f, _ := os.OpenFile(mailFile, os.O_RDWR|os.O_CREATE, 0766)f.Write(body)f.Close()log.Printf("%s :第 %d ", c.mailDir, msg.SeqNum)}}return nil
}

 

这篇关于[Go] 并发imap收信的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/819990

相关文章

Web服务器-Nginx-高并发问题

《Web服务器-Nginx-高并发问题》Nginx通过事件驱动、I/O多路复用和异步非阻塞技术高效处理高并发,结合动静分离和限流策略,提升性能与稳定性... 目录前言一、架构1. 原生多进程架构2. 事件驱动模型3. IO多路复用4. 异步非阻塞 I/O5. Nginx高并发配置实战二、动静分离1. 职责2

GO语言短变量声明的实现示例

《GO语言短变量声明的实现示例》在Go语言中,短变量声明是一种简洁的变量声明方式,使用:=运算符,可以自动推断变量类型,下面就来具体介绍一下如何使用,感兴趣的可以了解一下... 目录基本语法功能特点与var的区别适用场景注意事项基本语法variableName := value功能特点1、自动类型推

GO语言中函数命名返回值的使用

《GO语言中函数命名返回值的使用》在Go语言中,函数可以为其返回值指定名称,这被称为命名返回值或命名返回参数,这种特性可以使代码更清晰,特别是在返回多个值时,感兴趣的可以了解一下... 目录基本语法函数命名返回特点代码示例命名特点基本语法func functionName(parameters) (nam

Go之errors.New和fmt.Errorf 的区别小结

《Go之errors.New和fmt.Errorf的区别小结》本文主要介绍了Go之errors.New和fmt.Errorf的区别,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考... 目录error的基本用法1. 获取错误信息2. 在条件判断中使用基本区别1.函数签名2.使用场景详细对

Go语言连接MySQL数据库执行基本的增删改查

《Go语言连接MySQL数据库执行基本的增删改查》在后端开发中,MySQL是最常用的关系型数据库之一,本文主要为大家详细介绍了如何使用Go连接MySQL数据库并执行基本的增删改查吧... 目录Go语言连接mysql数据库准备工作安装 MySQL 驱动代码实现运行结果注意事项Go语言执行基本的增删改查准备工作

Spring Security 前后端分离场景下的会话并发管理

《SpringSecurity前后端分离场景下的会话并发管理》本文介绍了在前后端分离架构下实现SpringSecurity会话并发管理的问题,传统Web开发中只需简单配置sessionManage... 目录背景分析传统 web 开发中的 sessionManagement 入口ConcurrentSess

Go中select多路复用的实现示例

《Go中select多路复用的实现示例》Go的select用于多通道通信,实现多路复用,支持随机选择、超时控制及非阻塞操作,建议合理使用以避免协程泄漏和死循环,感兴趣的可以了解一下... 目录一、什么是select基本语法:二、select 使用示例示例1:监听多个通道输入三、select的特性四、使用se

Go语言使用Gin处理路由参数和查询参数

《Go语言使用Gin处理路由参数和查询参数》在WebAPI开发中,处理路由参数(PathParameter)和查询参数(QueryParameter)是非常常见的需求,下面我们就来看看Go语言... 目录一、路由参数 vs 查询参数二、Gin 获取路由参数和查询参数三、示例代码四、运行与测试1. 测试编程路

Go语言使用net/http构建一个RESTful API的示例代码

《Go语言使用net/http构建一个RESTfulAPI的示例代码》Go的标准库net/http提供了构建Web服务所需的强大功能,虽然众多第三方框架(如Gin、Echo)已经封装了很多功能,但... 目录引言一、什么是 RESTful API?二、实战目标:用户信息管理 API三、代码实现1. 用户数据

MySQL中处理数据的并发一致性的实现示例

《MySQL中处理数据的并发一致性的实现示例》在MySQL中处理数据的并发一致性是确保多个用户或应用程序同时访问和修改数据库时,不会导致数据冲突、数据丢失或数据不一致,MySQL通过事务和锁机制来管理... 目录一、事务(Transactions)1. 事务控制语句二、锁(Locks)1. 锁类型2. 锁粒