Python3 BeautifulSoup爬虫 POJ自动提交

2024-09-09 06:58

本文主要是介绍Python3 BeautifulSoup爬虫 POJ自动提交,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

POJ 提交代码采用Base64加密方式

import http.cookiejar
import logging
import urllib.parse
import urllib.request
import base64
from bs4 import BeautifulSoup
from submitcode import SubmitCodeclass SubmitPoj():def __init__(self, userId, passWord):self.userId = userIdself.passWord = passWordcj = http.cookiejar.LWPCookieJar()self.opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj))urllib.request.install_opener(self.opener)def decode(self , code):bytesString = code.encode(encoding="utf-8")encodestr = base64.b64encode(bytesString)return  encodestrdef login(self):params = {"user_id1": self.userId,"password1": self.passWord,"B1": "login","url": "/"}loginUrl = "http://poj.org/login"postData = urllib.parse.urlencode(params).encode(encoding='UTF8')html = self.opener.open(loginUrl, postData).read()soup = BeautifulSoup(html, "xml")return soup.prettify().find("login?action=logout") > -1def submit(self, pid, language, src):params = {"problem_id": pid,"language": language,"source": src,"submit": "Submit","encoded": 1}submitUrl = "http://poj.org/submit"postData = urllib.parse.urlencode(params).encode(encoding='UTF8')self.opener.open(submitUrl, postData)def status(self):statusUrl = "http://poj.org/status?problem_id=&user_id=" + self.userId + "&result=&language="html = urllib.request.urlopen(statusUrl).read()soup = BeautifulSoup(html, "xml")trs = soup.find_all("tr")for row in trs[5:]:contest = row.contentsprint(contest[1].string, end="\t")print(contest[3].contents[0].string.split(">")[1], end="\t")try:print(contest[4].contents[0].contents[1].string.split(">")[1], end="\t")except:print(contest[4].contents[0].string.split(">")[1], end="\t")print(contest[7].contents[0].string, end="\t")print(contest[8].contents[0].string, end="\t")print(contest[9].contents[0].string, end="\t\n")if __name__ == '__main__':FORMAT = "[PojAutoSubmit]-----%(message)s------"logging.basicConfig(level=logging.INFO, format=FORMAT)#用户名 , 密码 (明文)poj = SubmitPoj("用户名", "密码")if poj.login():logging.info("login success!")poj.submit("1700", 2 , poj.decode(SubmitCode.javaCode))poj.submit("1000", 0 , poj.decode(SubmitCode.cppCode))logging.info("submit success!")poj.status()logging.info("search status success!")


class SubmitCode():javaCode = '''
import java.io.BufferedReader;  
import java.io.InputStream;  
import java.io.InputStreamReader;  
import java.io.PrintWriter;  
import java.math.BigInteger;  
import java.util.Arrays;  
import java.util.StringTokenizer;  public class Main {  public static void main(String[] args) {  new Task().solve() ;  }  
}  class Task{  InputReader in = new InputReader(System.in) ;  PrintWriter out = new PrintWriter(System.out) ;  long sum(int left , int right , int[] num){  if(left == right || right == left + 1) return num[right] ;  else if(right == left + 2) return num[left] + num[left+1] + num[left+2] ;  else{  long way1 = (num[right] + num[left] + num[right-1] + num[left]) ; //(最慢最快)->最快回->(次慢最快)->最快回  long way2 = (num[left+1] + num[left+1] + num[right] + num[left]) ; //(次快最快)->次快回->(最慢次慢)->最快回  return Math.min(way1, way2) + sum(left , right-2 , num) ;  }  }  void solve(){  int t = in.nextInt() ;  while(t-- > 0){  int n = in.nextInt() ;   int[] num = new int[n] ;  for(int i = 0 ; i < n ; i++) num[i] = in.nextInt() ;   Arrays.sort(num) ;  out.println(sum(0, n-1 , num)) ;  }  out.flush() ;  }  }  class InputReader {      public BufferedReader reader;      public StringTokenizer tokenizer;      public InputReader(InputStream stream) {      reader = new BufferedReader(new InputStreamReader(stream), 32768);      tokenizer = new StringTokenizer("");      }      private void eat(String s) {      tokenizer = new StringTokenizer(s);      }      public String nextLine() {      try {      return reader.readLine();      } catch (Exception e) {      return null;      }      }      public boolean hasNext() {      while (!tokenizer.hasMoreTokens()) {      String s = nextLine();      if (s == null)      return false;      eat(s);      }      return true;      }      public String next() {      hasNext();      return tokenizer.nextToken();      }      public int nextInt() {      return Integer.parseInt(next());      }      public long nextLong() {      return Long.parseLong(next());      }      public double nextDouble() {      return Double.parseDouble(next());      }      public BigInteger nextBigInteger() {      return new BigInteger(next());      }      }      '''cppCode='''
#include <iostream>using namespace std;int main()
{int a,b;cin >> a >> b;cout << a+b << endl;return 0;
}'''if __name__ == '__main__':print(SubmitCode.javaCode)


17090613	1700	Accepted	Java	2823B	2017-06-19 08:40:34	
17090612	1000	Accepted	G++	134B	2017-06-19 08:36:37	
17086082	1000	Compile Error	G++	47B	2017-06-16 17:15:03	
17086081	1000	Accepted	G++	128B	2017-06-16 17:14:51	
17086072	1000	Compile Error	Java	128B	2017-06-16 17:10:43	
17086062	1000	Compile Error	G++	47B	2017-06-16 17:07:19	
17085929	1030	Compile Error	GCC	34B	2017-06-16 15:51:16	
17085926	1010	Compile Error	GCC	34B	2017-06-16 15:49:54	
17085905	1000	Compile Error	GCC	34B	2017-06-16 15:45:17	
17085888	1001	Compile Error	GCC	34B	2017-06-16 15:41:43	
17085882	1000	Compile Error	Java	640B	2017-06-16 15:39:36	
17085878	1000	Accepted	Java	479B	2017-06-16 15:38:29	
17085781	1000	Compile Error	Java	420B	2017-06-16 14:52:23	
17085780	1000	Compile Error	Java	560B	2017-06-16 14:52:17	
17085773	1000	Accepted	Java	313B	2017-06-16 14:48:29	
17085766	1000	Accepted	Java	313B	2017-06-16 14:46:57	
16839463	3237	Accepted	Java	5998B	2017-04-06 14:11:27	
16838503	2763	Accepted	Java	5510B	2017-04-06 09:12:45	
16835470	2763	Accepted	Java	5376B	2017-04-05 17:13:41	
16834457	3321	Accepted	Java	2645B	2017-04-05 14:02:26	





这篇关于Python3 BeautifulSoup爬虫 POJ自动提交的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1150470

相关文章

SpringBoot项目启动后自动加载系统配置的多种实现方式

《SpringBoot项目启动后自动加载系统配置的多种实现方式》:本文主要介绍SpringBoot项目启动后自动加载系统配置的多种实现方式,并通过代码示例讲解的非常详细,对大家的学习或工作有一定的... 目录1. 使用 CommandLineRunner实现方式:2. 使用 ApplicationRunne

Springboot的ThreadPoolTaskScheduler线程池轻松搞定15分钟不操作自动取消订单

《Springboot的ThreadPoolTaskScheduler线程池轻松搞定15分钟不操作自动取消订单》:本文主要介绍Springboot的ThreadPoolTaskScheduler线... 目录ThreadPoolTaskScheduler线程池实现15分钟不操作自动取消订单概要1,创建订单后

python实现自动登录12306自动抢票功能

《python实现自动登录12306自动抢票功能》随着互联网技术的发展,越来越多的人选择通过网络平台购票,特别是在中国,12306作为官方火车票预订平台,承担了巨大的访问量,对于热门线路或者节假日出行... 目录一、遇到的问题?二、改进三、进阶–展望总结一、遇到的问题?1.url-正确的表头:就是首先ur

Python3中Sanic中间件的使用

《Python3中Sanic中间件的使用》Sanic框架中的中间件是一种强大的工具,本文就来介绍Python3中Sanic中间件的使用,具有一定的参考价值,感兴趣的可以了解一下... 目录Sanic 中间件的工作流程中间件的使用1. 全局中间件2. 路由中间件3. 异常处理中间件4. 异步中间件5. 优先级

Spring使用@Retryable实现自动重试机制

《Spring使用@Retryable实现自动重试机制》在微服务架构中,服务之间的调用可能会因为一些暂时性的错误而失败,例如网络波动、数据库连接超时或第三方服务不可用等,在本文中,我们将介绍如何在Sp... 目录引言1. 什么是 @Retryable?2. 如何在 Spring 中使用 @Retryable

使用 Python 和 LabelMe 实现图片验证码的自动标注功能

《使用Python和LabelMe实现图片验证码的自动标注功能》文章介绍了如何使用Python和LabelMe自动标注图片验证码,主要步骤包括图像预处理、OCR识别和生成标注文件,通过结合Pa... 目录使用 python 和 LabelMe 实现图片验证码的自动标注环境准备必备工具安装依赖实现自动标注核心

QT实现TCP客户端自动连接

《QT实现TCP客户端自动连接》这篇文章主要为大家详细介绍了QT中一个TCP客户端自动连接的测试模型,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录版本 1:没有取消按钮 测试效果测试代码版本 2:有取消按钮测试效果测试代码版本 1:没有取消按钮 测试效果缺陷:无法手动停

作业提交过程之HDFSMapReduce

作业提交全过程详解 (1)作业提交 第1步:Client调用job.waitForCompletion方法,向整个集群提交MapReduce作业。 第2步:Client向RM申请一个作业id。 第3步:RM给Client返回该job资源的提交路径和作业id。 第4步:Client提交jar包、切片信息和配置文件到指定的资源提交路径。 第5步:Client提交完资源后,向RM申请运行MrAp

poj 3974 and hdu 3068 最长回文串的O(n)解法(Manacher算法)

求一段字符串中的最长回文串。 因为数据量比较大,用原来的O(n^2)会爆。 小白上的O(n^2)解法代码:TLE啦~ #include<stdio.h>#include<string.h>const int Maxn = 1000000;char s[Maxn];int main(){char e[] = {"END"};while(scanf("%s", s) != EO

hdu 2602 and poj 3624(01背包)

01背包的模板题。 hdu2602代码: #include<stdio.h>#include<string.h>const int MaxN = 1001;int max(int a, int b){return a > b ? a : b;}int w[MaxN];int v[MaxN];int dp[MaxN];int main(){int T;int N, V;s