Python3 BeautifulSoup爬虫 POJ自动提交

2024-09-09 06:58

本文主要是介绍Python3 BeautifulSoup爬虫 POJ自动提交,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

POJ 提交代码采用Base64加密方式

import http.cookiejar
import logging
import urllib.parse
import urllib.request
import base64
from bs4 import BeautifulSoup
from submitcode import SubmitCodeclass SubmitPoj():def __init__(self, userId, passWord):self.userId = userIdself.passWord = passWordcj = http.cookiejar.LWPCookieJar()self.opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj))urllib.request.install_opener(self.opener)def decode(self , code):bytesString = code.encode(encoding="utf-8")encodestr = base64.b64encode(bytesString)return  encodestrdef login(self):params = {"user_id1": self.userId,"password1": self.passWord,"B1": "login","url": "/"}loginUrl = "http://poj.org/login"postData = urllib.parse.urlencode(params).encode(encoding='UTF8')html = self.opener.open(loginUrl, postData).read()soup = BeautifulSoup(html, "xml")return soup.prettify().find("login?action=logout") > -1def submit(self, pid, language, src):params = {"problem_id": pid,"language": language,"source": src,"submit": "Submit","encoded": 1}submitUrl = "http://poj.org/submit"postData = urllib.parse.urlencode(params).encode(encoding='UTF8')self.opener.open(submitUrl, postData)def status(self):statusUrl = "http://poj.org/status?problem_id=&user_id=" + self.userId + "&result=&language="html = urllib.request.urlopen(statusUrl).read()soup = BeautifulSoup(html, "xml")trs = soup.find_all("tr")for row in trs[5:]:contest = row.contentsprint(contest[1].string, end="\t")print(contest[3].contents[0].string.split(">")[1], end="\t")try:print(contest[4].contents[0].contents[1].string.split(">")[1], end="\t")except:print(contest[4].contents[0].string.split(">")[1], end="\t")print(contest[7].contents[0].string, end="\t")print(contest[8].contents[0].string, end="\t")print(contest[9].contents[0].string, end="\t\n")if __name__ == '__main__':FORMAT = "[PojAutoSubmit]-----%(message)s------"logging.basicConfig(level=logging.INFO, format=FORMAT)#用户名 , 密码 (明文)poj = SubmitPoj("用户名", "密码")if poj.login():logging.info("login success!")poj.submit("1700", 2 , poj.decode(SubmitCode.javaCode))poj.submit("1000", 0 , poj.decode(SubmitCode.cppCode))logging.info("submit success!")poj.status()logging.info("search status success!")


class SubmitCode():javaCode = '''
import java.io.BufferedReader;  
import java.io.InputStream;  
import java.io.InputStreamReader;  
import java.io.PrintWriter;  
import java.math.BigInteger;  
import java.util.Arrays;  
import java.util.StringTokenizer;  public class Main {  public static void main(String[] args) {  new Task().solve() ;  }  
}  class Task{  InputReader in = new InputReader(System.in) ;  PrintWriter out = new PrintWriter(System.out) ;  long sum(int left , int right , int[] num){  if(left == right || right == left + 1) return num[right] ;  else if(right == left + 2) return num[left] + num[left+1] + num[left+2] ;  else{  long way1 = (num[right] + num[left] + num[right-1] + num[left]) ; //(最慢最快)->最快回->(次慢最快)->最快回  long way2 = (num[left+1] + num[left+1] + num[right] + num[left]) ; //(次快最快)->次快回->(最慢次慢)->最快回  return Math.min(way1, way2) + sum(left , right-2 , num) ;  }  }  void solve(){  int t = in.nextInt() ;  while(t-- > 0){  int n = in.nextInt() ;   int[] num = new int[n] ;  for(int i = 0 ; i < n ; i++) num[i] = in.nextInt() ;   Arrays.sort(num) ;  out.println(sum(0, n-1 , num)) ;  }  out.flush() ;  }  }  class InputReader {      public BufferedReader reader;      public StringTokenizer tokenizer;      public InputReader(InputStream stream) {      reader = new BufferedReader(new InputStreamReader(stream), 32768);      tokenizer = new StringTokenizer("");      }      private void eat(String s) {      tokenizer = new StringTokenizer(s);      }      public String nextLine() {      try {      return reader.readLine();      } catch (Exception e) {      return null;      }      }      public boolean hasNext() {      while (!tokenizer.hasMoreTokens()) {      String s = nextLine();      if (s == null)      return false;      eat(s);      }      return true;      }      public String next() {      hasNext();      return tokenizer.nextToken();      }      public int nextInt() {      return Integer.parseInt(next());      }      public long nextLong() {      return Long.parseLong(next());      }      public double nextDouble() {      return Double.parseDouble(next());      }      public BigInteger nextBigInteger() {      return new BigInteger(next());      }      }      '''cppCode='''
#include <iostream>using namespace std;int main()
{int a,b;cin >> a >> b;cout << a+b << endl;return 0;
}'''if __name__ == '__main__':print(SubmitCode.javaCode)


17090613	1700	Accepted	Java	2823B	2017-06-19 08:40:34	
17090612	1000	Accepted	G++	134B	2017-06-19 08:36:37	
17086082	1000	Compile Error	G++	47B	2017-06-16 17:15:03	
17086081	1000	Accepted	G++	128B	2017-06-16 17:14:51	
17086072	1000	Compile Error	Java	128B	2017-06-16 17:10:43	
17086062	1000	Compile Error	G++	47B	2017-06-16 17:07:19	
17085929	1030	Compile Error	GCC	34B	2017-06-16 15:51:16	
17085926	1010	Compile Error	GCC	34B	2017-06-16 15:49:54	
17085905	1000	Compile Error	GCC	34B	2017-06-16 15:45:17	
17085888	1001	Compile Error	GCC	34B	2017-06-16 15:41:43	
17085882	1000	Compile Error	Java	640B	2017-06-16 15:39:36	
17085878	1000	Accepted	Java	479B	2017-06-16 15:38:29	
17085781	1000	Compile Error	Java	420B	2017-06-16 14:52:23	
17085780	1000	Compile Error	Java	560B	2017-06-16 14:52:17	
17085773	1000	Accepted	Java	313B	2017-06-16 14:48:29	
17085766	1000	Accepted	Java	313B	2017-06-16 14:46:57	
16839463	3237	Accepted	Java	5998B	2017-04-06 14:11:27	
16838503	2763	Accepted	Java	5510B	2017-04-06 09:12:45	
16835470	2763	Accepted	Java	5376B	2017-04-05 17:13:41	
16834457	3321	Accepted	Java	2645B	2017-04-05 14:02:26	





这篇关于Python3 BeautifulSoup爬虫 POJ自动提交的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1150470

相关文章

作业提交过程之HDFSMapReduce

作业提交全过程详解 (1)作业提交 第1步:Client调用job.waitForCompletion方法,向整个集群提交MapReduce作业。 第2步:Client向RM申请一个作业id。 第3步:RM给Client返回该job资源的提交路径和作业id。 第4步:Client提交jar包、切片信息和配置文件到指定的资源提交路径。 第5步:Client提交完资源后,向RM申请运行MrAp

poj 3974 and hdu 3068 最长回文串的O(n)解法(Manacher算法)

求一段字符串中的最长回文串。 因为数据量比较大,用原来的O(n^2)会爆。 小白上的O(n^2)解法代码:TLE啦~ #include<stdio.h>#include<string.h>const int Maxn = 1000000;char s[Maxn];int main(){char e[] = {"END"};while(scanf("%s", s) != EO

hdu 2602 and poj 3624(01背包)

01背包的模板题。 hdu2602代码: #include<stdio.h>#include<string.h>const int MaxN = 1001;int max(int a, int b){return a > b ? a : b;}int w[MaxN];int v[MaxN];int dp[MaxN];int main(){int T;int N, V;s

poj 1511 Invitation Cards(spfa最短路)

题意是给你点与点之间的距离,求来回到点1的最短路中的边权和。 因为边很大,不能用原来的dijkstra什么的,所以用spfa来做。并且注意要用long long int 来存储。 稍微改了一下学长的模板。 stack stl 实现代码: #include<stdio.h>#include<stack>using namespace std;const int M

poj 3259 uva 558 Wormholes(bellman最短路负权回路判断)

poj 3259: 题意:John的农场里n块地,m条路连接两块地,w个虫洞,虫洞是一条单向路,不但会把你传送到目的地,而且时间会倒退Ts。 任务是求你会不会在从某块地出发后又回来,看到了离开之前的自己。 判断树中是否存在负权回路就ok了。 bellman代码: #include<stdio.h>const int MaxN = 501;//农场数const int

poj 1258 Agri-Net(最小生成树模板代码)

感觉用这题来当模板更适合。 题意就是给你邻接矩阵求最小生成树啦。~ prim代码:效率很高。172k...0ms。 #include<stdio.h>#include<algorithm>using namespace std;const int MaxN = 101;const int INF = 0x3f3f3f3f;int g[MaxN][MaxN];int n

poj 1287 Networking(prim or kruscal最小生成树)

题意给你点与点间距离,求最小生成树。 注意点是,两点之间可能有不同的路,输入的时候选择最小的,和之前有道最短路WA的题目类似。 prim代码: #include<stdio.h>const int MaxN = 51;const int INF = 0x3f3f3f3f;int g[MaxN][MaxN];int P;int prim(){bool vis[MaxN];

poj 2349 Arctic Network uva 10369(prim or kruscal最小生成树)

题目很麻烦,因为不熟悉最小生成树的算法调试了好久。 感觉网上的题目解释都没说得很清楚,不适合新手。自己写一个。 题意:给你点的坐标,然后两点间可以有两种方式来通信:第一种是卫星通信,第二种是无线电通信。 卫星通信:任何两个有卫星频道的点间都可以直接建立连接,与点间的距离无关; 无线电通信:两个点之间的距离不能超过D,无线电收发器的功率越大,D越大,越昂贵。 计算无线电收发器D

poj 1502 MPI Maelstrom(单源最短路dijkstra)

题目真是长得头疼,好多生词,给跪。 没啥好说的,英语大水逼。 借助字典尝试翻译了一下,水逼直译求不喷 Description: BIT他们的超级计算机最近交货了。(定语秀了一堆词汇那就省略吧再见) Valentine McKee的研究顾问Jack Swigert,要她来测试一下这个系统。 Valentine告诉Swigert:“因为阿波罗是一个分布式共享内存的机器,所以它的内存访问

uva 10061 How many zero's and how many digits ?(不同进制阶乘末尾几个0)+poj 1401

题意是求在base进制下的 n!的结果有几位数,末尾有几个0。 想起刚开始的时候做的一道10进制下的n阶乘末尾有几个零,以及之前有做过的一道n阶乘的位数。 当时都是在10进制下的。 10进制下的做法是: 1. n阶位数:直接 lg(n!)就是得数的位数。 2. n阶末尾0的个数:由于2 * 5 将会在得数中以0的形式存在,所以计算2或者计算5,由于因子中出现5必然出现2,所以直接一