企业官网建设流程全解析

培训心得总结怎么写,外贸网站seo推广,洛南网站建设,秀米h5页面怎么制作Codeforces Bot开发实战#xff1a;从零构建自动化竞赛助手 适用人群#xff1a;已会用 Python 写脚本、想省掉“复制-粘贴-等待网页刷新”这些机械动作的中级玩家 目标#xff1a;把一次提交从平均 5 分钟压到 20 秒以内#xff0c;训练效率翻 3 倍不是梦。 1. 手动刷题到…Codeforces Bot开发实战从零构建自动化竞赛助手适用人群已会用 Python 写脚本、想省掉“复制-粘贴-等待网页刷新”这些机械动作的中级玩家目标把一次提交从平均 5 分钟压到 20 秒以内训练效率翻 3 倍不是梦。1. 手动刷题到底慢在哪先放一组我本地统计的“裸人工”数据样本 100 场不包括 Div.4步骤平均耗时读完题意→本地写完9.3 min登录网页→找到题目页1.1 min复制代码→选语言→粘贴→点击 Submit0.9 min等待评测队列回退看结果3.1 min如果 WA→Debug→再次提交循环 2-4 次一次 AC 平均5.1 min都耗在了“网页交互”上一天 15 题就是 75 分钟纯机械劳动。把这部分自动化等于每天白捡1 小时写题时间长期复利非常夸张。2. 技术选型Requests vs. aiohttp指标Requests同步aiohttp异步单线程 100 次空体 GET18.7 s2.1 s并发 100 次 Submit 仿真49 s5.3 sCPU 占用5 %7 %代码可读性结论网络 I/O 占大头异步直接 *10 倍 QPSCodeforces 官方限速 1 req/s但“并发队列”能把等待重叠整体体感提升aiohttp 的timeoutClientTimeout(total20)与connectorTCPConnector(limit30)足够应付。下面整套 Bot 就基于asyncio aiohttp搭建。3. 核心模块拆解3.1 API 鉴权OAuth2 简化版Codeforces 没走标准 OAuth2而是“Cookie CSRF Token”双校验步骤如下GET 登录页→解析csrf_tokenPOST 账号密码Token→拿SESSIONCookie后续所有请求带Cookie: SESSIONxxxX-CSRF-Token头关键代码已加异常重试async def fetch_csrf(client: aiohttp.ClientSession) - str: async with client.get(/enter) as resp: text await resp.text() if resp.status ! 200: raise RuntimeError(Login page unreachable) match re.search(rnamecsrf_token.value(.?), text) if not match: raise RuntimeError(CSRF not found) return match.group(1) async def login(client, user: str, pwd: str) - None: token await fetch_csrf(client) payload {csrf_token: token, handleOrEmail: user, password: pwd} async with client.post(/enter, datapayload, allow_redirectsFalse) as resp: if resp.status ! 302: raise RuntimeError(Login failed) # SESSION 已自动落入 CookieJar会话保持机制全局复用同一个aiohttp.ClientSession(connectorconn, headersbase_header)设置cookie_jaraiohttp.CookieJar()让框架自动维护 Cookie退出时await client.close()保证 TCP 连接池干净释放3.2 提交监控器轮询优化评测状态接口/api/contest.status返回 JSON官方建议间隔 ≥ 2 s。但实测 1.2 s 也不会 429为了稳用“指数退避”async def wait_for_verdict(client, contest_id, sub_id): delay, cap 1, 16 while True: await asyncio.sleep(delay) stat await get_submission_status(client, contest_id, sub_id) if stat in (TESTING, PRETTEST): delay min(delay * 2, cap) continue return stat平均等待 3.4 轮、总耗时 9 s比固定 2 s 无脑轮询快 30 %。速率限制规避全局asyncio.Semaphore(4)控制并发防止瞬间 20 请求把 IP 封掉。3.3 代码自动生成器Jinja2 模板把“读入模板→填充→写文件→提交”做成一条链from jinja2 import Environment, FileSystemLoader env Environment(loaderFileSystemLoader(templates)) tpl env.get_template(main.py) def gen_code(desc: dict) - str: return tpl.render( modint(1e97), Tdesc[tc], data_structdesc.get(struct, ) )模板示例节选import sys, math sys.setrecursionlimit(2000000) def solve(): data sys.stdin.readline().strip() # {{ data_struct }} print(ans) if __name__ __main__: solve()4. 完整可运行骨架含异常处理import aiohttp, asyncio, re, json, time, hmac, hashlib from aiohttp import ClientTimeout, TCPConnector class CfBot: def __init__(self, user: str, pwd: str): self.user user self.pwd pwd self.sem asyncio.Semaphore(4) self.jar aiohttp.CookieJar() timeout ClientTimeout(total20) connector TCPConnector(limit30, ttl_dns_cache300) self.session aiohttp.ClientSession( connectorconnector, timeouttimeout, cookie_jarself.jar, headers{User-Agent: cfbot/1.0}, ) async def __aenter__(self): await login(self.session, self.user, self.pwd) return self async def __aexit__(self, exc_type, exc, tb): await self.session.close() async def submit(self, contest_id: int, prob: str, lang: str, code: str) - int: async with self.sem: # 速率限制 url f/contest/{contest_id}/submit token await fetch_csrf(self.session) data { csrf_token: token, ftaa: , bfaa: , action: submitSolution, contestId: str(contest_id), submittedProblemIndex: prob, programTypeId: lang, # 例如 54 对应 PyPy 3 source: code, } async with self.session.post(url, datadata, allow_redirectsFalse) as resp: loc resp.headers.get(Location, ) if my not in loc: raise RuntimeError(Submit rejected, probably rate limited) # 解析新提交 ID match re.search(rsubmission/(\d), loc) if not match: raise RuntimeError(Cannot parse submission id) return int(match.group(1)) async def verdict(self, contest_id: int, sub_id: int) - str: api fhttps://codeforces.com/api/contest/{contest_id}/submission/{sub_id} async with self.session.get(api) as resp: if resp.status ! 200: raise RuntimeError(API unavailable) data await resp.json() return data[result][verdict] async def safe_submit(self, *args, **kw): 带重试的封装 for attempt in range(1, 4): try: return await self.submit(*args, **kw) except RuntimeError as e: if attempt 3: raise await asyncio.sleep(2 ** attempt) # 指数退避响应数据校验所有 JSON 先json.loads()再对字段做pydantic.BaseModel校验缺字段直接抛ValidationError防止后面空指针。对 HTML 用BeautifulSoup抽数据时加if not node: raise ParseError快速失败。5. 性能压测 重试有效性用 Locust 写 30 虚拟用户脚本如下from locust import HttpUser, task, between class CfUser(HttpUser): wait_time between(1, 2) def on_start(self): self.client.post(/enter, data{...}) # 简写 task def status(self): with self.client.get(/api/contest.status?contestId1775, catch_responseTrue) as r: if r.status_code ! 200: r.failure(Got 429)结果RPS 峰值 22 → 触发 429Bot 侧立刻退避成功率 99.2 %关闭重试的对照组成功率仅 84 %且被临时 Ban 10 min。结论指数退避 Semaphore 把“误伤”降到可接受范围。6. 避坑指南反爬虫必须带User-Agent最好再带Referer同 IP 同账号 1 min 内别超 30 次提交若被 302 到/blocked立刻停 30 min 并弹警告。竞赛规则合规Bot 只能在自己账号、自己写的代码上跑替别人提交封号正式赛期间Running很多接口会 403提前判断phase ! FINISHED直接拒绝运行。本地缓存雪崩把题目列表、语言 ID 映射放aiocache.RedisTTL 6 h加随机 jitter防止重启瞬间几千并发把 Redis 打挂回退到本地 JSON 文件保证 Redis 挂掉也能启动。7. 效果实测跑两周Daily 20 题指标手工Bot平均提交间隔5 min 8 s38 s等待评测焦虑高低自动轮询代码模板错误3 次/周0统一模板训练时长节省—每天 65 min提升≈ 300 %没吹牛主要省的是“人肉网页操作”。8. 还能怎么玩——开放话题如何集成大模型实现智能代码修复把 WA 的测试差例喂给 Codex / ChatGLM让它输出修正补丁用抽象语法树对比“原函数 vs 补丁”确认只改逻辑不改框架自动再次提交→循环直到 AC 或达到重试上限。思路有了但风险是可能违反“一人一份代码”原则。你会怎么设计提示词、过滤策略既提速又不踩线欢迎留言一起脑洞。