news 2026/4/16 14:33:35

记一次线上debug

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
记一次线上debug
故事发生在今天下午,企业微信告警群里发现有供应商在疯狂上传回执单,并且回执单都没有通过,而是卡在了异常状态。通常这种状态是供应商上传的回执单不符合格式,或者上传的是一个损坏的文件。
我留心了一下,找到对应账单去审查流转记录,发现供应商上传的文件符合格式,但是异常中断,于是去核查脚本的日志,发现大模型部署的机器ip访问不通了,并且会重试3次(埋下伏笔)
golang服务会调用python脚本进行回执单校验,这个脚本调用了我们本地部署的一个大模型,大模型所在的服务器是放在河南的某个机房里。
于是我立刻找运维确认,该服务器被误下机了,恢复需要至少明天。
为了解决供应商的燃眉之急,我必须修改脚本放开校验流程,捕捉异常情况后模拟返回正常响应。让用户再次尝试上传,结果用户侧反馈网络错误。
except Exception as e: # 异常情况输出 # error_result={ # "code":500, # "success":False, # "message":str(e), # "data":None # } # 返回成功响应(自动通过) success_result = { "code": 0, "success": True, "data": { "receipt_id": receipt_info.get('id', 0) if receipt_info else 0, "bill_id": args_bill_id, "verify_status": 1, # 1=校验通过 "verify_msg": [], "receipt_info": { "receipt_bill_num": "AUTO_PASS", "total_amount": 0, "has_stamp": True, "category": "clear_stamp", "clarity_score": "1000" } }, "message": "自动通过(大模型服务暂时不可用)" } print(json.dumps(success_result, ensure_ascii=False)) logging.info(f"自动通过结果:{json.dumps(success_result, ensure_ascii=False)} \n")
我查看服务端日志,发现并没有异常返回,程序正常执行。于是本地安装抓包工具,登录测试账号进行验证,发现真的会转圈圈,抓包反馈超时。于是才想起来调用大模型api的时候,是会尝试3次的,这三次的时间加起来超过了服务端的超时时间。
于是再次修改代码,直接在调用大模型之前raise,问题得以顺利解决,不过在新服务器上架之前,我必须人工核验这些回执单
def _call_llm_api_with_image(self,prompt: str,image_data: bytes) -> str: """调用大模型API处理图片""" # 临时关闭大模型调用,直接抛出异常 raise Exception("大模型服务暂时关闭")
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/6 14:50:31

推荐一个基于 C# 开发的摸鱼背单词好帮手 ToastFish

欢迎来到 Dotnet 工具箱!在这里,你可以发现各种令人惊喜的开源项目!摸鱼神器ToastFish 是一款使用 C# 开发的桌面软件,由 Uahh 开发。它是一款利用 Windows 通知栏 来帮助用户背单词的工具,特别适合在上班、上课等不方…

作者头像 李华
网站建设 2026/4/12 13:31:45

WE Learn智能学习助手技术解析与实践指南

WE Learn智能学习助手技术解析与实践指南 【免费下载链接】WELearnHelper 显示WE Learn随行课堂题目答案;支持班级测试;自动答题;刷时长;基于生成式AI(ChatGPT)的答案生成 项目地址: https://gitcode.com/gh_mirrors/we/WELearn…

作者头像 李华
网站建设 2026/4/8 11:12:13

S7 - 1200 一拖三恒压供水项目全解析

全套S7-1200一拖三恒压供水程序样例PID样例触摸屏样例 。 1、此程序采用S7-1200PLC和KTP1000PN触摸屏人机执行PID控制变频器实现恒压供水.商品包括plc程序,触摸屏程序,项目图纸(重要)! 2.程序为实际操作项目案例程序&a…

作者头像 李华
网站建设 2026/4/16 12:37:34

探究MATLAB下考虑能源集线器的电热综合能源市场双层出清模型

MATLAB代码:考虑能源集线器参的电热综合能源市场双层出清模型 关键词:综合能源 双层模型 能源集线器 市场出清 参考文档:《Participation of an Energy Hub in Electricity and Heat Distribution Markets: An MPEC Approach 仿真平台&…

作者头像 李华
网站建设 2026/4/16 14:23:05

Thinkphp的校园人脸识别的失物招领平台的设计与实现

目录摘要项目开发技术介绍PHP核心代码部分展示系统结论源码获取/同行可拿货,招校园代理摘要 校园失物招领平台结合人脸识别技术,基于ThinkPHP框架设计,旨在解决传统失物招领效率低、信息匹配困难的问题。系统采用B/S架构,整合人脸识别算法与…

作者头像 李华