两千张表,三百万病人:一场没有”撤销”按钮的迁移

“如果现在停止迁移,数据会不一致,永远回不去了。”

凌晨两点,XX医院数据中心。老周盯着屏幕上的进度条,手在发抖。

迁移进度:87%。

总数据量:2.3 TB。

Tables 数量:2176张。

涉及的核心业务:三百万病人的历史病历、五年门诊记录、三年住院档案。

如果失败,后果不堪设想。

但迁移已经开始,没有”撤销”按钮。

1. 为什么这个迁移这么难?

这次迁移,不是简单的”升版本”,而是从旧架构V3.0,迁移到新架构V4.0

两个架构的区别:

– V3.0是单体数据库,所有业务数据在一张库

– V4.0是微服务架构,业务数据分库分表:门诊库、住院库、药房库、财务库、病历库…

以前的迁移,只需要在同一个数据库里改表结构,数据不动——这次,要把数据从”一张大饼”拆成”五块小饼”,还要保证每块小饼都能重新拼回原来的样子(如果失败回滚)。

难点:

1. 数据拆分逻辑复杂:比如门诊缴费记录,原来在payment表里,现在要拆成paymentheader(支付头)和paymentitems(支付明细);还要关联到outpatient_visit(门诊就诊)表。拆分规则涉及六张表。

2. 历史数据质量堪忧:三年积累的数据,有很多”脏数据”——重复记录、缺失字段、编码错误(比如性别填了”未知”),这些在V3.0时代都容忍了,但V4.0的schema有严格约束,脏数据会导入失败。

3. 没有”试错”机会:迁移窗口只有两天(五一假期门诊量少)。两次迁移机会——第一次失败,第二次必须在12小时内完成,否则影响初二开诊。如果两次都失败,就只好延期,等着杨院长问责。

老周带人准备了三个月:

– 写迁移工具(自己开发的data-migrator

– 清洗脏数据脚本

– 回滚方案

– 全量演练三次,每次都发现问题,每次都改,第三次演练才成功

但演练再成功,也不是真迁移。

2. 迁移开始后,第一个坑:脏数据

晚上八点,迁移开始。

前两个小时顺利:系统库、用户表、权限表…都是一马平川。

十点,开始迁移核心业务数据。

payment表开始迁移,1%…2%…

突然,报错。

“`
ERROR: Violation of NOT NULL constraint: column ‘patient_id’ cannot be null
“`

日志里指明,有一条记录的patient_id是NULL。

这是脏数据。

老周让小吴排查:SELECT COUNT(*) FROM payment WHERE patient_id IS NULL

结果:73条。

这些记录,都是V3.0时代的老数据,可能是创建记录时系统bug,patient_id没填。

小吴说:”跳过这73条吧,不影响整体。”

“不行。”老周说,”如果跳过,对账的时候会发现门诊对不上。而且,如果这73条都是大额缴费,财务损失谁负责?”

他们做了个决定:现场清洗

写了一条UPDATE语句,试图从其他表关联补全patientid。但关联发现,这73条记录对应的visitid也缺失,无法追溯到具体是哪次就诊。

死循环。

“只能手工造一个patient_id了。”小吴说,”造一个虚拟患者,把这73条付款挂到他名下。等迁移完成,我们在新系统里加一个’未知患者’账户,把这些数据放进去,后续再处理。”

老周犹豫。虚拟数据虽然能过关,但数据准确性打了折扣。

“有没有其他办法?”

“或者,我们暂停迁移,先回滚,把脏数据彻底清理完再迁?”

回滚意味着放弃这次窗口,五一假期只剩一天了,不够。

时间不等人。

老周咬了咬牙:”现场清洗——把有问题的数据,标上’待处理’标签,迁过去后我们在新系统里专门建一个’脏数据沙箱’,隔离存放。”

这是妥协,但迁移不能停。

3. 第二个坑:数据不一致

凌晨一点,进度到63%。

小吴发现一个问题:visitdate字段,在V3.0里是datetime类型,V4.0里拆分成visitdate(日期)和visit_time(时间)。迁移工具把小吴写得有bug:在拆分日期和时间时,时区处理错了。

V3.0存储的是本地时间(东八区),迁移工具当成UTC时间处理,减了8小时。

结果:所有就诊时间的visit_time,都比实际时间晚8小时。

比如一次早上8点的就诊,迁过去后变成了凌晨0点。

“天呐…”小吴脸白了。

老周也傻了。

这不是小问题。时间错误,会影响排班、统计、甚至医保结算(医保要求精确到小时)。

“修复这个bug,但已经迁过去的数据怎么处理?”

更可怕的是:已经迁了63%的数据,现在发现一个重大bug,是继续迁(错上加错),还是回滚?

继续,所有数据都错,无法挽回。

回滚,63%的数据要清理,重新迁,时间不够。

老周深吸一口气:”调出这个bug的影响范围数据。我们现场修复——迁过去的63%,我们另写一个’修正脚本’,把时间加8小时。”

小吴心算了一下:数据量800万条,修正脚本跑一遍要2小时。

“时间够吗?”

“不够也要够。”老周说。

4. “修正脚本”成为赛跑

老周和团队吃了两片咖啡因,开始写修正脚本。

脚本逻辑很简单:

“`sql
UPDATE outpatient_visits
SET visit_time = DATEADD(hour, 8, visit_time)
WHERE visit_time IS NOT NULL
“`

但要跑800万行,必须在2小时内完成,否则夜深了,医院的业务开始恢复,没机会再改。

他们优化:

1. 分批更新,每次10万行,commit 后继续

2. 加索引:在visit_time上建临时索引,加速 update

3. 关掉binlog,减少IO

4. 调大innodbbufferpool_size,确保数据在内存里

脚本跑起来,每分钟更新12万行。

一小时,600万。

凌晨三点,修正完成。

迁移继续。

5. 最后一个坑:外键约束冲突

早上七点,进度97%。

只剩最后一批数据迁移:prescription(处方)表。

报错:

“`
ERROR: Cannot add or update a child row: a foreign key constraint fails (`prescription` constraint `fk_prescription_visit`)
“`

意思是:有一条prescription记录,引用的visitid,在outpatientvisit表里找不到。

脏数据 again。

但这次很奇怪:前96%的数据都关联成功,为什么最后3%会丢?

小吴排查:最后这批数据,是2024年12月31日跨年的那批。那几天系统做了一次数据归档——把半年前的记录移到历史库。

但归档工具可能有bug,把某些visit_id漏了。

“跳过吧,”小吴说,”就几条处方,影响不大。”

“不行。”老周说,”处方是核心业务,漏一条,病用药记录就不全。而且,这是系统性问题的体现——如果这里漏了,其他地方呢?”

他们决定:现场补数据

方法:从旧库(V3.0)里,把这批visit_id对应的记录,手动补出来,再导入新库。

旧库还没关,可以查。

但旧库是生产环境,不能直接操作。他们只能查,不能改。

查询:SELECT * FROM outpatientvisit WHERE visitid IN (xxx, yyy, zzz)

发现这三条visitid对应的记录,已经被归档到outpatientvisit_history表了。

迁移工具没考虑到这种情况——只迁了主表,没迁历史表,导致引用断裂。

小吴把这些历史记录也迁过去,但迁到outpatient_visit主表(违反了业务逻辑,历史记录不应该混在主表里)。

“标记为历史记录。”老周说。

6. 100%完成后,还有验证

早上八点,迁移工具显示:100%。

所有人松了一口气。

但老周没放松:”迁移完成,不算完成;数据验证通过,才算完成。”

他们有一套验证流程:

1. 行数对比:每张表的记录数,新库 vs 旧库,差异率<0.1%

2. 总和校验:对金额、数量等关键字段,做SUM对比,应该相等

3. 样本抽查:随机抽取1000条记录,逐字段对比,应该一致

4. 业务逻辑验证:跑一遍核心业务流程(挂号→开处方→缴费),结果应该一致

前三个通过,第四个出问题。

模拟一次门诊全流程:挂一个号,开三个药,缴费。

在V4.0里,挂号的visitid,和处方的visitid,对不上。

又一轮排查发现:visit表的id字段是自增的,迁移过程中,新库的自增起点没设置对,导致新生成的ID和旧的不一样。但prescription表里的visit_id是直接迁过来的(旧的ID值),而新挂号的ID是新产生的(新的自增值),两者当然对不上。

“这是一个’活数据’问题,不是迁移问题。”小吴说。

老周明白了:迁移只迁了历史数据,但迁移完成后,新产生的数据用的ID和旧数据不连续。这会影响对账、追溯等需要全局ID唯一性的场景。

解决的方案:重置自增ID的起点,让它从旧库的最大ID+1开始。

但问题是:迁移后已经产生了一条新挂号记录(验证用的),ID是1。重置起点后,这条记录的ID会和后面的冲突。

只能删除这条验证数据,重置ID,再重新验证一次。

折腾到中午十二点,全部通过。

7. 事后反思:我们做对了什么?

这次迁移后,老周写了长篇复盘。

他的结论:

1. “现场清洗”是必须的能力

– 不要指望数据100%干净再迁

– 要能在迁移过程中,实时发现脏数据,实时处理(跳过、修正、隔离)

2. 修正脚本应该提前准备好

– 不是所有bug都能在迁移前发现

– 为每一类可能的数据问题,提前写好”修正脚本模板”,迁移时填参数就能跑

3. 验证必须自动化

– 人工抽查不够,要有程序自动跑完整的数据验证流程

– 验证通过率应该>99.99%

4. 要有”回滚点”概念

– 每完成一个业务单元(如门诊库),就做一个”回滚点”

– 后面的阶段失败,可以回滚到这个点,而不是全部重来

5. “迁移”不只是”搬数据”

– 还包括:ID生成策略、自增主键连续性、时间戳时区、字符集转换…

– 任何细节出错,都会导致业务逻辑错误

互动话题

你经历过最复杂的数据迁移是什么?有什么经验教训?

> 基于真实医院场景改编,人物均为化名


立即免费试用门诊系统https://app.kmhis.com/
International Versionhttps://app.kmhis.com/multi/
了解软佳门诊管理系统详情https://www.kmhis.com/outpatient-management-system.html


扫码预约

手机扫码试用患者预约。请勿输入个人真实信息(点击图片可查看原图)

支持8种语言:简体中文、繁体中文、香港中文、English、藏文、泰文、老挝语、越南语


说真的。这类问题我见过太多了。每次看到医院同事为选型头疼。我就想,要是早点有人把这些经验分享出来就好了。毕竟。选择不对。后面全是麻烦。选择对了。省心省力。还能提升整个机构的运行效率。希望这篇能帮到正在纠结的你。

你如果有具体需求。也可以去 www.kmhis.com 看看。那里有更详细的技术方案和案例。

合同里那一条”最终解释权”差点毁掉合作

XX医院的合同谈判进入最后一轮。会议室里,长桌两侧分别坐着医院采购小组的七个人和昆明软佳的谈判团队。赵主任作为信息科负责人,拿着一份打印好的合同草案,逐条审阅。

翻了十几页,他的目光停留在第15条:

第15条 最终解释权

本合同的一切解释权归乙方(软佳公司)所有。如有争议,由乙方单方面解释并处理。

赵主任抬起头,脸色有点不好看:”你们能不能把这条删掉?”

软佳的区域经理老王愣了愣:”赵主任,这是我们的标准条款,所有医院都签,没出过问题。”

“但我不想签一个对自己不利的条款。”赵主任的声音平静但坚定,”万一以后有争议,我们连说话的地方都没有。这就像是 belts and braces,法律上可能站不住脚,但心理上让人不舒服。”

医院财务科王科长也附和:”我们医院是大单位,不能签这种显失公平的条款。如果连解释权都在对方手里,我们管理层怎么向院长交代?”

老王急忙解释:”赵主任,这条只是形式。真要有争议,我们肯定会协商解决,不会真的’单方面解释’就完事。而且这是我们的标准合同,如果要改,需要总部特批,流程很长。”

“那我们就按标准流程等,”赵主任把合同合上,”要么改,要么我们考虑重新招标。”

谈判气氛瞬间降至冰点。医院方面没人说话,软佳团队面面相觑。他们没想到,这么一条看似”例行公事”的条款,会成为签约的拦路虎。

1. 一条”标准条款”为什么重要?

当天晚上,老王回到酒店,给总部发邮件请示。总部法务回复:”标准条款不能改,否则其他客户会效仿,我们的统一合同体系会被打乱。”

老王苦笑。他知道赵主任的担心不是没有道理。很多供应商在合同里藏了”霸王条款”,比如最终解释权、单方面变更权、免责条款等,乍看没什么,一旦出纠纷就处于弱势。医院这种单位,最怕的就是”签完合同就被动了”。

小张——软佳的客户经理——也在思考。他回想赵主任那天的表情:不是咄咄逼人,而是失望。赵主任其实很重视这次合作,他认可软佳的技术方案和服务,但这条款让他觉得”不够尊重”。

小张意识到:合同条款不仅是法律文件,也是关系文件。 如果在签合同前就让客户感到不平等,后面合作再好,心里也会有根刺。

但总部不同意改,怎么办?

2. 改变的思路:用价值交换

第二天,小张约赵主任单独喝茶,没有其他人在场。

“赵主任,关于那条解释权,我想听听您的真实想法——除了’不公平’,您最担心的是什么?”

赵主任沉默片刻,说:”我们医院这几年信息化投入很大,HIS系统是核心。我们选择供应商,不只是买软件,更是找长期合作伙伴。如果合同写’解释权归对方’,意味着在系统升级、功能变更、纠纷处理上,我们要么接受要么终止,没有商量余地。这种感觉,就像把自己的命交到别人手里。”

小张点点头:”我理解。其实我们内部也觉得这条不太合适,但它确实是标准条款。我在想,有没有折中方案——既能照顾贵院的感受,又不让我们违反公司规定。”

“什么方案?”

“比如,我们可以把这一条改成:’双方共同解释,如有分歧通过友好协商解决;协商不成的,提交XX仲裁委员会仲裁。’这样既不是医院单方面说了算,也不是我们单方面说了算,而是共同管理。”

赵主任眉毛扬了扬:”继续。”

“同时,”小张顿了顿,”如果贵院同意删除原条款,我们可以在付款条件上做一些让步——比如首付比例从30%提高到50%,尾款由一年缩短到六个月。这样我们提前收到的钱多一些,风险降低,总部那边我也好交代。”

赵主任沉思良久。

3. 内部角力:总部的底线

小张回到公司,把赵主任的反应和自己的想法汇报给总部。

总部合同法务 initially 反对:”删除最后解释权可以,但必须让客户在其他方面补偿我们。否则每家企业都来砍条款,我们的合同就乱套了。”

财务也参与了讨论:”提前收款是好事,但首付提高到50%,有些客户可能现金流紧张,反而影响签约。不过XX医院是三甲,付款没问题。”

经过两天的会议,总部给出最终方案:

– 可以删除”最终解释权”条款。

– 替换为”双方共同解释,协商不成则仲裁”。

– 作为交换,首付款从30%提升到50%,尾款从12个月缩短至6个月。

– 其他条款保持不变。

老王看到方案后,对小张说:”你小子运气好,赵主任如果不同意,这单就黄了。”

小张心里清楚:这不是运气,而是找到了对方真正的痛点——赵主任不在乎多付点钱,他在乎的是合作的关系是否平等、透明。医院不缺钱,缺的是安全感。

4. 成交:一场共赢的谈判

小张再次来到医院,把两个选项放在赵主任面前:

选项A:保持原合同,不删除”最终解释权”,付款条件为首付30%,尾款12个月。

选项B:删除”最终解释权”,替换为共同解释+仲裁条款;付款条件为首付50%,尾款6个月。

赵主任盯着两个选项看了几分钟,抬起头:”我选B。”

“不加考虑?”

“钱多付一点没关系,关键是我们要的是平等合作。你们愿意删掉那个条款,说明把我们当真正的伙伴,不是甲方乙方。我信任你们。”

小张心里一块石头落地。他补充道:”赵主任,我保证,这个协商过程本身就会成为我们合作的基石——我们学会了坦诚沟通,互相倾听。”

一周后,合同正式签署。双方代表握手时,赵主任笑着说:”希望这是真正长期合作的开始。”

5. 三年后:那条条款的遗产

三年过去,HIS系统运行稳定。期间有过两次大的升级,每次软佳都提前一个月通知,并提供迁移工具。医院也追加了两个模块:移动查房和急诊分诊。

在一次升级复盘会上,赵主任对软佳的技术总监说:”还记得当年那条’最终解释权’吗?当时差点因为这个条款谈崩。”

技术总监笑了:”记得,我们内部还争论过该不该坚持。”

“现在我明白了一个道理:合同不仅是法律文件,更是关系文件。 你们愿意为删掉那条条款调整付款条件,说明你们在乎长期合作,不是一锤子买卖。”

赵主任接着说:”这三年,我们遇到问题随时联系,你们响应很快;有需求提出来,你们认真评估。这种无障碍的沟通,比任何完美合同都重要。如果我们当初因为那条僵硬的条款不欢而散,今天就不会有这种信任。”

软佳的区域经理接话:”其实那次谈判,对我们内部也是一种文化塑造。后来我们修改了标准合同模板,把所有’单方面解释’、’单方面变更’类条款都改成了协商机制。因为赵主任让我们看到:客户真正在意的是什么。”

6. 谈判的四个法则

事后,小张总结了这次谈判的四个法则:

1. 区分核心与非核心

“最终解释权”对软佳来说是非核心条款——删掉不会影响核心权利,但对客户来说却是心理核心——它代表尊重和平等。在非核心上让步,换取核心利益(合同能签、关系好、付款快),是划算的。

2. 创造互惠的机会

客户让一步,你也让一步。谈判不是零和游戏,而是价值交换。赵主任接受了更高的首付,软佳删掉了条款,双方都觉得”我得到了我想要的”。

3. 倾听比说服更重要

小张没有一上来就说”我们标准不能改”,而是问”您最担心的是什么”。了解到赵主任真正在意的是”被尊重的感觉”后,方案就好设计了。

4. 一次不好的谈判,可能毁掉十年的关系

如果当时软佳坚持原条款,哪怕最终用压力让医院签了字,后续合作也会带着疙瘩。而一次坦诚的让步,换来三年甚至更长时间的顺畅合作。

7. 法律与关系:平衡的艺术

很多法务人员倾向于把合同做得”滴水不漏”,处处为供应商设置有利条款。但从实战来看,过于强势的合同反而会让客户心存芥蒂,影响长期合作。

软佳后来形成了”合同谈判三原则”:

必须守住的底线:知识产权归属、保密责任、核心服务内容。

可以协商的非核心条款:解释权、付款细节、违约责任上限、通知方式等。

坚决不出现的霸王条款:单方变更权、无限责任转嫁、显失公平的免责。

“解释权”这件事成了公司内部的一个经典案例。新销售培训时,老张(现在的销售总监)常说:”别以为合同签下来就赢了。签合同只是开始,后面的合作长着呢。如果为了签合同而埋下雷,爆炸的时候炸的是自己。”

8. 从一次谈判到文化改变

这次经历还带来另一个变化:软佳在内部推行了”灵活协商机制”。对于标准合同,允许区域经理在不涉及核心利益的前提下,与客户协商调整条款,但必须记录原因并报备。公司发现,这种灵活性反而增强了客户的信任——因为他们感受到供应商愿意倾听、愿意合作。

有一次,一个客户提出修改”服务等级协议(SLA)”中的响应时间,把4小时改为2小时。软佳评估后认为技术上可行,便同意了。客户受宠若惊:”你们真改?”

“既然您提了,说明您在意,我们在能力范围内满足。”小张回答。

那个客户后来成了公司的”明星客户”,不仅续约率高,还介绍了三家新客户。

9. 关系的开始,往往是一个小让步

赵主任在三年后的今天,还会在行业会议上分享这个故事:”选择供应商,不光看技术和价格,更看合同有没有诚意。如果合同里全是’最终解释权归乙方’这类条款,再便宜我也不用。”

反过来,软佳的销售人员在面对新客户时,也会主动提起:”我们愿意把’解释权’改成协商机制,因为我们追求长期合作,不是一锤子买卖。”

一个小小的条款,差点毁掉一单合同;而一个 willingness to compromise,反而赢得了十年的伙伴。

互动话题

你们在合同谈判中,最常卡在哪一条?有没有因为坚持条款而失去客户,或者因为让步而赢得长期信任的经历?欢迎分享你们的”合同谈判故事”。

> 基于真实医院场景改编,人物均为化名


立即免费试用门诊系统https://app.kmhis.com/
International Versionhttps://app.kmhis.com/multi/
了解软佳门诊管理系统详情https://www.kmhis.com/outpatient-management-system.html


扫码预约

手机扫码试用患者预约。请勿输入个人真实信息(点击图片可查看原图)

支持8种语言:简体中文、繁体中文、香港中文、English、藏文、泰文、老挝语、越南语


说真的。这类问题我见过太多了。每次看到医院同事为选型头疼。我就想,要是早点有人把这些经验分享出来就好了。毕竟。选择不对。后面全是麻烦。选择对了。省心省力。还能提升整个机构的运行效率。希望这篇能帮到正在纠结的你。

你如果有具体需求。也可以去 www.kmhis.com 看看。那里有更详细的技术方案和案例。

一个看似不可能的任务:我们在三天内解决了XX医院的”绝症”问题

“你们能不能在三天内解决这个问题?如果不能,我们就换人了。”

会议室里,XX医院信息科李主任的声音很平静,但每个字都像一块石头,砸在我们项目经理小张的心上。窗外的春日阳光斜斜地照进来,照亮了空气中漂浮的尘埃,却照不进会议室里压抑的气氛。空调吹出的冷风扫过每个人的后背,让人不寒而栗。

这是合同签订后的第二个月,我们的HIS系统在XX医院上线测试的第五天。第五天,一个我们从未遇到过的数据同步问题浮出水面——门诊缴费数据无法实时同步到住院系统。简单说,病人在门诊交了费,住院处查不到,导致重复收费、漏收费,护士站怨声载道,财务科王科长已经来投诉三次了。

我们派出的工程师小刘已经熬了三个晚上,问题依旧。他黑着眼圈,头发凌乱,手指在键盘上飞舞,屏幕上的日志滚动如瀑布。测试环境一切都好,一到生产环境就出问题。日志里只有一堆”timeout”和”connection reset”,看不出所以然。

李主任给我们下了最后通牒:”三天,要么解决问题,要么走人。”他的眼神里没有威胁,只有一种深深的疲惫——那是被问题折磨了一个月后的绝望。

1. 表面的技术问题,背后是管理混乱

回公司的路上,车里没人说话。

车窗外的城市灯火璀璨,但车内一片阴沉。我们在技术圈子里摸爬滚打这么多年,什么疑难杂症没见过?数据库死锁、网络分区、应用OOM…但为什么这次被一个简单的数据同步卡住了?

小张盯着窗外飞驰而过的街景,思绪万千。他想起三年前在另一家医院做数据迁移时,也遇到过类似问题,但那次只用了半天就定位了。这次为什么这么难?

小刘突然说:”哥,我总觉得问题不在代码里。”

“那在哪里?”

“在医院网络的防火墙策略。我怀疑他们在应用层做了流量限制,或者中间有某个设备在做SSL拦截。”

小刘是公司最年轻的高级工程师,26岁,话不多,但一针见血。他打开笔记本电脑,快速画出数据流向图:从门诊收费终端,到HIS应用服务器,再到住院数据库,中间经过三道网络设备——防火墙、WAF、负载均衡。

“如果中间有设备做深度包检测,可能会拦截某些SQL语句。”小刘说。

张哥点点头:”但为什么测试环境没问题?”

“因为测试环境没有那三道设备,直接连数据库。”

2. 七台设备,两个未知节点

第二天一早,我们没带电脑,只带了笔记本和笔,直接去了XX医院的网络机房。

机房在住院部地下二层,恒温恒湿,蓝色LED灯闪烁。机房管理员老陈是个四十多岁的中年人,戴着眼镜,表情很冷淡,正在低头修一台交换机。

听说我们要查网络设备,他直摇头:”你们厂商就是喜欢折腾设备。问题是你们的软件有问题。”

“陈师傅,”小刘递上一支红塔山,”我们不急,就想看看贵院的网络拓扑,特别是HIS系统这条链路上有哪些设备。”

老陈犹豫了一下,接过烟:”跟你们说了也没用,这是内部网络结构,涉密。”

“我们签了保密协议。”李主任也来了,掏出协议给他看。

他扫了一眼,终于松口:”好吧,就看看,不能拍照。”

老陈拿出一张A3纸,画了一张拓扑图,用不同颜色的笔标注:

从HIS服务器(位于信息中心机房)到住院收费终端(分布在门诊楼、住院楼各楼层),中间经过七台设备:

1. 核心交换机(华为S7700,位于信息中心)

2. 防火墙(深信服AF-1000,位于信息中心)

3. WAF(Web应用防火墙,自研,位于安全接入区)

4. 负载均衡(F5 BIG-IP,位于应用前端)

5. 路由交换机(思科Catalyst 6500,住院楼核心)

6. 二层交换机(华为S5700,各楼层)

7. 住院收费终端(PC机,运行Windows 10)

问题出在数据从第3台WAF到第4台负载均衡之间。我们的服务调用住院数据库接口,先过WAF做安全检测,再过负载均衡分发到住院应用服务器。

小刘指着WAF和负载均衡之间的连线:”这里,我们要抓包。”

“抓不了。”老陈说,”WAF是省信息中心统一部署的,我们没有管理权限,只有使用权限。抓包要找省里审批。”

“那WAF的策略是谁维护?”

“省信息中心安全科。他们每季度更新一次规则,但从不告诉我们具体规则是什么。”

张哥心里一沉。这意味着我们要联系省里,走流程,申请排查。七天?一个月?都不够。

小刘却笑了:”哥,我有个想法。”

3. 绕开防火墙,但不能绕过规则

小刘的想法是:不直接连接住院数据库,通过门诊数据库做中转

“如果我们把门诊缴费成功的记录,先存到门诊库,然后让医院现有的数据同步工具(他们有个ETL任务,每5分钟同步一次),把数据从门诊库同步到住院库呢?”

张哥摇头:”住院实时缴费怎么办?病人缴费后要马上生成住院预交金,如果同步有延迟,病人没法办理手术。”

“我们可以加一个中间表,记录所有待同步的数据,再写一个监听程序,确保每条缴费记录都同步到住院库。同步失败就重试,重试三次还失败,就人工介入。”

“但如果数据不一致,财务对账会出大问题。”

“我们可以做到99.99%一致。”小刘眼神坚定,”我在之前项目用过类似方案。”

张哥知道,这方案最大的风险在于:这只是一时之计。如果长期这样,数据延迟会导致住院处无法实时掌握病人费用,影响医疗决策。

而且,一旦住院库有问题,门诊库也会被拖累——数据链路变长了,故障点变多了。

“这个方案能撑多久?”

“至少撑到我们拿到省里的WAF策略调整许可。”小刘说,”我打听到,省信息中心下个月要做一次WAF规则优化,我们可以把我们的情况报上去,申请白名单。”

张哥想想,这也是无奈之举。

4. 说服的关键:不是技术,是态度

我们带着方案去见李主任。

这一次,张哥没有带笔记本,而是带了一叠A4纸,上面手绘了数据流对比图:现状(直接连住院库)vs 临时方案(门诊库中转)。

他开门见山:”李主任,我们有两个方案。方案A:继续等省里审批,预计时间1-2个月,期间系统会持续不稳定。方案B:我们先上线一个临时方案,绕过WAF的误拦截,保证业务正常,同时我们去省里协调。”

李主任皱眉:”临时方案会不会影响数据安全?”

“不会。数据仍在医院内网流转,只是多了一步中转。而且,我们会加日志记录,所有数据流动可追溯。”

“那什么时候能彻底解决?”

“如果省里配合,一个月内。如果不配合,我们只能长期用这个方案,但我们会持续优化,确保延迟在3秒内。”

李主任看向网络管理员老陈:”你觉得呢?”

老陈说:”WAF确实是我们控制不了的。我建议先临时方案,同时周总你们去省里跑,我们医院也给省里发个函,说明业务影响。”

5. 72小时不眠不休

接下来的72小时,是我们职业生涯中最漫长的一段。

小刘带人写中转服务,这是一个Java应用,要监听门诊库的binlog,捕获缴费成功事件,然后写入住院库的中间表,再触发住院库的同步。

张哥在医院现场协调:

– 第一天:改造门诊收费模块,增加数据双写(同时写门诊库和中间表)

– 第二天:开发和部署中转服务,与住院系统联调

– 第三天:数据一致性验证,灰度上线

李主任几乎没回家,吃住都在医院,随时决策。

第三天凌晨四点,系统终于上线。

上线前,我们做了三轮压力测试:

– 模拟门诊高峰,1000个并发缴费请求,中转延迟平均1.2秒,最大3秒

– 住院端查询,数据一致率100%

– 故障切换:如果中转服务挂掉,门诊收费仍能正常进行,只是同步暂停,人工补同步

李主任看着测试报告,紧绷的脸终于有了一丝松动:”上线吧。”

6. 事后复盘,我们做对了什么?

一周后,系统运行稳定。

李主任请我们吃饭。酒桌上,他举杯:”说实话,那三天,我没想到你们能搞定。”

“为什么?”

“换别家厂商,遇到我们这种’受制于省里’的情况,早就推脱了。你们没推脱,而是给我们一个临时方案,让我们业务不停摆。”

张哥说:”关键不是技术方案多巧妙,是不放弃。”

李主任点头:”而且你们没把我们当外人——所有的决策,都让我们参与;所有的风险,都提前告诉我们。这种透明,让我们很放心。”

7. 省里协调:一个月后的好消息

与此同时,张哥跑省里的工作也有了进展。

他找到省信息中心安全科的科长,是一个45岁的技术男。张哥没有直接要策略,而是先做了三件事:

1. 准备数据:统计了XX医院过去一个月因WAF拦截导致的业务异常次数(37次),以及影响的患者数量(约5000人次)

2. 提供方案:写了一份详细的白名单申请,只申请对HIS系统的特定接口放行,并附上了安全自评报告

3. 承诺责任:如果因为放行导致安全事件,由软佳承担全部责任

科长被诚意打动,两周后批复:同意对XX医院HIS系统加白名单,为期一年,期满可续。

消息传来,李主任第一时间打电话给张哥:”你们怎么做到的?”

“周总说过:(‘解决问题,要找到问题的根源’)。问题的根源不是WAF,是沟通。”

8. 这次事件,让我们明白的五个道理

第一,技术问题往往是管理问题的表象

如果XX医院自己有WAF策略管理权,问题早就解决了。但因为他们把安全外包给了省里,就失去了主动性。我们作为供应商,只能适应环境,不能改变环境。

第二,临时方案不是妥协,是策略

永久方案需要时间,但业务不能等。临时方案的价值是赢得时间,同时不让客户受损。很多厂商不愿意做临时方案,觉得”不完美”,但客户才不管完美不完美,客户只要能用。

第三,信任建立在”困难时刻”

如果一切顺利,客户看不出供应商的差别。只有在困难时刻,才知道谁靠得住。那72小时,我们所有人都拼了,这种拼劲,客户 seeing 到了。

第四,跨层级协调是能力

我们不仅要解决技术问题,还要学会和省里、和其他部门协调。这种能力,比技术能力更重要。

第五,透明沟通比技术方案更重要

客户不关心你的技术多高深,客户关心的是:问题能不能解决?什么时候解决?过程中有什么风险?把一切都透明化,客户就不会猜疑。

9. 三个月后:系统稳定,客户满意

三个月后,XX医院HIS系统可用率达到99.95%,数据同步延迟平均0.5秒,住院处投诉率为零。

杨院长在一次IT座谈会上说:”我们信息化,最怕两种供应商:一种是技术不行,一种是服务不行。软佳两种都不占。他们技术扎实,服务到位,关键是有担当。”

这次事件,也成了软佳内部的经典案例,被写进新员工培训教材,标题是:《如何在72小时内解决一个看似不可能的问题》。

10. 核心观点:问题的大小,取决于你的态度

小刘后来在一次技术分享会上说:

“很多问题,看起来很大,是因为你把它当成’问题’。

如果你把它当成’任务’,就有思路;

如果你把它当成’机遇’,就有动力;

如果你把它当成’证明自己的机会’,就一定能解决。

(‘态度决定高度,高度决定角度’)

你用什么样的心态面对问题,问题就会以什么样的结果回报你。”

互动话题

你遇到过最棘手的技术问题是什么?是怎么解决的?

> 基于真实医院场景改编,人物均为化名


立即免费试用门诊系统https://app.kmhis.com/
International Versionhttps://app.kmhis.com/multi/
了解软佳门诊管理系统详情https://www.kmhis.com/outpatient-management-system.html


扫码预约

手机扫码试用患者预约。请勿输入个人真实信息(点击图片可查看原图)

支持8种语言:简体中文、繁体中文、香港中文、English、藏文、泰文、老挝语、越南语


说真的。这类问题我见过太多了。每次看到医院同事为选型头疼。我就想,要是早点有人把这些经验分享出来就好了。毕竟。选择不对。后面全是麻烦。选择对了。省心省力。还能提升整个机构的运行效率。希望这篇能帮到正在纠结的你。

你如果有具体需求。也可以去 www.kmhis.com 看看。那里有更详细的技术方案和案例。