士林表率、大学士倭仁跳出来反对。
倭仁（1804-1871），字艮峰，乌齐格里氏，蒙古正红旗人。道光进士，同治帝之师。清末理学领袖，同治年间顽固派首领。历任副都统、工部尚书、文渊阁大学士等。他上折说：“立国之道，尚礼义不尚权谋；根本之图，在人心不在技艺。”他认为，如果让中国的聪明隽秀人士都去学夷术了，后果会很严重：“正气为之不伸，邪气因而弥炽；数年以后，不尽驱中国之众咸归于夷不止。”不得不承认，老顽固对西方文明的本能恐惧是对的。
接下来继续说老顽固的奏折。身段一亮，几多士大夫轰然叫好！对于这么一个德高望重的顽固老头，慈禧自然不能像对待张盛藻那样一批了事，所以她专门召见了两大老顽固：倭仁与徐桐，与他们面对面商榷。但是倭老头不服气，否则他就不叫顽固派首领了。他再次上书，说办天文算学馆乃是“上亏国体，下失人心”。慈禧把倭仁的奏折交给奕訢，让他想想应对办法。
鬼子六一直在应对顽固派的道德舆论攻势，很累很被动，这会儿灵感一动，抓住了老顽固奏折里的漏洞，遂上了一折片，说：“既然倭仁说天文算学何必夷人，那说明倭仁耳目中已有适当人选了，太好了。请下旨着倭仁保举数员，另设别馆，由倭仁负责，我们静观其成。”
奕訢换了战术，这是调戏老头呢！没想到慈禧也顺竿子上了，跟在小叔子后面下发了这么一个谕旨：“倭仁原奏内称：‘天下之大不患无才，如以天文算学必须讲习，博采旁求，必有精其术者。’该大学士自必确有所知，着即保数员，另择地设馆，由倭仁督饬讲求，与同文馆各员互相砥砺，共收实效。”又命大学士倭仁在总理各国事务衙门行走。
老头被叔嫂如此联手调戏，羞愤啊！倭老头虽然不像另一个顽固派徐桐那样见了洋人生理上起恶心，需要以扇蔽面，但是你让他弄个天文算学馆、甚至让他到总理衙门上班天天与鬼打交道，呔，太恶心了。所以老头马上表示投降：奴才意中无精于天文算学之人，奴才也做不了总理衙门大臣。慈禧装模作样地批曰：现在没有，那就随时留意吧，有了赶紧保举上来。还有，总理衙门大臣这个职务你不能辞。还得干。
可怜的倭仁心情郁闷，心神恍惚，朝散上马回家时忽然就晕了过去——这可能是人类史上最早的假摔了！老头骑不得马了，借别人的轿子回了家。一回家就病了，可能是猪流感。他以此为由再次请求辞职，慈禧仍不准。只给他一个月的病假，不管装病真病，反正总有病好的一天，你别急，我们等你，总理衙门也等你！
以现在的语境看，倭仁活该被玩。问题是当时的世道人心恰恰在倭仁那边。老头儿身为帝师兼士林泰斗，不是做会试正考官，就是做殿试读卷官或者朝考阅卷大臣，多少状元、进士、翰林都是从他手下走过的啊。老头儿越惨，士林越是不服。继续有人上场向洋务派挑战。
候选直隶知州杨廷熙就是典型代表，上《奏请撤销同文馆以弥天变》。这家伙真能扯，居然认为设立同文馆其事其理其言其心有十不可解：
“然而中国之可羞可耻者，未有大于西洋之流毒、西人之倡乱矣。……乃今日不耻不共戴天之仇，而羞不知星宿之士，何望大耻而务于小耻也！此臣之不解者一也。”
