最好的系统管理员WTF？

你肯定用自己的眼睛看到它（或即将）迟早：那个可怕的项目/系统/情况下得到的东西SO搞砸了，你就不能相信它居然跑到就像它。

管理不善？预算错误？误解？只是愚蠢，无知？指出您的原因，它确实发生了（可悲的是，并经常发生很多；请参阅此处）。

在这里描述它是为了娱乐（尽管有些愤世嫉俗）和学习（希望如此）。

一些规则：

• 这不是发生随机（即使完全毁灭性）管理错误的地方，因此请避免使用“ argh I mistyped rm -r”或“ OMG I Just Copy the Corpupted Database over My Last Good Backup”（在那做完） ; 那些东西在这里更好。这是关于“哪种药物正好受谁设计/实施了该系统的影响？”。
• 每个帖子一个WTF，因此可以对其进行适当评论。
• 请发布您实际见证的内容：-)
• 如果是您做的，它仍然符合资格:-)

我会尽快添加一些材料，随时添加您自己的材料；并请:-)

Microsoft支持工程师对报告的问题的电子邮件回复：

“就我对您的问题的看法，我 有一句话：怪异的。”

金！

我是从一个从未听说过的公司打来的，该公司的任务是为客户实施Exchange 2003邮件服务器，却完全不知道如何做。没有什么太奇怪了吧？我是一名自由顾问，所以我擅长做您不知道该如何为您做的工作（并为此而赚钱）。

于是我去了客户现场，发现了一个很奇怪的东西：网络中的每台服务器都是一个域控制器。全部15个左右。

然后，我发现了一个甚至更陌生的东西：它们之间没有一个可以正确地相互复制，Active Directory的整体行为只能描述为“不稳定”，用户遇到了您可以想象的任何网络问题，而Exchange只是拒绝安装未知的-人类间的错误。

因此，我看了看服务器上的网络配置，发现...它使用的是ISP的公共DNS服务器。然后，我看另一台服务器...还是一样。然后我看DC ...同样的东西。然后我问...正式确认：网络上的每台计算机（大约1500台）都在使用ISP的DNS代替合法的域控制器。

我继续说明了DNS 对于正常的Active Directory操作非常关键，并且能够重新构造背景：

• 最初，有人使用DC作为每台计算机的DNS服务器来正确设置AD域。
• 他/她/它对转发器和/或防火墙配置一无所知，因此计算机无法解析Internet公共名称。
• 于是出现了在计算机上使用ISP的DNS服务器的想法。他们在每个人上都配置了它。
• 他们开始遇到很多“找不到域控制器”错误（谁会猜到？）。
• 他们认为问题是由DC不足引起的，因此他们着手将每台服务器提升为该角色。
• 不用说，这只会使事情变得更糟，因为那些新的DC也使用了错误的DNS，因此它们也无法复制。
• 这持续了几个月，他们只是“习惯”了网络，这是完全不可靠的。
• 最重要的是，他们尝试启动Exchange安装程序，该安装程序严重崩溃。直到那时，他们才决定打电话给外部顾问，直到他们完全不知道某件事完全，绝对是他们的网络设置有问题为止。

曾几何时，我的客户是一家小型企业（10人），有电子病历。（不是医生）。我注意到有一天备份失败了。经过测试，磁带驱动器根本无法工作。我向所有者提到了这一点，所有者说他很清楚该驱动器是坏的，但是更换起来太昂贵了。

当然-那不是非常WTF。

WTF是他让他的工作人员每天旋转录音带，将其带到一个保险箱中，以及磁带死后6到9个月的所有爵士乐。

“不要告诉员工，这可能会让他们担心”

我当时是一家大型政府机构（意大利政府的主要机构之一）的系统管理员，并且已经管理了他们的数据中心几个月。一个晚上，我的电话响了，老板告诉我发生了一件非常糟糕的事情：总停电。

好的，我们有UPS，对吗？

是的，但是它们不会持续很长时间，因此最好去那里并关闭所有设备，直到电源恢复。

我去那里，穿过黑暗的走廊，到达服务器机房……然后被只能被称为纯地狱的事物所打招呼。从字面上看。房间太热了，你可以在里面烤蛋糕。UPS的电源还可以，但其中一半服务器已因过热而关闭，其余服务器则痛苦地尖叫着。

原因？

服务器使用UPS电源... 空调不可用。

HP ProLiant ML370 G3风扇故障... 5年后，该型号主板上的风扇传感器趋于损坏。未检测到风扇组合错误时，服务器无法启动。我必须引导客户使用shop-vac来启动机器（以使风扇在启动时旋转），这就是他们保持服务器运行直到我购买新系统之前的方式。

我曾经是Dac-Easy会计的会计软件顾问。有一次我被叫到一家当地公司的总公司，并被会计师告知，如果我无法解决为什么该程序每个周末都充满会计错误，他们将不得不寻找另一位申请者和顾问。通过查看管理日志文件，我发现所有条目通常都是在星期五或星期六晚上进行的。然后，我发现所有者的妻子正在家里使用PC Anywhere登录到会计系统计算机，并试图在喝了几杯酒后用她的支票簿平衡帐户。一旦数字看起来不错，她就会注销。

当我听到内部有嗡嗡声时，我抬起了从母公司办公室收到的计算机。当我打开盒子的时候，我发现它是用磨砂迷你小麦装满的1/2。我发现有一只老鼠住在其中或正在使用食物储藏室。可能的入口是外壳与DIN键盘插孔之间的间隙。

不完全是您的要求，而是确切的WTF。

另一个顾客，另一个恐怖故事。

在主要帖子中，我谈到了错误地用要替换的损坏的数据库覆盖了良好的备份；它发生了:-(

因此，需要从备份还原。幸运的是，实际上WAS备份有：它每天做，以连接到它一个非常大的磁带库中央备份服务器上; 该服务器管理整个公司的备份，这确实很贵，并且安装了Real Backup Software。

到目前为止，一切都很好。我们查找备份作业，加载正确的磁带，开始还原操作，加载磁带，还原开始……而什么也没有发生。

我们再试一次。

我们卸载，重新加载，重新启动，并尝试还原以前的备份...没有任何变化。

我们假设正在进行一些长时间的操作，并将其整夜保留下来……第二天，仍然没有任何变化。

好的，该打电话给Real Backup Software供应商了。。。但是不能完成，我们在星期天。我们尝试查找供应商的支持站点，但是需要一个特殊的访问代码，并且只有一个管理员才可以使用...同一位管理员对发现系统在上班时间仍然不满感到非常沮丧。

又一天的痛苦，我发现该错误是众所周知的，并且已经由供应商补丁修复，该补丁（显然）没有人愿意申请。因此，我去申请它...但是它无法完成：除非供应商确认补丁可以安全地应用，否则管理人员不希望冒险破坏任何东西；备份服务器无法还原任何东西的事实显然对他们来说看起来“不足”。

在总共四天之后，各种各样的支持电话和供应商派遣了支持工程师到现场，我们终于能够应用补丁并还原备份。备份服务器没有EVER能够做到的恢复，但没有人测试过它，所以没有人注意到。

终端仿真带来的乐趣和收益

我使用的是较旧的系统-本质上是一堆文本终端，这些终端连接到Unix盒，并插入了几台Windows计算机，以使事情复杂化。

一些基本的背景事实

• 主软件应用程序使用它自己的扩展termcap文件。系统范围的termcap和terminfo被忽略。
• 主软件应用程序允许根据环境变量选择各种键盘映射。
• 所有文本终端都具有可编程键盘。
• Windows PC使用专有客户端软件进行连接，而没有主软件应用程序的内置支持。
• 专有的客户端软件允许在加载时选择各种键盘映射。
• 只有一半的员工使用标准的QWERTY布局。
• 在此系统上工作的系统管理员中，至少有一个（可能更多）对终端仿真缺乏正确的了解。

我想您可以看到我的发展方向。

在为terminfo和termcap文件添加适当的终端支持方面进行了三心二意的尝试，但是这些仅部分起作用。主系统应用程序使用的专有termcap文件可以工作，但是由于$ TERM从未正确设置，因此它几乎无关紧要。

登录后，每个用户都必须基本上选择要从何处登录以及要使用哪种键盘布局-无需进行自动检测。不管客户端使用哪个终端，都将$ TERM设置为ANSI，并设置了环境变量，以便主软件应用程序适当地重新映射某些键。

如果人们在文本终端上使用嵌入式键盘布局，则运行脚本以重新编程该嵌入式布局的某些键（如实际打印在键盘本身上），但不是全部。在Windows PC上，加载了客户端按键映射，以将大多数功能键重新映射到ANSI。无法全部重映射，否则其他一些键将停止工作。

从任何终端登录到其他任何设备都是失败的练习，并且只能在服务器本身上直接进行合理地操作。由于一切正常，因此很难证明修复它所需的时间和精力。但是，添加比我们现在使用的已有20年历史的文本终端更新的任何内容，基本上都需要重写整个系统。

每次看到它，我都会在里面哭泣。

我知道有人决定通过将所有.exe放在一个文件夹中来重组计算机上的文件。

网络与〜60（第六）的PC。

一个安全狂热的老板。

一些具有VLAN功能的新交换机。

一个涉及约20（TWENTY）个VLAN的“网络重组计划” 。

多亏了一些未知的上层力量，我才真正开始所有这些工作……

我们给了一个Unix管理员一个Windows框。这是在我们让Windows管理员Linux管理员进行管理以提高我们对不同操作系统的熟悉度之后不久。作为Windows管理员，我试图不弄乱我的Linux机器，我曾问过Unix团队很多问题。我希望这是练习的目的。在关于确保我的所有卷的大小正确且没有将所有卷放在一个卷或单个分区上的严厉演讲之后，我继续前进并建造了一个完全合适的盒子，该盒子在两年后仍在生产中运行。

当曾经给我讲过有关不同卷而不是构建东西以使完整磁盘可能导致OS崩溃的Unix家伙建造他的Windows盒时，他把所有东西都放在C：上。当我说“我无法用我们的任何政策来支持这一点时，当这些日志填满时，您的邮箱将崩溃。” 他说：“我认为这是Windows，C上的所有内容都说得通。” 他根本没有做另一个分区。我对此感到非常困惑。绝对是WTF，您正在考虑某种事情。显然，他没有想到某些最佳实践与操作系统无关都是相同的。

Massimo的回复让我想起了另一个WTF ...

小型办公室装有Windows 2003服务器以及Exchange，Symantec AV等。该公司通常使用我们来完成他们的所有IT工作。我们将它们安装在统一的Dell Optiplex平台上，这个家伙决定用百思买出售的“大型机器”替换其中的3个。

无论如何-他们以某种方式设法将其加入域。

首次致电：

我们找不到前景。该计算机附带Word（Microsoft Works），因此其他所有功能都在哪里。

第二次通话：

我们如何使用网络防病毒软件？

这是wtf。我去了现场，他们的7台计算机已配置为Symantec Antivirus SERVERS，而不是安装客户端。显然，这位先生不喜欢我们锁定了客户端的设置，并决定“重新安装”客户端，以便他可以在扫描时进行更改。显然，我们遗漏的第一张Symantec AV的CD可以说服他安装“服务器”而不是客户端。

一位客户打电话给我，以帮助您构建一些服务器。在构建期间，我被告知这些服务器是机架底部两个服务器的替换服务器。我以为机架位置相关很奇怪，问为什么。事实证明，穿过机房中部的水管破裂后，服务器机房被淹没了。

那么，您问服务器室中间的水管在做什么？好吧，女士浴室就在隔壁，服务器室很方便。还有什么更好的地方可以将主要饲料送入浴室？

哦，这很容易...

我为肯塔基州农村仓库中的一家公司安装了Linux系统。该系统是组织的会计/库存应用程序。我用新的CentOS 4服务器替换了1998年的SCO服务器。结果，我期望在连接和客户端方面遇到最糟糕的情况。您知道的是，旧PC，电缆连接不良等。我将新交换机，电缆，瘦客户机等运送到了现场。

但是，我没想到接线“壁橱”在浴室里！实际上，电缆位于仓库卫生间正上方的吊顶上方的空间中。其中包括DSL调制解调器，10兆位HUB和用于电话的66块...

DNS地狱事件涉及同一客户。

他们的Exchange服务器正常运行了几年，甚至还幸免于一些磁盘故障（感谢RAID，还有更多备份）。有一天，我再次被问到一个不相关的问题，他们告诉我，有个麻烦事困扰着他们：有时，他们发现每个人都可以打开其他人的邮箱。他们认为这很奇怪，但是却什么也没做，因为他们不知道如何解决这个问题，而且无论如何，电子邮件都在起作用，并且（几乎）没有人发现这一点。

我挺这里惊呆了：每个人都可以打开任何一个别人的邮箱，他们认为这是唯一的一个小麻烦，并没有打扰做任何事情三个月。任何普通百姓都会立即从服务器上拉扯网络线，但不是。

问题的根源是……奇怪：有人在Active Directory中的Exchange组织级别设置了“所有人/完全控制”，因此每个人都立即成为了完整的Exchange管理员；他们唯一的运气是很少有人注意到它。

到今天为止，还没有人真正知道这样做的人。

在一家制作医生办公室会计（阅读：客户帐单和保险索赔）软件的小公司中担任全职程序员和兼职管理员。接到一个大客户的电话，说他们的服务器已关闭；它是运行Altos Unix SysV / 386的新产品。由于他们只有我，他们派了我和新gal。

到了那里，房间里充满了数据输入操作员，他们尽可能快地输入WordPerfect文档。有一条长途线路退出状态，另一组运营商也正在这样做。

文档目录中包含约10,000个词的完美文档，所有文档均采用相同格式。一目了然。某某某人受伤了，并遭受了某某某事的折磨。看来这位医生是提起伤害诉讼的律师的首选。

我试图从软盘启动，但只有很多寻求声音的地方。我把软盘拉出来，上面完全被蜘蛛网覆盖，我在这里说几句。那是医生的办公室，所以我要拭子和酒（这是我们唯一的Unix引导盘，并且是唯一可以在该服务呼叫中进行修复的机会），并开始清理软盘，驱动器和服务器。

这里有两个问题，一个是服务器满是地毯铺满的办公室及其房间角落位置（在厚毛绒地毯上）的灰尘，并且在80度办公室中过热。文件系统需要认真的FSCK，我将10K文件划分为一组新的字母子目录，并建议将它们进一步分解。

医生是一个完美的***洞，当我们进门时，他给我们撕了一个新洞。当我们离开时，我们解释说，从我们这里购买WordPerfect for UNIX选件并不意味着我们已经确定了用于创建洲际文档的服务器的大小。此外，他还需要一个A / C，一个没有地毯的服务器位置，一个UPS，一个外部RAID和一个更好的目录归档协议。突然间，他全神贯注，因为这就是他赚钱的方式。我将所有信息提供给了Sales，但后来由于其他原因而离开了这份工作。

我最好的WTF起源于当初在这里工作的当前雇主。

当我发现服务器的状态时，工作的头几个月几乎一直处于持续的恐慌状态和完全的恐怖状态。根据我目前的经验，我可能只是建议放火烧死这个地方并收集保险。但最好的部分是一项公司政策：

没有为拨号客户计费。在ISP中，其收入的一半来自拨号客户。这实际上曾经一向是已经到位大约6年来，我开始的时候一个政策，它只是猛然一惊我心里，什么已经做了这件事。标准行是“我们只相信我们的客户不要使用太多”。我觉得这个地方的预算很低，而且在整个切换过程中都没有真正的管理员，这一事实无济于事。

当然，此策略的最终结果是垃圾邮件发送者基本上垄断了拨号池。几乎每天晚上，他们都将使用一个帐户拨入多个调制解调器，直到整个池已满，然后以最快的速度清除垃圾邮件。AAA RADIUS的版本无济于事，因为当时没有快速的“一次只允许一个用户”切换。我在Perl中一起破解了一些东西，以断开具有两次登录名的任何人的连接，直到可以更换RADIUS服务器为止，这在第一两周的某个时间解决了该问题。另一个问题的一部分是，由于我同时也在提供技术支持，因此我没有足够的时间来解决问题（请参见：预算紧张）。但是我仍然留在这里的部分原因是我可以自由支配一切。我不认为我 我们真的被告知不要继续实施一些合理的想法。我曾经唯一的限制是金钱。

十年前，我采访了一家公司，该公司的主服务器机房布线看上去像意大利面条汤。网络设备位于20英尺x 60英尺房间一个角落附近的3个机架中。一连串的各种颜色的网络电缆从机架跌落而下，到大约7英尺宽的缠结电缆池中，并从机架中溢出约5英尺。没有任何文档，没人知道去哪儿了。

该公司在涉及生命和财产安全的领域中拥有95％的市场份额。我只能说那可以给我一个真正的停顿。

顺便说一句，该公司仍在营业，并且从那以后显然已经清理了很多事情。

不久前，他进入了Demarc壁橱，并在一个网站上找到了这个不错的设置：

精英光缆安装= TWIST TIE

替代文字http://locobox.googlepages.com/Fiber.jpg 替代文字http://locobox.googlepages.com/Fiber2.jpg

几年前，我工作的公司收购了我们的竞争对手之一，我不得不审核他们的机器（Centos）以确保它们在配置方面符合我们的标准（他们的sysadmin拒绝了加入我们公司的机会）。支持创办自己的公司来开发交钥匙解决方案）。

在/etc/rc.local（所有出色的WTF的所在地）中，我发现：

swapon /dev/sda3

和

route add -net 10.0.0.0 netmask 255.255.0.0 eth1

注意：eth1是在ifcfg-eth1中配置的，其子网掩码为255.255.255.0

显然，真正的系统管理员不会使用那些陈旧的配置文件，例如/ etc / fstab和/ etc / sysconfig / network-scripts / *

今年早些时候，我们雇用了一个新女孩。我被要求确保所有公司字体都已安装在她的计算机上。我知道他们是，但决定选择我的战斗并重新安装它们。大约5分钟后，我接到一个女孩打来的电话，她要我过来告诉她如何使用我安装的新“软件”。我走过去，打开Word，然后引导她完成如何更改字体的操作。

这个女孩有PHD！她不再在这里工作，但不是因为她不知道如何使用字体。