【现网】记一次并发冲突导致流量放大的生产问题
事故现象生产环境，转账相关请求失败量暴增。直接原因现网多个重试请求同时到达 svr，导致内存数据库大量返回时间戳冲突。业务方收到时间戳冲突，自动进行业务重试，服务内部也存在重试，导致流量放大。转账首先我们一起了解一下转账。转账请求在支付场景中的应用频率非常高，它是现代金融系统中的一个核心功能。在日常生活中，个人和企业都需要进行各种不同类型的转账: 个人间转账：朋友、家人之间进行的转账，如还款...
记一次因为C#官方扩展导致自动补全出错的情况 (C# & Godot)
现象最近使用Vscode结合Godot使用时突然发现自动补全出问题了,发现一部分自动补全能弹出补全项目,但是确认后不起作用,还会吞掉弹出自动补全后输入的字符。大概是下图这样的感觉(截图时已修好,图为演示摆拍) 线索找了很多办法,有一瞬间我突然发现C#官方扩展的评论区在短期内有很多负面评价。因此有理由猜测问题出在C#官方扩展。 根据评论区,我了解到很多人回溯版本后便可继续工作了,于是我进行了尝试,...
【服务器数据恢复】热备盘激活失败导致raid5瘫痪的数据恢复案例
服务器数据恢复环境： 一台EMC存储中数块磁盘组建了一组raid5磁盘阵列，阵列中有2块热备盘；上层采用ZFS文件系统，划分了一个lun，供sun小机使用。 服务器故障&检测： 存储在正常运行中突然崩溃无法使用，管理员检查后发现raid5阵列中有两块磁盘离线，阵列中共两块热备盘，其中的一块热备盘激活失败，raid5阵列瘫痪，存储不可用。 硬件工程师对raid5阵列中的两块离线的磁盘进行物理故障检测...
【Android】 频繁刷新 RecyclerView导致View 对象引用过多引起的Native 内存占用过大解决办法
在 RecyclerView 中，如果频繁刷新 RecyclerView，可能会导致 Native 内存中有大量的 TextView 对象，从而导致内存占用过多的问题。以下是一些可能导致该问题的原因和解决方法： 使用 ViewHolder 在 RecyclerView 中，使用 ViewHolder 可以避免频繁创建和销毁 View 对象，从而减少内存占用。可以在 RecyclerView.Adap...
饮酒过多和腌制食品是导致中风的最大导火索
的饮食习惯比较健康，比如内蒙古新疆西藏西部省份的原生未加工食品，沿海广东福建浙江的清淡饮食和中部的麻辣食品。但也有一些地方的饮食习惯比较不健康，比如一些地区的重口味饮食和大鱼大肉。这些不良的饮食习惯会导致人体内摄入过多的油脂和盐分，从而增加中风的风险。 饮食因素也是导致中风的重要因素之一。 从数据图表可以看到，在导致中风食物饮食中，饮酒过多和腌制食品是占比最高的，食用过多这些食物会大大增加中风的风险。...
【服务器数据恢复】断电导致RAID无法找到存储设备的数据恢复案例
司内部文件服务器使用。 服务器故障&分析： 在遭遇两次意外断电后，设备重启时raid提示“无法找到存储设备”。管理员尝试进入raid管理模块时死机，多次重启尝试后故障依旧。 这是一个典型的由于意外断电导致raid硬件模块损坏或者riad管理信息丢失等raid故障的情况。正常情况下，raid一旦创建完成，raid管理模块中的信息不会轻易更改，但是raid管理模块的信息是可修改的信息。一次或多次的意外断电...
一次有关 DNS 解析导致 APP 慢的问题探究
一、业务背景 APP 使用 HTTPDNS， 为解决 DNS 解析生效慢， DNS 劫持等问题。 我们 IOS 和安卓都是使用了 HTTPDNS。 域名托管在 AWS Router53。 域名有多个解析(基于延迟)，为了解决就近接入。 示例配置 ai.baidu.comCNAME延迟亚太地区(香港)alias-ai-hk.baidu.comai.baidu.comCNAME延迟默认值 ...
Qt延时函数跨天导致的死循环问题
）。 问题分析和定位 假设： 1. 发数据有问题 2. 收数据有问题 3. 数据处理有问题 通过日志观察，发现进程B收到的最后一帧数据是GPS数据，因此排查GPS数据处理逻辑。发现延时函数存在bug，导致了跨天时概率性的死循环，进而该线程无法继续收数据。 延时函数实现 延时函数的代码如下所示（之前在网上抄来的，已经使用了多年了，哭死） //延时功能2void sleep2(unsigned int ...
【服务器数据恢复】RAID5重建导致数据丢失的数据恢复案例
服务器数据恢复环境： HP某型号服务器，5块硬盘组建了一组raid5磁盘阵列。 服务器故障&分析： 服务器在工作过程中，raid5磁盘阵列中的一块磁盘掉线，由于raid5的容错特点，raid阵列未受影响，工作人员也没有及时关注磁盘离线的问题。服务器继续运行一段时间后出现故障，管理员将现有的4块磁盘进行了重建raid的操作，重建后进行了数据同步，原raid5阵列中的数据全部丢失。 HP SMART ...
现场工程师救火-UEFI（BIOS）节能设置导致金牌服务器只跑出龟速
近期协助出现场，解决了一个非常典型的UEFI 启动参数配置不当导致的服务器降效案例。错误的节能参数配置，导致价值几十万的服务器变成龟速服务器，并造成严重的生产事故。 1. 现象 朋友公司近期准备升级2010年就部署的服务器组，新升级的服务器使用了昂贵的大品牌 32 核64线程处理器，最高主频高达2.6GHz。服务器到位后，由于该配置比原先的12核心服务器不知道高了多少个档次，所以没有经过太细致的检测...