
首先,我谨向过去两周内在使用 Palworld 或 Shockbyte 服务时遇到问题的所有客户致以最诚挚的歉意。
我们了解到 Shockbyte 的客户正在经历服务器激活延迟、服务器性能问题以及客户支持响应延迟等情况。
本文的目的是阐明所有正在发生的问题,解释我们如何解决这些问题、我们从中学到了什么,并尽可能为所有问题提供解决方案。
这是一篇很长的文章--但我认为分享所有细节并清楚说明正在发生什么以及我们实际正在采取的行动非常重要。
#目录
#Palworld 空前的人气
Palworld 是一款全新且令人兴奋的开放世界生存游戏,其中充满了被称为"Pals"的生物,与宝可梦和方舟:生存进化有诸多相似之处。
尽管由一家小型独立游戏工作室开发,但游戏看起来很有前景,我们也预期会有一次非常成功的发布--然而,我们错了。
事实上,Palworld 是我们作为游戏服务器托管商所见过或经历过的最大规模的游戏发布。
Palworld 远远超出了所有人的预期。小型独立工作室 PocketPair 在不到 2 周的时间里售出了 1900 万份 Palworld。作为对比,世界上最大的游戏 Minecraft,花了 4 年才达到相同的销量。
这是一次具有空前规模的里程碑式发布。
#Shockbyte 如何为 Palworld 的发布做准备
在过去的几年里,Shockbyte 在推出新游戏服务器方面积累了大量经验。截至撰写本文时,Shockbyte 已经为总共 50 款游戏推出了服务器托管服务。
我们在游戏发布方面已变得非常有经验和高效,从 2020 年只推出 2 款游戏,到 2023 年推出 19 款新游戏--几乎每 2 周就有一款新游戏。
实现这种效率水平的唯一方法就是通过每一次游戏发布的迭代和改进,不断完善我们的流程。我们已经将其打造成了一门科学,每推出一款新游戏,我们都会变得更好。
游戏发布的准备工作涉及我们的每一个团队,包括基础设施集成、兼容性、硬件与性能测试、市场调研、销售预测、员工培训、客户文档等等。
为 Palworld 做的准备工作进行得非常顺利,就像我们最近所有其他游戏发布一样,但有一个关键的不同--没有人能预料到 Palworld 会如此受欢迎。
在 Palworld 发布之前,Shockbyte 将整个基础设施的规模扩展了约 10% 作为准备。考虑到我们托管着 49 款其他游戏,是最大的游戏服务器托管商之一,并且已经经营了 10 年--这是巨大的扩展,我们认为这远远超过了所需的规模。
到了第 1 天就很明显这是不够的,我们的工程师立即开始工作,以获取并配置新服务器来跟上需求。
在 Palworld 发布的那个周末,需求如此之高,以至于我们整个网站宕机了几个小时,最初我们以为是 DDoS 攻击。经过调查,结果证明是真实流量--成千上万的用户同时尝试购买服务器。
#从 Valheim 中学到的教训
我们过去也曾多次经历过游戏服务器的高需求。当时我们以为那些已经是巨大的需求了,幸运的是我们从那些经历中学到了很多。
实际上,Palworld 的发布对 Shockbyte 而言比我们过去见过的最大游戏发布/更新还要大约 25 倍。
Valheim 于 2021 年发布,自发布以来的 3 年里总共售出了 1200 万份(提醒一下,Palworld 在 2 周内售出了 1900 万份!)。
🎉Total number of players exceeds 19 million🎉
— Palworld (@Palworld_EN) January 31, 2024
It's been less than two weeks since #Palworld was released, thank you!
・Steam: 12 million~ copies
・Xbox: 7 million~ players
We will continue to prioritize fixing bugs!
Thank you for your continued support of #Pocketpair! pic.twitter.com/twgAeYVL07
Valheim 是一款被誉为开启私人服务器托管新时代的游戏,让游戏开发商认识到了社区服务器和这类游戏的潜力。Valheim 的成功如此显著,以至于为 V-Rising、Enshrouded 甚至 Palworld 等游戏铺平了道路。
我们从 Valheim 的成功中学到了很多。其中最大的改变是改进了我们的供应链,以便在未来能够在短时间内获取更多库存。
Less than a week ago we hit one million sales, now we've hit TWO! Thank you so much! ⚔️🥰#Valheim #Survival https://t.co/ELqJ6qDstE
— Valheim 🌟 (@Valheimgame) February 15, 2021
#我们如何解决所有 Palworld 问题
我们了解客户目前面临的所有问题,无论是 Shockbyte 服务还是 Palworld 游戏本身。我们正在倾听,我们的团队每天都在积极工作以解决这些问题。
下面,我尽量详尽地涵盖了每一个问题,并解释了我们的团队正在采取什么措施来解决它们。
你会注意到一个共同主题--几乎每一个问题都是由于对 Palworld 服务器的极端需求所致,但每个问题都构成独特的挑战,需要独特的解决方案。
如果你想了解退款或补偿信息,下方有专门的部分介绍这些内容。
#问题与解决方案 - 目录
#服务器激活延迟
在阅读此部分之前,建议先从上面标题为"Shockbyte 如何为 Palworld 的发布做准备"的部分开始。上面的部分包含许多与本节相关的背景信息。
我们对所有遭遇服务激活延迟的客户表示歉意。我想向您保证,我们的团队正在全天候工作以解决这一问题。
#为什么会发生延迟,以及我们如何解决它们
Shockbyte 通常在购买后立即自动激活服务器。
自 Palworld 发布以来,服务器激活速度比平时更慢。这是出于两个原因发生的,我们一直在独立解决这些问题。
#[已解决] 配置服务器所需时间
当购买服务器时,它会被添加到激活队列中。我们的系统会自动处理此队列,在 Palworld 之前,激活每台服务器通常需要 2-3 分钟。
这听起来像是很长的时间,但那是因为后台系统必须做很多工作--检查支付状态、在选定区域寻找可用节点、寻找 IP、配置游戏服务器、将服务器分配给用户等。
我们在激活时间方面遇到的第一个问题是订单每隔几秒就到来一次。这意味着即使有库存可用,激活队列的堆积速度也比订单处理速度快得多。
解决这个问题的唯一方法是优化代码,使系统能够以接收订单的速度激活服务器。
我们的开发人员从第 1 天就开始处理这件事,并在 48 小时内成功解决了这个问题。
- **第 1 天:**我们对代码进行了一项小优化,将激活时间从 2-3 分钟降到了最多 60 秒。
- **第 2 天:**我们的 IT 经理(向 James Hawkins 致敬)取得了重大突破,进一步优化了代码,能够在几秒钟内激活服务器。
#[持续中] 库存可用性
自 Palworld 发布以来,我们整个 IT 部门一直专注于获取和部署更多库存。
虽然我们的初始库存在几天内就用完了,但我们每天--白天、晚上和周末--都在扩展我们的基础设施。
我们知道一些客户已经等待了几天才收到他们的服务器。在极端情况下,我看到一些客户等待了 6 或 7 天。
我们知道等待是多么令人沮丧,我们也意识到您可能感觉进展缓慢,但我们实际上每天都在完成大量订单。
目前,我们每天交付超过 2,000 台服务器。
**事实是,所有游戏服务器托管商和我们的供应商都处于同样的境地。**Palworld 已经耗尽了我们见到的每一家提供商的库存--情况如此极端,以至于上游供应商也全都缺货。
我们正在采取以下措施来解决和缓解这一问题:
- 基础设施扩展 - 我们大力投资于基础设施,目前已将整个基础设施扩展了近 50%。我们每天都在部署新服务器。
- 购买前警告 - 我们在网站上添加了显著的警告,提示由于 Palworld 的需求,服务器激活会有延迟。
- 按地区显示延迟通知 - 一些地区已被标注为 7 天以上等待。
- 供应链扩展 - 我们一直在进一步扩展我们的供应链,以提高获取库存的能力。
#服务器性能与崩溃
由于 Palworld 是一款抢先体验游戏,游戏中存在许多 bug 和性能问题。
这些 bug 正在由 Palworld 游戏开发商积极修复中,我们预计许多问题将在未来几天和几周内通过游戏更新得到解决。
话虽如此,我们确实有一些建议以及我们正在我们这边进行的更改,以帮助缓解此问题。
#服务器崩溃和 Palworld 内存泄漏
Palworld 目前包含一个内存泄漏 bug,导致所有服务器在线运行一段时间后崩溃。
由于这是游戏中的 bug,必须由 Palworld 游戏开发商修复。
当 Palworld 服务器运行时,RAM 使用量会持续增加,直到最终达到限制并崩溃。
为 Palworld 服务器分配更多 RAM 可以让它在线运行更长时间,但最终仍会崩溃。
**我们的建议:**为您的服务器配置每 2-3 小时自动重启一次。
这将确保您的服务器安全停止并保存进度。我们知道这很烦人,但至少您能够继续游戏--而且我们相信 Palworld 很快会发布相关修复。
我们看到一些客户提到,游戏推荐 16-32GB RAM 可能是由于这个问题。服务器通常比游戏本身需要更少的 RAM,因为服务器不需要加载任何图形/视觉资源。我们的团队进行了大量测试,确认服务器并不需要这么多内存。
Shockbyte 的 Lamball Palworld 套餐配备 4GB RAM,并且可以将服务器的 RAM 升级到 Grizzbolt 套餐。然而,需要注意的是,RAM 价格昂贵,配备 16-32GB RAM 的套餐价格需要在 40-80 美元以上。我们能够以低至 12 美元的价格提供我们的套餐。
注意:我们在发布后不久确实将我们最低 Palworld 套餐的内存从 3GB 提高到了 4GB。但这意味着我们必须略微提高该套餐的价格。
虽然没有任何 RAM 数量可以解决内存泄漏问题,但我们的团队进行了大量测试,确保套餐公平且实惠。一旦 bug 被修复,我们预计 RAM 使用量将稳定下来。然后我们将继续进行测试,并相应地更新我们的套餐和建议。
未来,我们计划进行更严格的测试,让服务器运行更长时间,并寻找游戏内的问题和 bug。
#服务器性能
我们预期随着游戏继续更新、优化和修复 bug,Palworld 的性能将持续改善。
在幕后,我们也一直在升级 Palworld 服务器的硬件以帮助缓解性能问题--具体来说,是 CPU。
自发布以来,看到实际服务器的运行情况后,我们了解到 Palworld 比我们的测试显示的更受 CPU 限制。我们目前为 Palworld 配置的所有新硬件都运行在比以前更强大、核心数更多的 CPU 上。
这给我们带来了额外的成本,但我们选择不在定价上反映这一点。
#其他游戏内错误
我们在知识库中提供了许多常见问题的解决方案:https://shockbyte.com/billing/knowledgebase/78/Palworld
Palworld 开发者已经发布了一个修复程序,解决了导致数据丢失和玩家数据重置的错误。
#客户支持延迟
随着需求和网站流量的大幅增加,客户支持咨询的数量也相应增加。
我们无法控制联系我们支持团队的用户数量--我们只能尽快适应。
事实是,我们的支持团队目前完全不堪重负。我们的支持量在一夜之间增加了 394%。
我们正在尽一切可能尽快适应需求。
在 Palworld 发布之初,我们有 50 名支持人员。一夜之间额外雇佣 197 名员工是一项不可能的任务,更别说在仅仅 2 周内做到--我们仍然需要入职和培训所有这些新员工。
为了快速解决这个问题,我们需要创造性的解决方案--这正是我们正在做的。
我们正在采取以下措施来适应支持需求:
- 当然,我们正在扩大支持团队的规模。
- 我们整个支持团队已被重新分配,以专注于支持工单。
- 实时聊天已暂时被 AI 聊天机器人取代--我们正在训练模型,效果其实非常令人惊叹。到目前为止,它解决了大约 90% 的咨询。这是一项临时措施。
- 我们正在加倍执行过去对我们有效的策略。
- 我们每天都在讨论和处理更多其他想法。
#我们在客户支持方面取得了突破
下面的图表显示了过去 3 个月我们打开的未解决工单数量。
您会看到在整个期间这个数字基本上为零--这意味着每一天,我们的支持团队都在响应几乎所有未解决的查询。
立即出现的尖峰始于 1 月 19 日--Palworld 的发布日期。您可以看到需求增长得多么剧烈以及我们的团队多么快地被请求淹没。
我们从第 1 天开始就实施策略,然而激增如此极端,大多数解决方案需要一些时间才能开始看到结果。
大约 10 天后,我们取得了一些突破,使我们能够大致解决每天收到的所有查询--这可以从图表中看到工单增长停止的地方。
其中很大一部分归功于我们的 AI--经过充分训练后,它每天能够成功解决数千个客户咨询。
我们已经在实施其他策略,以尽快将积压工单减少到零。
#退款、补偿与服务延期
对于因激活延迟、服务问题和支持延迟而受影响的任何客户,我们将根据我们的退款政策提供退款或补偿。
#退款
可以通过提交客户支持工单申请退款。
我们了解由于上述支持延迟,退款目前的处理速度比平时慢,但我们的支持团队正在努力尽快发放退款。
请放心,我们支持团队的响应时间不会影响您获得退款或补偿的资格--如果您符合退款资格,您的退款将在我们的团队能够回复您时立即发放。
我们感谢您的耐心,并向您保证我们的团队正在努力尽快发放退款。
#补偿与服务延期
我们将为遭遇服务器激活延迟的客户提供补偿--即使是那些已经收到退款并取消服务的客户。
我们的团队目前正在开发一个系统,使我们能够自动将这些补偿应用于所有受影响的客户。我们预计该系统将在下周完成并开始推出补偿。
在此期间,您也可以根据您的个人情况通过提交支持工单申请补偿。
#Shockbyte 对客户的承诺
我们致力于倾听、学习并解决客户面临的所有问题。您的满意是我们的首要任务,我们致力于为您做正确的事,确保您获得应得的优质服务和支持。
最后,我想向所有 Shockbyte 员工致以最诚挚的感谢,感谢他们在过去两周内的巨大努力。在这一充满挑战的时期,你们的奉献已超越了任何能够要求你们的事情。感谢大家的卓越努力。
通过这些挑战,Shockbyte 学到了宝贵的经验教训,这将加强我们的基础,使我们能够在未来更好地为您服务。
您的反馈对我们至关重要,我们致力于确保您与 Shockbyte 的体验非凡卓越。
Mitch Smith
首席执行官兼创始人
Shockbyte