在javascript异步操作中，面对不稳定的网络环境，单一的`fetch`请求失败可能导致整个处理流程中断。本文将详细介绍如何通过实现一个自定义的重试机制来增强网络请求的健壮性，确保即使在遇到瞬时网络问题时，也能自动尝试重新发送请求，从而提升数据抓取或页面解析任务的完成率和稳定性。
理解异步请求的脆弱性
在进行大量网络请求，特别是循环抓取网页内容时，网络的不稳定性是一个常见的挑战。例如，以下代码片段展示了一个典型的场景，其中遍历一个NodeList并尝试获取每个元素的href属性对应的网页内容：
for (const el of NodeList) {
const url = el.getAttribute('href');
const res = await fetch(url); // 如果此处无响应或发生网络错误，后续代码将不会执行
const html = await res.text();
const parser = new DOMParser();
const doc = parser.parseFromString(html, 'text/html');
alert('parsed successfully');
}这段代码的问题在于，如果await fetch(url)操作因为网络瞬时抖动、服务器无响应或任何其他网络错误而失败，它会抛出一个异常，并中断当前循环迭代的执行，甚至可能导致整个循环提前终止。这对于需要处理大量数据的自动化任务而言，是不可接受的。
实现健壮的重试机制
为了解决上述问题，我们可以引入一个重试机制，即当网络请求失败时，自动在一定次数内重新尝试发送请求。这可以通过封装一个异步函数来实现，该函数负责处理fetch操作及其潜在的错误。
我们将创建一个名为fetchWithRetry的异步函数，它接受目标URL和最大重试次数作为参数。
立即学习“Java免费学习笔记（深入）”；
async function fetchWithRetry(url, numberOfRetries) {
try {
const response = await fetch(url);
// 检查HTTP状态码，如果不是2xx范围，也视为失败
if (!response.ok) {
throw new Error(`HTTP error! status: ${response.status} for URL: ${url}`);
}
const html = await response.text();
const parser = new DOMParser();
const doc = parser.parseFromString(html, 'text/html');
console.log(`成功解析: ${url}`); // 改为console.log，alert在循环中不友好
return doc;
} catch (error) {
if (numberOfRetries > 0) {
console.error(`请求失败，正在重试 (${numberOfRetries}次剩余): ${url}`, error);
// 可以在此处添加延迟，例如：await new Promise(resolve => setTimeout(resolve, 1000));
return fetchWithRetry(url, numberOfRetries - 1);
} else {
console.error(`请求失败，达到最大重试次数: ${url}`, error);
throw error; // 最终还是失败，抛出错误
}
}
}代码解析：
- try-catch块： 这是错误处理的核心。fetch操作及其后续的文本解析和DOM解析都包裹在try块中。
- response.ok检查： 除了网络错误，HTTP响应状态码（如404, 500）也应被视为失败。response.ok属性可以方便地判断响应是否成功（状态码在200-299之间）。
-
递归重试逻辑： 当catch块捕获到错误时，会检查numberOfRetries。
- 如果numberOfRetries > 0，表示还有重试机会，函数会打印错误信息，然后以numberOfRetries - 1作为新的重试次数递归调用自身。
- 如果numberOfRetries为0，表示已达到最大重试次数，函数将打印最终失败信息并重新抛出原始错误，以便上层调用者知晓。
- 延迟重试（可选但推荐）： 在实际应用中，为了避免对服务器造成过大压力，并在网络瞬时故障后给予其恢复时间，通常会在重试前引入一个短暂的延迟。这可以通过await new Promise(resolve => setTimeout(resolve, delayTime))实现。
集成重试机制
现在，我们可以修改原始的循环代码，用fetchWithRetry函数替换直接的fetch调用：
async function processNodeList(NodeList) {
for (const el of NodeList) {
const url = el.getAttribute('href');
try {
const doc = await fetchWithRetry(url, 3); // 设置最大重试次数为3
// 成功获取并解析文档后，执行相关操作
console.log(`处理完成: ${url}`);
// 示例：获取页面标题
const title = doc.querySelector('title')?.textContent;
if (title) {
console.log(`页面标题: ${title}`);
}
} catch (error) {
console.error(`无法处理URL: ${url}，最终失败。`, error);
// 可以选择跳过此URL，继续处理下一个，或进行其他错误处理
}
}
}
// 假设有一个实际的NodeList示例
// const myNodeList = document.querySelectorAll('a');
// processNodeList(myNodeList);通过这种方式，即使某个URL的请求因为瞬时问题失败，fetchWithRetry也会自动尝试几次，大大增加了成功获取数据的可能性。外层的try-catch块可以捕获fetchWithRetry在达到最大重试次数后抛出的最终错误，从而允许主循环继续处理列表中的其他URL，而不是完全中断。
注意事项与最佳实践
选择合适的重试次数： 最大重试次数应根据具体场景和对网络稳定性的预期来设定。过多的重试可能增加延迟和服务器负担，过少则可能无法有效应对瞬时故障。通常3-5次是一个合理的起点。
-
引入重试间隔（指数退避）： 简单地立即重试可能导致问题持续存在或加剧服务器压力。推荐使用指数退避（Exponential Backoff）策略，即每次重试的间隔时间逐渐增加。例如，第一次重试等待1秒，第二次2秒，第三次4秒。
async function fetchWithRetryWithBackoff(url, numberOfRetries, delay = 1000) { try { const response = await fetch(url); if (!response.ok) { throw new Error(`HTTP error! status: ${response.status} for URL: ${url}`); } const html = await response.text(); const parser = new DOMParser(); const doc = parser.parseFromString(html, 'text/html'); console.log(`成功解析: ${url}`); return doc; } catch (error) { if (numberOfRetries > 0) { console.error(`请求失败，正在重试 (${numberOfRetries}次剩余)，等待 ${delay / 1000} 秒: ${url}`, error); await new Promise(resolve => setTimeout(resolve, delay)); return fetchWithRetryWithBackoff(url, numberOfRetries - 1, delay * 2); // 延迟加倍 } else { console.error(`请求失败，达到最大重试次数: ${url}`, error); throw error; } } } // 使用示例： // async function myProcessingFunction() { // const doc = await fetchWithRetryWithBackoff('https://example.com', 3); // // ... // } 区分可重试错误和不可重试错误： 有些错误是瞬时性的（如网络超时、503 Service Unavailable），适合重试；而有些错误是永久性的（如404 Not Found、401 Unauthorized），重试也无济于事，甚至会浪费资源。在更复杂的实现中，可以根据错误类型决定是否重试。
错误日志与监控： 详细的错误日志对于调试和监控系统健康状况至关重要。记录请求失败的URL、错误类型和重试次数可以帮助识别模式和解决根本问题。
超时设置： fetch API本身支持AbortController来实现请求超时。将其与重试机制结合，可以确保即使请求长时间无响应也能及时中断并触发重试，避免无限期等待。
总结
通过实现一个健壮的重试机制，我们可以显著提升JavaScript异步网络请求的稳定性和可靠性。无论是进行网页抓取、API调用还是其他依赖网络的操作，这种策略都能有效应对瞬时网络故障，减少因外部因素导致的任务中断，从而构建出更加弹性和用户友好的应用程序。结合指数退避、合理的重试次数和详细的错误处理，您的异步任务将更加可靠。
