网页源代码查看在线工具 核心JS实现
这篇文章只讲本项目里“网页源代码查看”工具的核心 JavaScript 逻辑:用户输入网址后,如何完成参数校验、请求发送、抓取结果处理,以及链接/表单/纯文本提取。
在线工具网址:see-tool.com/webpage-sou…
工具截图:
1)核心状态设计
页面侧用一组响应式状态管理输入、选项和结果:
const urlInput = ref('')
const ua = ref('pc')
const customUa = ref('')
const referer = ref('')
const postData = ref('')
const cookie = ref('')
const contentMode = ref('all') // all | text | form | links
const showHeader = ref('0')
const encoding = ref('UTF-8')
const highlight = ref('yes')
const rawHtml = ref('')
const responseMeta = ref(null)
这套状态直接决定了请求参数和最终展示内容。
2)入口校验与触发流程
点击“查看源码”后,不会立即发请求,而是先做两件事:
- 校验 URL 是否是
http/https - 组装请求前的必要参数
const validateUrl = value => {
try {
const target = new URL(value)
return ['http:', 'https:'].includes(target.protocol)
} catch {
return false
}
}
通过入口函数先做校验,可以避免无效请求直接进入抓取流程。
3)请求参数组装与发送
请求体不只包含 URL,还会带上 UA、Referer、Cookie、POST 参数、内容模式、编码方式等配置:
const requestBody = {
url,
ua,
uastr,
referer,
post,
cookie,
text,
header,
encoding,
highlight
}
const response = await fetch('/api/viewhtml', {
method: 'POST',
headers: { 'Content-Type': 'application/json' },
body: JSON.stringify(requestBody)
})
这样前端把用户配置完整传给后端,后端按参数执行页面抓取并返回结果。
4)抓取逻辑:UA、GET/POST、编码解码
后端抓取核心是三步:
- 按 UA 选项映射为真实
User-Agent,支持自定义 UA - 有
post参数时走 POST;否则走 GET - POST 内容如果是 JSON 结构就按 JSON 发送,否则按表单字符串发送
拿到响应后,会先读二进制,再按用户选择的编码(UTF-8、GBK、BIG5、ISO-8859-1)解码成文本,最后把状态码和响应头一起返回。
5)结果二次处理:源码 / 纯文本 / 表单 / 链接
页面拿到 rawHtml 后,通过 contentMode 分流:
all:原样展示text:解析 DOM 后取textContentform:提取form/input/select/textarea/option的外层结构links:提取所有a[href]
实现上是先 DOMParser 转文档,再按选择器提取:
const extractLinks = html => {
const doc = parseHtml(html)
const links = new Set()
doc.querySelectorAll('a[href]').forEach(el => {
const href = el.getAttribute('href')
if (href) links.add(href)
})
return Array.from(links).join('\n')
}
如果开启“显示响应头”,会把 HTTP Status + Headers 拼到正文前面,便于一起复制保存。
6)展示与操作动作
展示区支持代码高亮;当高亮不可用时,走 escapeHtml 兜底,避免把内容当成真实标签渲染。工具动作函数包括:
copyResult:优先navigator.clipboard,失败回退execCommand('copy')downloadResult:按模式导出为html或txtclearAll:清空输入和结果状态
这样就形成了完整闭环:输入参数 -> 校验 -> 抓取 -> 提取 -> 高亮展示 -> 复制/下载。