这种网页背后是基于什么技术

IT技术 • tornado • 发表于 6 年前 • 最后回复来自 coder_1 • 6 年前

前端小白一枚，我理解的网页前端技术就是html写页面框架、css负责样式、js负责交互行为，比如这种：
view-source:http://www.qq.com/

但是现在看到越来越多的网页是类似这样的：
view-source:http://www.toutiao.com/

基本上没有html、css，全是js来完成。我猜想这种最终应该也会是html+css+js，只是html、css是js动态加载下来的，不知道理解对不对，那对于我爬取这个页面来讲，有没有什么办法获取到最终的html文档呢？毕竟是要抽取出网页的内容。

共收到6条回复

xiaohao750 6 年前 #1

抓动态网页的内容两种办法，要么用爬虫的语言实现的js引擎内部渲染一下Dom在解析，Java有Nashorn，Python有PhantomJS等，要么调用外部浏览器渲染，例如selenium

plax 6 年前 #2

直接找接口，伪造请求抓数据吧

alex_sc 6 年前 #3

spa了解一下？

alex_sc 6 年前 #4

cuzfinal 6 年前 #5

前端3大框架了解一下，angular、react、vue

coder_1 6 年前 #6

spa。要爬的话。伪造行为。等渲染dom再分析。

请绑定手机号后，再发言，点击此处