爬一个单页面的应用遇到个问题

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

This topic created in 2803 days ago, the information mentioned may be changed or developed.

现在在爬一个单页面应用的后台，反爬虫处做了很多机制

现在是用 Nightmare 去加载页面，然后解析 html 把数据拿到

这个管理后台又是单页面的应用，数据全部主要的数据放在 iframe 的标签里面。

爬出的 html 结构大致是这样的

<html>
 <head></head>
 <body>
  <div id="main-container"> 
   <div id="main-content"> 
    <iframe id="hashframe" src="" width="100%" height="100%" frameborder="no" border="0" name="hashframe" allowfullscreen=""></iframe> 
   </div> 
  </div>
 </body>
</html>

通过控制台看内容其实都在 iframe 里面

但是爬虫爬过去这块内容是空的郁闷了

有什么解决的好思路吗?

5 replies