做 Web 开发经常需要面对跨域问题，跨域问题的根源是浏览器安全中的同源策略，比如说，对于 http://www.a.com/1.html 来说：
父页面和子页面（iframe）处于2个不同的进程（即使在同一个域），进程之间的通讯必须通过每个进程内【事件监听所在的线程】来完成。最重要的是，通讯时传输的数据格式必须是序列化的格式，序列化格式指【一维】【线性】的数据类型比如字符串、字节流等，在浏览器中有这么几种序列化格式可选：
根据文章内容为读者提供摘要总结。
最近面试问的挺多的一个问题，就是JavaScript的跨域问题。在这里，对跨域的一些方法做个总结。由于浏览器的同源策略，不同域名、不同端口、不同协议都会构成跨域；但在实际的业务中，很多场景需要进行跨域传递信息，这样就催生出多种跨域方法。
1. 业界案例 目前前端性能监控系统大致为分两类：以GA为代表的代码监控和以webpagetest为代表的工具监控。 代码监控依托于js代码并部署到需监控的页面，手动计算时间差或者使用浏览器的的API进行数据统计。 影响代码监控数据的因素有以下几种： 浏览器渲染机制； 浏览器对API的实现程度，比如performance API； 工具监控不用将统计代码部署到页面中，一般依托于虚拟机。以webpageTest为例，输入需统计的url并且选择运行次url的浏览器版本，webpageTest后台虚拟机对url进
项目中常常用到搜索，特别是导航类的网站。自己做关键字搜索不太现实，直接调用百度的是最好的选择。 使用jquery.ajax的jsonp方法可以异域调用到百度的js并拿到返回值，当然$.getScript也可以实现跨域调用js。
TypoDetect是一款功能强大的域名检测工具，可以帮助广大蓝队研究人员、安全运维人员和企业安全部门检测跟自己域名相似的主动变异型域名，以防止网络犯罪分子利用这些域名进行网络欺诈活动，比如说网络钓鱼攻击或短信欺诈活动。
大家好，又见面了，我是你们的朋友全栈君。 Demo页面：主页面 iframe_a.html ，被包含页面 iframe_b.htm 和 iframe_c.html
使用很简单 将页面内要打印的内容加入中间XXXXX 再加个打印按纽 onclick=preview(1)
这些日子写过不少爬虫，想说些自己对于爬虫的理解，与本文无关，仅想学爬取JavaScript页面的同学可跳过。
做WEB前端开发的过程中，经常会有这样的需求，用户点击【编辑】按钮，弹出一个对话框，在里边修改相应的值，然后把修改后的值显示在原页面，最后点击保存。用window.parent.document.getElementById().setAttribute("value","")可以很好的解决这个问题。
前言：很多博友不仔细看完内容就直接认为用 iframe 不好之类的云云，而实际上本文就是教你在必须使用 iframe 的时候，该如何躲过搜索引擎的抓取，避免不利于 SEO 的情况！ 那么，何为“必须要用 iframe 的时候”？我举个简单的例子：一些主题分享网站，很多时候会使用 iframe 框架调用主题作者的网站来做主题演示，这时候就会产生大量的 iframe 框架，那么本文的方法就可以派上用场了！ 导读：了解一点 seo 的站长，应该都知道爬虫都不喜欢 iframe 或 frame，因为蜘蛛访问一个网址
前言 文件上传是web页面上很常见的一个功能，自动化成功中操作起来却不是那么简单。 一般分两个场景：一种是input标签，这种可以用selenium提供的send_keys()方法轻松解决； 另外一种非input标签实现起来比较困难，可以借助autoit工具或者SendKeys第三方库。 本篇以博客园的上传图片为案例，通过send_keys()方法解决文件上传问题 一、识别上传按钮 1.点开博客园编辑器里的图片上传按钮，弹出”上传本地图片”框。 2.用firebug查看按钮属性，这种上传图片按钮有个很明显的
油猴脚本是在沙盒里执行用户脚本，不会对网页注入script元素，它通过沙盒向网页中传递信息以达到控制dom的操作。所以如果要对脚本进行检测，没有像上面代码这样子向页面中植入iframe的话，通过去检测dom和window是无法检测出使用油猴脚本的。
一、前言 《 HTML5魔法堂：全面理解Drag & Drop API》中提到从IE5开始已经支持DnD API，但IE5~9与HTML5的API有所不同，下面我们来了解一下吧！ 二、IE5~9与HTML5的DnD API的不同点 1. IE5~9DnD API仅对 img元素 、 a[href]元素 和 input[type=text]/textarea元素 中被选中的文字有效，且不用设置
在application/模块名/controller/控制器名/方法名中对数据库进行获取，这里为了方便，举例为application/modulea/controller/x/test
本文内容是利用 Selenium 爬取网易云音乐中的歌曲 《Five Hundred Miles》 的所有评论，然后存储到 Mongo 数据库。
在使用 Ajax 技术加载数据的网站中， JavaScript 发起的 HTTP 请求通常需要带上参数，而且参数的值都是经过加密的。如果我们想利用网站的 REST API 来爬取数据，就必须知道其使用的加密方式。破解过程需要抓包，阅读并分析网站的 js 代码。这整个过程可能会花费一天甚至更长的时间。
这其实是上一篇"iframe框架取值兼容ie/firefox/chrome的写法"的扩展应用: 应用场景：iframe个人感觉最独特的应用之一就是配合P3P协议可以实现跨域写入cookie(好象除此之外，还没找到更有效的办法)，但是有时候我们不知道这个iframe页面是否执行完毕，有没有办法判断iframe里的页面是否load完成了呢？ iframe1.html: <html> <head> <title>框架内页</title> </head> <body> <input id="txt05
在 Web 应用程序中，页面可能会包含一个或多个嵌套的 iframe（框架），而这些 iframe 可能包含了不同的内容或功能。在自动化测试和网页爬取中，对页面中的 iframe 进行操作是一项重要的任务。Playwright 提供了丰富的 API 来处理页面中的 Frame，本文将深入探讨这些技巧。
作者：jiaqiangwang，腾讯 IEG 后台开发工程师 背景 在大数据及机器学习日益火爆的今天，数据作为基石发挥了至关重要的作用。网页内容爬取作为数据的一个重要补充来源，数据爬取开发成了一个必不可少的工作。 在业界，普遍的做法是采用 scrapy 等框架不断进行 case by case 的爬取代码编写，这种做法在需求量逐渐增大后会出现大量重复工作、大量针对某个网站或需求开发的特殊逻辑等，导致技术不能持续积累沉淀、开发耗时长、维护压力越来越大。 我们在调研了业界最新动态后，决定开发一款轻量级
前几天想做一个测试，思路就是获取 UA 并保存然后分析数据。就实现 UA 获取功能做一个 HTML 页面使用 JavaScript 就可以实现了，这样正好可以托管到 Github Pages 上，连服务器都省下了。但实现一个数据存放统计功能，单纯获取信息是不行的，我们还需要一个数据库来存放数据，然后读取分析。
在之前的文章中，我们已经深入剖析了微前端究竟是什么，可以带来什么收益，现在让我们复习一下微前端的概念：
我们如果想发布带音视频播放器的文章，主要不在于后台是否支持而是在于前端主题是否支持。
对于前端开发来说跨域应该是最不陌生的问题了，无论是开发过程中还是在面试过程中都是一个经常遇到的一个问题，在开发过程中遇到这个问题的话一般都是找后端同学去解决，以至于很多人都忽略了对跨域的认识。为什么会导致跨域？遇到跨域又怎么去解决呢？本文会对这些问题一一的介绍。
0x00 前言 朕身居高位，才知，高处不胜寒，不是所有事都可以随心所欲的，身不由己的事情甚多。 比如这次，各地大臣、各位王爷、各个藩国，为了尽臣子之心而讨朕龙颜之悦，搜尽天下之美人儿上京进贡。 朕不怪这些臣子，他们有此心意，朕心甚慰。因朕自即位以来，爱民如子，操劳国事，又不荒淫无度，目前后宫除了皇后也没啥人了。比起历史上的各位皇上的确是寒碜了不少。这不，各位大臣一定要让朕多用些宫女，盛情难却啊。 这事说起来也是好事，而且是朕也不能让大臣们都寒了心了，最关键的一点，各地藩国的美人儿都送到家门口了，你能不收吗，
提起中国知网，如果你曾经写过论文，那么基本上都会与中国知网打交道，因为写一篇论文必然面临着各种查重，当然翟博士除外。但是，本次重点不在于写论文跟查重上，而在于我们要爬取知网上一些论文的数据，什么样的数据呢？我们举一个例子来说，在知网上，搜索论文的方式有很多种，但是对于专业人士来说，一般都会使用高级检索，因为直接去查找作者的话，容易查找到很多重名作者，所以我们本次的爬虫也是使用了高级检索(泛称)的爬虫，再具体就是专业检索，有助于我们唯一定位到作者。
Lite-embed 的灵感来源于 paulirish 大神的 lite-youtube-embed 项目：
本文介绍了爬虫和反爬虫技术的原理、常见反爬虫策略以及前端与反爬虫的一些奇技淫巧。通过分析不同反爬虫策略，可以从中了解爬虫与反爬虫技术的难点与突破点。
对于一张网页，我们往往希望它是结构良好，内容清晰的，这样搜索引擎才能准确地认知它。 而反过来，又有一些情景，我们不希望内容能被轻易获取，比方说电商网站的交易额，教育网站的题目等。因为这些内容，往往是一个产品的生命线，必须做到有效地保护。这就是爬虫与反爬虫这一话题的由来。
这里使用的例子就是一个在线CD销售页面，前台发起ajax请求，后台随机取一个数，从现在库中减去获得的随机数，然后返回给前台；
本疫情地图，实时爬取互联网疫情数据，展示中国疫情地图和世界疫情地图，允许各大网站调用数据。原文链接
前言 前一篇autoit实现文件上传打包成.exe可执行文件后，每次只能传固定的那个图片，我们实际测试时候希望传不同的图片。 这样每次调用的时候，在命令行里面加一个文件路径的参数就行。 一、命令行参数 1.参数化传入的参数，可以通过autoit的命令行参数： ``` myProg.exe param1 “This is a string parameter” 99 ``` 在脚本中，可用以下变量获取命令行参数： ``` $CmdLine[0] ; = 3 $CmdLine[1] ; = p
于是Selenium就应运而生了，它可以算的上是自动化测试框架中的佼佼者，因为它解决了大多数用来爬取页面的模块的一个永远的痛，那就是Ajax异步加载 。今天将给大家详解如何用Selenium爬取数据，并最后附上一个真实的案例。
作者｜黎腾 链接 | http://imweb.io/topic/595b7161d6ca6b4f0ac71f05 1. 前言 对于一张网页，我们往往希望它是结构良好，内容清晰的，这样搜索引擎才能准确地认知它。 而反过来，又有一些情景，我们不希望内容能被轻易获取，比方说电商网站的交易额，教育网站的题目等。因为这些内容，往往是一个产品的生命线，必须做到有效地保护。这就是爬虫与反爬虫这一话题的由来。 2. 常见反爬虫策略 但是世界上没有一个网站，能做到完美地反爬虫。 如果页面希望能在用户面前正常展示，同时又不给
作者：damyxu，腾讯 PCG 前端开发工程师 iframe是一个天然的微前端方案，但受限于跨域的严格限制而无法很好的应用，本文介绍一种基于 iframe 的全新微前端方案，继承iframe的优点，补足 iframe 的缺点，让 iframe 焕发新生。 背景 前端开发中我们对iframe已经非常熟悉了，那么iframe的作用是什么？可以归纳如下： 在一个web应用中可以独立的运行另一个web应用 这个概念已经和微前端不谋而合，相对于目前配置复杂、高适配成本的微前端方案来说，采用iframe方案具有
在web自动化测试中，frame是我们绕不开的一个东西，也是我们很头疼的东西，selenium处理frame，需要切换到frame中，然后再切换出来，操作比较麻烦，那么playwright对于frame的操作会不会更加简单呢？
在之前的文章当中，我们依次介绍了iframe跨域、JSONP跨域以及postMessage跨域。今天我们将针对跨域进行收尾，讲解最后一种，也是比较常见的服务器代由。同时我们针对之前提到的这4类跨域方法进行一个比较和总结。 再次总结跨域 文件访问限制：A域的前端页面是能够访问A域的后台，而A域的前端页面不能够去访问其他域的后台（浏览器不允许） 跨域来自于需求：当客户需求告诉我们，需要让A域的前端页面去访问B域的后台，此时就出现了跨域，此时我们需要找一些方法或途径解决这个“原本被禁止的功能”。 解决跨域的常见途
一个完整的域名由二个或二个以上部分组成，各部分之间用英文的句号”.”来分隔，最后一个”.”的右边部分称为顶级域名（TLD，也称为一级域名），最后一个”.”的左边部分称为二级域名（SLD），二级域名的左边部分称为三级域名，以此类推，每一级的域名控制它下一级域名的分配。定义是这样的，在域名中包含两个点的，就叫二级域名，只包含一个点的，就是一级域名。
感谢云游君提供的开源项目air-conditioner,如果GitHub抽风访问不了的话，可以在Gitee上拉取源码，我已经将大佬代码fork过来了。Gitee地址
1、先登陆后取网页中的Cookie加入到headers（标头），再用get方法获取网页内容
前言 不少小伙伴问非input标签如何上传文档，这个本身就是一坑，无奈很多小伙伴非要跳坑里去，那就介绍一个非主流的上传文件方法吧，用第三方库SendKeys. （本篇基于python2.7版本的，p
随着互联网的发展，许多网站开始采用动态网页来呈现内容。与传统的静态网页不同，动态网页使用JavaScript等脚本技术来实现内容的动态加载和更新。这给网页爬取带来了一定的挑战，因为传统的爬虫工具往往只能获取静态网页的内容。本文将介绍如何使用Selenium和API来实现动态网页的爬取
需求一：对知乎所有评论进行可视化及知识图谱建立，利用机器学习基神经网络训练知识图谱，进一步的增强用户的联系，扩充实体关联，这个就比较难了，还在进行时，哈哈~~
Grafana：一个监控仪表系统，可以根据提供的监控数据，生产可视化仪表盘，同时也具有告警通知功能。这里的监控数据来源，目前主要以Prometheus为主（也支持其它数据源），每次展现仪表盘时，都会向Prometheus服务发送一个查询请求，从而拿到监控数据并构建可视化仪表盘。
某些场景下（小区监控、厂区监控等），我们需要接入摄像头，但手头上只能获取到摄像头直播流地址，如RTSP流地址。我们可能需要将视频流发布web页面，可以用浏览器快速无插件的浏览观看。我们可能需要云台操作摄像头。我们可能需要将视频监控的视频流做集中的存储录制。此时我们可以用什么来解决，安防监控摄像头设备的接入呢？
最近随着复杂的自动化任务的增加，robot 项目出现了很多问题，经常要人工智能，在上次清远漂流的时候，就是经常报警，而且基本都是我人工智能解决的。
作为前端开发，在浏览器上打印算是一个比较常见的需求了。最简单的做法就是直接打印整个网页，在浏览器直接打印或者调用window.print()。 这样就能将当前页面整个打印出来了。 然而，实际上的需求往往都不是这样简单，它更多的可能是需要打印整个网页中的某一段“特定”的内容。
Python现在非常火，语法简单而且功能强大，很多同学都想学Python！所以小的给各位看官们准备了高价值Python学习视频教程及相关电子版书籍，欢迎前来领取！
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
