seedurl_news.each(function(i, e) { //遍历种子页面里所有的a链接var myURL = "";try {//得到具体新闻urlvar href = "";href = $(e).attr("href");if (href == undefined) return;if (href.toLowerCase().indexOf('http://') >= 0) myURL = href; //http://开头的else if (href.startsWith('//')) myURL = 'http:' + href; 开头的else myURL = seedURL.substr(0, seedURL.lastIndexOf('/') + 1) + href; //其他} catch (e) { console.log('识别种子页面中的新闻链接出错:' + e) }if (!url_reg.test(myURL)) return; //检验是否符合新闻url的正则表达式var fetch_url_Sql = 'select url from fetches where url=?';var fetch_url_Sql_Params = [myURL];mysql.query(fetch_url_Sql, fetch_url_Sql_Params, function(qerr, vals, fields) {if (vals == null || vals.length == 0) {newsGet(myURL);} else{console.log('URL duplicate!');} //读取新闻页面});
网站建设运营企业网站的开发西宁网站建设深圳网站公司荆门网站建设深圳开发小程序网叶制作网站设计报价茂名网站建设手机版网站建设广州企业网站建设网站建设网站制作公司长沙网站设计公司网站构建昆明网页制作旅游网站模板厦门网站建设个人网站设计模板环保网站建设公司网站设计湖州网站设计汕头网站制作乌鲁木齐网站制作seo网站设计关键词商洛网站建设旅游网站建设方案网站建设公司推荐苏州网页制作防水网站建设网站开发建设