php curl模拟post请求提交数据

php教程|php手册

nbsp,curl,CURLOPT,keyword,setopt

php教程-php手册

最近在做校园图书馆图书信息的采集程序，既然是图书馆图书的采集，肯定有提交搜索的页面，无非是post提交，让我想到了curl模拟提交，首先通过firebug进行抓包查询下post提交后的格式如下：

仿搜狐视频源码,ubuntu18 搜狗,京东智库爬虫,mia php,seo网站申请lzw

txtWxlx=CN&hidWxlx=spanCNLx&txtPY=HZ&txtTm=%D2%F4%C0%D6&txtLx=%25&txtSearchType=1&nMaxCount=100&nSetPageSize=10&cSortFld=%D5%FD%CC%E2%C3%FB&B1=%BC%EC+%CB%F7；搜索的关键字name=txtTm，随后代码如下：

移动流量充值平台源码,vscode.mac,ubuntu打开脚本文件,tomcat urf,sqlite批量写入,万网服务器需要备案吗,问卷调查插件,界面前端框架,易语言网站爬虫,记录php,seo怎样排名靠前,骗子网站源码,行为网页宽屏图,html5模板个人,wpf 加载页面,图书馆信息管理系统课设,易语言程序集lzw

复制代码

socket 客户端服务端源码,vscode卡死,ubuntu链接wifi,编程 Tomcat,sqlite加密原理,不限流量的vps服务器,jquery 取色器插件,系统前端框架源码,财务报表爬虫,php中switch,seo违约,ckplayer电影网站,qq导航网页下载,帝国cms 图片模板,页面加载等待,成绩管理系统界面,delphi 应用程序所有formlzw

<?php

$keyword=”音乐”;$post=”txtWxlx=CN&hidWxlx=spanCNLx&txtPY=HZ&txtTm={$keyword}&txtLx=%25&txtSearchType=1&nMaxCount=100&nSetPageSize=20&cSortFld=%D5%FD%CC%E2%C3%FB&B1=%BC%EC+%CB%F7″;

$url = “http://210.30.68.130/wxjs/tmjs.asp”;

//查询地址

$ch = curl_init();

curl_setopt ($ch, CURLOPT_REFERER, “http://210.30.68.130/wxjs/tmjs_form.asp/ “); //模拟来源

curl_setopt($ch, CURLOPT_URL, $url);//URL

curl_setopt($ch,CURLOPT_FOLLOWLOCATION,1);

curl_setopt($ch, CURLOPT_HEADER, false);

curl_setopt($ch, CURLOPT_POST, 1); //模拟POST

curl_setopt($ch, CURLOPT_POSTFIELDS, $post);//POST内容

curl_exec($ch);

$output = curl_close($ch);

echo $output;

复制代码

但返回的页面总是显示没有相关内容，如果把关键字改成英语或者数字就可以正常显示了，于是想到这应该是编码问题，然后在post上面可以看到txtTm=%D2%F4%C0%D6经过查询得知这是url编码，汉字会进行转化，如果是英语则不会发生任何改变，于是就把头信息也加了部分内容进去如下：

$header = array();

$header[] = ‘User-Agent: Mozilla/5.0 (Windows NT 6.1; rv:30.0) Gecko/0101 Firefox/30.0’;

$header[] = ‘Accept:text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8’;

$header[] = ‘Connection: keep-alive’;

$header[] = ‘Content-Type:application/x-www-form-urlencoded’;

curl_setopt ( $ch, CURLOPT_HTTPHEADER, $header );

其实主要是$header[] = ‘Content-Type:application/x-www-form-urlencoded’;再次加载页面后如果是汉字显示还是没有相关的内容，随后想到了一个很简单的问题所在，php程序是utf8的，然而图书馆的网站是gb2312，好吧，再加上一句，$keyword = iconv(‘UTF-8’, ‘GB2312’, $keyword);再次加载成功，这个应该才是问题关键所在，然后我把头信息删除后添加一句$keyword = urlencode($keyword);再次加载也就是下面的代码：

复制代码

<?php

$keyword=”世界”;

$keyword = iconv(‘UTF-8’, ‘GB2312’, $keyword);

$keyword = urlencode($keyword);

$post=”txtWxlx=CN&hidWxlx=spanCNLx&txtPY=HZ&txtTm={$keyword}&txtLx=%25&txtSearchType=1&nMaxCount=100&nSetPageSize=20&cSortFld=%D5%FD%CC%E2%C3%FB&B1=%BC%EC+%CB%F7″;

$url = “http://210.30.68.130/wxjs/tmjs.asp”;

//查询地址

$ch = curl_init();

curl_setopt ($ch, CURLOPT_REFERER, “http://210.30.68.130/wxjs/tmjs_form.asp/ “); //模拟来源

curl_setopt($ch, CURLOPT_URL, $url);//URL

curl_setopt($ch,CURLOPT_FOLLOWLOCATION,1);

curl_setopt($ch, CURLOPT_HEADER, false);

curl_setopt($ch, CURLOPT_POST, 1); //模拟POST

curl_setopt($ch, CURLOPT_POSTFIELDS, $post);//POST内容

curl_exec($ch);

$output = curl_close($ch);

echo $output;