PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例


Posted in PHP onApril 14, 2016

说起来做这个功能还真是一时好奇。前段时间在做一个淘客网站的时候,想到是否能抓取到淘宝商品的买家秀呢?经过一番折腾发现,淘宝商品用户评价信息是通过Ajax来调取的,通过嗅探网址发现,评论数据的请求接口是:

https://rate.tmall.com/list_detail_rate.htm?itemId=524394294771&spuId=341564036&sellerId=100414600&order=3¤tPage=1&append=0&content=1&tagId=&posi=&picture=1&callback=jsonp2339

其实上面很多参数也很容易理解,itemId是商品的ID,currentPage是当前页,picture为1时显示有图的评价,既然是抓取买家秀,那么picture参数一定要为1了。

如果你直接去访问上面的接口时,会得到如下图所示的请求结果:

PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例

看到请求结果是jsonp格式我就蛋碎了,我不知道如何去解析,但是换种思路,直接用PHP的正则去解析也未尝不可嘛,通过尝试,已经正确的能够解析到评论内容和买家秀的图片内容,如图:

PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例

效果不错,代码实现了评论内容的抓取、买家秀图片的抓取,代码奉上:

<?php
$url = "https://rate.tmall.com/list_detail_rate.htm?itemId=524394294771&spuId=341564036&sellerId=100414600&order=3¤tPage=1&append=0&content=1&tagId=&posi=&picture=1&callback=jsonp2339";
$ch2 = curl_init();
curl_setopt($ch2, CURLOPT_URL, $url);
curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, TRUE);
curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, FALSE);
curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, false);
curl_setopt($ch2, CURLOPT_RETURNTRANSFER, TRUE);
$texts = curl_exec($ch2);
curl_close($ch2);
//echo $texts;
$pattern = '/"pics"(.+?)","reply"/is';
preg_match_all($pattern, $texts, $match);
for($i=0;$i<count($match[0]);$i++){
$pattern2 = '/"rateContent":"(.+?)."reply"/is';
preg_match($pattern2, $match[0][$i], $matchcomments_only);
echo "<p>".str_replace('","rateDate":"',' ',str_replace('","reply"','',str_replace('"rateContent":"','',$matchcomments_only[0])))."</p>";
$pattern3 = '/img.alicdn(.+?).jpg/is';
preg_match($pattern3, $match[0][$i], $matchpic_only);
echo '<img src="http://'.$matchpic_only[0].'" width=120>';
}
/*匹配一张图片
$pattern = '/"pics"(.+?)","position"/is';
preg_match_all($pattern, $texts, $matchpic);
for($i=0;$i<count($matchpic[0]);$i++){
$pattern3 = '/img.alicdn(.+?).jpg/is';
preg_match($pattern3, $matchpic[0][$i], $matchpic_only);
echo "<p>".$matchpic_only[0]."</p>";
}*/
/*匹配所有图片
$pattern = '/"pics"(.+?)","position"/is';
preg_match_all($pattern, $texts, $matchpic);
for($i=0;$i<count($matchpic[0]);$i++){
$pics_str=str_replace('"pics":["//','',str_replace('"],"picsSmall":"","position"','',$matchpic[0][$i]));
$arr = explode('","//',$pics_str);
echo "<p>";
foreach($arr as $newstr){
echo '<img src=http://'.$newstr.' width=100 >';
}
echo "</p>";
}*/
?>

下面给大家介绍PHP抓取淘宝搜索商品列表实例

<?php
header("Content-Type:text/html;charset=gbk");
include "Snoopy.class.php"; 
$snoopy = new Snoopy; 
$snoopy->fetch("http://s.taobao.com/search?spm=a230r.1.8.7.2NN4M7&q=%C7%EF%B6%AC%B4%F3%D2%C2&source=tbsy&refpid=420461_1006&discount_index=1&newpre=null&p4p_str=fp_midtop%3D0%26firstpage_pushleft%3D0&style=list&s=0#J_Filter"); 
$html=$snoopy->results; 
//说明:抓取网页使用的是 Snoopyphp 框架 也可以直接使用file_get_contents函数获取即可,
//var_dump($html);
preg_match_all('/<h3 class="summary">.*</a>/',$html,$result);
//preg_match_all('/<divsid="([a-z0-9_]+)">([^<>]+)</div>/',$html,$result);
var_dump($result);
echo "<br>";
/*
//循环读取数组
foreach($result as $key1){
foreach($key1 as $key => $val){
echo $key.$val;
}
}
*/

以上所述是小编给大家介绍的PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例,希望对大家有所帮助!

PHP 相关文章推荐
JAVA/JSP学习系列之七
Oct 09 PHP
解决GD中文乱码问题
Feb 14 PHP
PHP 操作文件的一些FAQ总结
Feb 12 PHP
学习discuz php 引入文件的方法DISCUZ_ROOT
Jun 21 PHP
php header Content-Type类型小结
Jul 03 PHP
ThinkPHP实现多数据库连接的解决方法
Jul 01 PHP
php中实现获取随机数组列表的自定义函数
Apr 02 PHP
php+ajax 实现输入读取数据库显示匹配信息
Oct 08 PHP
PHP根据session与cookie用户登录状态操作类的代码
May 13 PHP
Yii2框架dropDownList下拉菜单用法实例分析
Jul 18 PHP
PHP基于正则批量替换Img中src内容实现获取缩略图的功能示例
Jun 07 PHP
在phpstudy集成环境下的nginx服务器下配置url重写
Dec 02 PHP
php上传大文件设置方法
Apr 14 #PHP
什么是OneThink oneThink后台添加插件步骤
Apr 13 #PHP
java模拟PHP的pack和unpack类
Apr 13 #PHP
php远程下载类分享
Apr 13 #PHP
Thinkphp和onethink实现微信支付插件
Apr 13 #PHP
PHP MSSQL 分页实例
Apr 13 #PHP
php构造方法中析构方法在继承中的表现
Apr 12 #PHP
You might like
wamp下修改mysql访问密码的解决方法
2013/05/07 PHP
php使用高斯算法实现图片的模糊处理功能示例
2016/11/11 PHP
PHP回调函数简单用法示例
2019/05/08 PHP
CI框架简单分页类用法示例
2020/06/06 PHP
让FireFox支持innerText的实现代码
2009/12/01 Javascript
js中如何把字符串转化为对象、数组示例代码
2013/07/17 Javascript
javascript实现div浮动在网页最顶上并带关闭按钮效果实例
2013/08/13 Javascript
jquery.qrcode在线生成二维码使用示例
2013/08/21 Javascript
使用jQuery在移动页面上添加按钮和给按钮添加图标
2015/12/04 Javascript
javaScript+turn.js实现图书翻页效果实例代码
2017/02/16 Javascript
JavaScript注册时密码强度校验代码
2017/06/30 Javascript
微信小程序 数据绑定及运算的简单实例
2017/09/20 Javascript
从零开始最小实现react服务器渲染详解
2018/01/26 Javascript
JS中超越现实的匿名函数用法实例分析
2019/06/21 Javascript
javascript实现blob加密视频源地址的方法
2019/08/08 Javascript
JavaScript函数Call、Apply原理实例解析
2020/02/17 Javascript
使用纯前端JavaScript实现Excel导入导出方法过程详解
2020/08/07 Javascript
剖析Django中模版标签的解析与参数传递
2015/07/21 Python
各个系统下的Python解释器相关安装方法
2015/10/12 Python
Python的iOS自动化打包实例代码
2018/11/22 Python
Python3 max()函数基础用法
2019/02/19 Python
python3.7 sys模块的具体使用
2019/07/22 Python
Python在OpenCV里实现极坐标变换功能
2019/09/02 Python
美国领先的礼品卡网站:GiftCards.com
2016/11/02 全球购物
介绍一下Linux文件的记录形式
2012/04/18 面试题
ajax是什么及其工作原理
2012/02/08 面试题
小学教师的自我评价范例
2013/10/31 职场文书
工厂实习感言
2014/01/14 职场文书
考试违纪检讨书
2014/02/02 职场文书
市场开发与营销专业求职信范文
2014/05/01 职场文书
地球一小时活动总结
2015/02/27 职场文书
2015年计划生育责任书
2015/05/08 职场文书
工程进度款催款函
2015/06/24 职场文书
《跨越海峡的生命桥》教学反思
2016/02/18 职场文书
JavaScript+HTML实现学生信息管理系统
2021/04/20 Javascript
CentOS 7安装mysql5.7使用XtraBackUp备份工具命令详解
2022/04/12 MySQL