0

0

php file_get_contents 转curl抓取淘宝商品属性 大神帮忙下

php中文网

php中文网

发布时间:2016-06-23 13:30:47

|

1350人浏览过

|

来源于php中文网

原创

以下代码如何改为用 curl来抓取呢?并且以商品的IID保存

function get_shuxing($type,$iid){if($type=='tmall'){$text=file_get_contents("http://detail.tmall.com/item.htm?id=$iid");preg_match('|<ul id="J_AttrUL">(.*)</ul>|isU',$text, $match);}elseif ($type=='taobao'){$text=file_get_contents("http://item.taobao.com/item.htm?id=$iid");preg_match('|<ul class="attributes-list">(.*)</ul>|isU',$text, $match);}$match=$match[0];$match = iconv('gbk', 'utf-8', $match);echo $match;}


回复讨论(解决方案)

有哪位大神帮忙呢》

你不给测试数据怎么弄,再怎么也得给个$iid吧...

你不给测试数据怎么弄,再怎么也得给个$iid吧...



http://detail.tmall.com/item.htm?id=13317551791
可以吗!就是获取商品的产品参数

$html=file_get_contents('http://detail.tmall.com/item.htm?id=13317551791');include 'simple_html_dom.php';//网上下一个 $dom=new simple_html_dom();// $html utf8才可以$dom->load($html);$names=$dom->find('select[id=js]');$res=array();$lis=$dom->find('ul[id=J_AttrUL] li');foreach($lis as $k=>$li){    $temp=$li->text();	list($key,$value)=explode(':',$temp);	$data[$key]=$value;}echo "<pre class="brush:php;toolbar:false;">";print_r($data);echo "
";/*Array(    [上市年份季节] =>  2015年夏季    [裤长] =>  长裤    [货号] =>  Y306    [颜色] =>  Y139蓝色 Y118蓝色偏小一码 Y139复古蓝 Y306黑蓝 深色Y306/蓝色 Y306浅蓝色 YN8601蓝色 Y007怀旧蓝    [尺码] =>  40 38 36 34 33 32 31 30 29 28    [牛仔面料] =>  常规牛仔布    [工艺处理] =>  压皱 水洗 复古 商务 个性 潮牌  休闲 nzk 修身 漂白 猫须 破洞 雪花洗 手擦 磨边 刮烂 电磨 针缝 喷砂 赤耳 马骝 镶边 无工艺 扎花 刺绣 扎染    [品牌] =>  YYK    [款式细节] =>  立体剪裁    [上市时间] =>  2013年    [适用季节] =>  夏季    [适用对象] =>  大码    [材质] =>  棉涤    [弹力] =>  无弹    [腰型] =>  中腰    [裤脚口款式] =>  直脚    [裤门襟] =>  拉链    [洗水工艺] =>  水洗 石洗/石磨 砂洗 石漂洗 漂染 碧纹洗 吊染 雪花洗 酵素洗 化学洗    [厚薄] =>  薄款    [款式版型] =>  合体直筒    [基础风格] =>  时尚都市    [细分风格] =>  日系复古)*/

$html=file_get_contents('http://detail.tmall.com/item.htm?id=13317551791');include 'simple_html_dom.php';//网上下一个 $dom=new simple_html_dom();// $html utf8才可以$dom->load($html);$names=$dom->find('select[id=js]');$res=array();$lis=$dom->find('ul[id=J_AttrUL] li');foreach($lis as $k=>$li){    $temp=$li->text();	list($key,$value)=explode(':',$temp);	$data[$key]=$value;}echo "<pre class="brush:php;toolbar:false;">";print_r($data);echo "
";/*Array(    [上市年份季节] =>  2015年夏季    [裤长] =>  长裤    [货号] =>  Y306    [颜色] =>  Y139蓝色 Y118蓝色偏小一码 Y139复古蓝 Y306黑蓝 深色Y306/蓝色 Y306浅蓝色 YN8601蓝色 Y007怀旧蓝    [尺码] =>  40 38 36 34 33 32 31 30 29 28    [牛仔面料] =>  常规牛仔布    [工艺处理] =>  压皱 水洗 复古 商务 个性 潮牌  休闲 nzk 修身 漂白 猫须 破洞 雪花洗 手擦 磨边 刮烂 电磨 针缝 喷砂 赤耳 马骝 镶边 无工艺 扎花 刺绣 扎染    [品牌] =>  YYK    [款式细节] =>  立体剪裁    [上市时间] =>  2013年    [适用季节] =>  夏季    [适用对象] =>  大码    [材质] =>  棉涤    [弹力] =>  无弹    [腰型] =>  中腰    [裤脚口款式] =>  直脚    [裤门襟] =>  拉链    [洗水工艺] =>  水洗 石洗/石磨 砂洗 石漂洗 漂染 碧纹洗 吊染 雪花洗 酵素洗 化学洗    [厚薄] =>  薄款    [款式版型] =>  合体直筒    [基础风格] =>  时尚都市    [细分风格] =>  日系复古)*/

虽然是可以,但是不是我想要的,谢谢啦

这些不是产品参数?数据都取出来了,至于怎么用,就看你自己处理,我又不是知道你要什么样的数据格式,一维,二维?键值对?

不要用正则,我记得抓这些属性有http请求方法的,你抓个包就知道了

这样吗?

function get_shuxing($type,$iid){        if($type=='tmall'){                //$text=file_get_contents("http://detail.tmall.com/item.htm?id=$iid");                $text=use_curl("http://detail.tmall.com/item.htm?id=$iid");                preg_match('|<ul id="J_AttrUL">(.*)</ul>|isU',$text, $match);        }elseif ($type=='taobao'){                //$text=file_get_contents("http://item.taobao.com/item.htm?id=$iid");                $text=use_curl("http://item.taobao.com/item.htm?id=$iid");                preg_match('|<ul class="attributes-list">(.*)</ul>|isU',$text, $match);        }        $match=$match[0];        $match = iconv('gbk', 'utf-8', $match);        echo $match;}function use_curl($url){        $ch = curl_init($url);        curl_setopt($ch, CURLOPT_HEADER, 0);        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);        $output = curl_exec($ch);        curl_close($ch);        return $output;}get_shuxing('taobao',45098460735);

这样吗?

function get_shuxing($type,$iid){        if($type=='tmall'){                //$text=file_get_contents("http://detail.tmall.com/item.htm?id=$iid");                $text=use_curl("http://detail.tmall.com/item.htm?id=$iid");                preg_match('|<ul id="J_AttrUL">(.*)</ul>|isU',$text, $match);        }elseif ($type=='taobao'){                //$text=file_get_contents("http://item.taobao.com/item.htm?id=$iid");                $text=use_curl("http://item.taobao.com/item.htm?id=$iid");                preg_match('|<ul class="attributes-list">(.*)</ul>|isU',$text, $match);        }        $match=$match[0];        $match = iconv('gbk', 'utf-8', $match);        echo $match;}function use_curl($url){        $ch = curl_init($url);        curl_setopt($ch, CURLOPT_HEADER, 0);        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);        $output = curl_exec($ch);        curl_close($ch);        return $output;}get_shuxing('taobao',45098460735);


就是想改成这样的,但是tmall的参数却无法获取到,改回我自己的又正常,奇怪了


这样吗?

function get_shuxing($type,$iid){        if($type=='tmall'){                //$text=file_get_contents("http://detail.tmall.com/item.htm?id=$iid");                $text=use_curl("http://detail.tmall.com/item.htm?id=$iid");                preg_match('|<ul id="J_AttrUL">(.*)</ul>|isU',$text, $match);        }elseif ($type=='taobao'){                //$text=file_get_contents("http://item.taobao.com/item.htm?id=$iid");                $text=use_curl("http://item.taobao.com/item.htm?id=$iid");                preg_match('|<ul class="attributes-list">(.*)</ul>|isU',$text, $match);        }        $match=$match[0];        $match = iconv('gbk', 'utf-8', $match);        echo $match;}function use_curl($url){        $ch = curl_init($url);        curl_setopt($ch, CURLOPT_HEADER, 0);        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);        $output = curl_exec($ch);        curl_close($ch);        return $output;}get_shuxing('taobao',45098460735);


就是想改成这样的,但是tmall的参数却无法获取到,改回我自己的又正常,奇怪了

CrePal
CrePal

一站式AI视频创作Agent

下载

立即学习PHP免费学习笔记(深入)”;




<!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN"><html><head><title>302 Found</title></head><body bgcolor="white"><h1>302 Found</h1><p>The requested resource resides temporarily under a different URI.</p><hr/>Powered by Tengine</body></html>

tmall 返回302了

淘宝
淘宝

淘宝是一个好逛、丰富、有趣的消费生活社区,每天有亿万消费者来淘宝“逛街”:发现好物、找到乐趣、表达体验……淘宝能满足人们生活中的各种需求,有需要的小伙伴快来保存下载体验吧!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Golang 实际项目案例:从需求到上线
Golang 实际项目案例:从需求到上线

《Golang 实际项目案例:从需求到上线》以真实业务场景为主线,完整覆盖需求分析、架构设计、模块拆分、编码实现、性能优化与部署上线全过程,强调工程规范与实践决策,帮助开发者打通从技术实现到系统交付的关键路径,提升独立完成 Go 项目的综合能力。

2

2026.02.26

Golang Web 开发路线:构建高效后端服务
Golang Web 开发路线:构建高效后端服务

《Golang Web 开发路线:构建高效后端服务》围绕 Go 在后端领域的工程实践,系统讲解 Web 框架选型、路由设计、中间件机制、数据库访问与接口规范,结合高并发与可维护性思维,逐步构建稳定、高性能、易扩展的后端服务体系,帮助开发者形成完整的 Go Web 架构能力。

3

2026.02.26

Golang 并发编程专题:掌握多核时代的核心技能
Golang 并发编程专题:掌握多核时代的核心技能

《Golang 并发编程专题:掌握多核时代的核心技能》系统讲解 Go 在并发领域的设计哲学与实践方法,深入剖析 goroutine、channel、调度模型与并发安全机制,结合真实场景与性能思维,帮助开发者构建高吞吐、低延迟、可扩展的并发程序,全面提升多核时代的工程能力。

5

2026.02.26

batoto漫画官网入口与网页版访问指南
batoto漫画官网入口与网页版访问指南

本专题系统整理batoto漫画官方网站最新可用入口,涵盖最新官网地址、网页版登录页面及防走失访问方式说明,帮助用户快速找到batoto漫画官方平台,稳定在线阅读各类漫画内容。

356

2026.02.25

Steam官网正版入口与注册登录指南_新手快速进入游戏平台方法
Steam官网正版入口与注册登录指南_新手快速进入游戏平台方法

本专题系统整理Steam官网最新可用入口,涵盖网页版登录地址、新用户注册流程、账号登录方法及官方游戏商店访问说明,帮助新手玩家快速进入Steam平台,完成注册登录并管理个人游戏库。

78

2026.02.25

TypeScript全栈项目架构与接口规范设计
TypeScript全栈项目架构与接口规范设计

本专题面向全栈开发者,系统讲解基于 TypeScript 构建前后端统一技术栈的工程化实践。内容涵盖项目分层设计、接口协议规范、类型共享机制、错误码体系设计、接口自动化生成与文档维护方案。通过完整项目示例,帮助开发者构建结构清晰、类型安全、易维护的现代全栈应用架构。

35

2026.02.25

Python数据处理流水线与ETL工程实战
Python数据处理流水线与ETL工程实战

本专题聚焦 Python 在数据工程场景下的实际应用,系统讲解 ETL 流程设计、数据抽取与清洗、批处理与增量处理方案,以及数据质量校验与异常处理机制。通过构建完整的数据处理流水线案例,帮助开发者掌握数据工程中的性能优化思路与工程化规范,为后续数据分析与机器学习提供稳定可靠的数据基础。

14

2026.02.25

Java领域驱动设计(DDD)与复杂业务建模实战
Java领域驱动设计(DDD)与复杂业务建模实战

本专题围绕 Java 在复杂业务系统中的建模与架构设计展开,深入讲解领域驱动设计(DDD)的核心思想与落地实践。内容涵盖领域划分、聚合根设计、限界上下文、领域事件、贫血模型与充血模型对比,并结合实际业务案例,讲解如何在 Spring 体系中实现可演进的领域模型架构,帮助开发者应对复杂业务带来的系统演化挑战。

5

2026.02.25

Golang 生态工具与框架:扩展开发能力
Golang 生态工具与框架:扩展开发能力

《Golang 生态工具与框架》系统梳理 Go 语言在实际工程中的主流工具链与框架选型思路,涵盖 Web 框架、RPC 通信、依赖管理、测试工具、代码生成与项目结构设计等内容。通过真实项目场景解析不同工具的适用边界与组合方式,帮助开发者构建高效、可维护的 Go 工程体系,并提升团队协作与交付效率。

19

2026.02.24

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号