cURL ที่ใช้ดึงหน้าเว็บอะครับ

[sakang]

ดึงหน้ามา แล้วก็ใช้ฟังชั่นอื่นตัดส่วนเอาใช่รึเปล่าครับ แล้วมันต่างจากใช้  file_get_contents ยังไงหรอครับ

[dragonmath]

ด้านประสิทธิภาพ
ความเร็วในการดึงต่างกันครับ curl จะดึงได้เร็วกว่าๆ
ด้านการใช้งาน
การใช้ curl เราสามารถ post, put ละก็ get.แต่ file_get_contents ทำได้แค่ get เพียงอย่างเดียว.

[dragonmath]

<?php

$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, "http://www.example.com/path/to/form");
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_POST, true);

$data = array(
    'foo' => 'foo foo foo',
    'bar' => 'bar bar bar',
    'baz' => 'baz baz baz'
);

curl_setopt($ch, CURLOPT_POSTFIELDS, $data);
$output = curl_exec($ch);
$info = curl_getinfo($ch);
curl_close($ch);
ตัวอย่างการใช้งานๆ

[ball6847]

curl กับ file_get_contents ดึงได้เหมือนกันไม่ต่าง

แต่ curl จะเปนทางออกที่ดีเสมอเวลาที่ file_get_contents ไม่เวิร์ค

ส่วนเรื่องการดึงข้อมูลออกมาจาก ผลลัพท์ที่ได้จาก curl หรือ file_get_contents
ใช้ regular expression หรือไม่ก็พวก substr , strpos

[kongpair]

file_get_contents  ได้ข้อมูลมาเป็น String  ใช้ Ram น้อยกว่า

Curl ได้มาเป็น Object ใช้ Ram มากกว่า


ในกรณีที่ข้อมูลเดียวกัน

[Twenty-One]

ยืนยันตาม dragonmath ว่า cURL  ทำงานได้ดีกว่าครับ เร็วกว่า

[ColdMoney]

cURL เร็วกว่ามากครับ และทำ multi session ได้ 

[TG_Min]

ใช้คำสั่ง curl แล้วหน้ามันว่างๆ ทั้งๆ ที่ php ก็เปิดใช้งานคำสั่งนี้ หมายความว่ายังไงครับ ต้องแก้ยังไง

code ที่ใช้ก็เหมือนด้านบน ตัวอย่าง

โค้ด เลือก ขยาย


<?php
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, "feed");
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_POST, true);
curl_setopt($ch, CURLOPT_POSTFIELDS, $data);
$output = curl_exec($ch);
$info = curl_getinfo($ch);
curl_close($ch);
echo $output;
?>


มันก็ได้กับ host อื่น แต่ host ตัวที่ใช้มันว่าง โล่ง ขาวสะอาดไม่ขึ้นไรเลย

[icyphone]

curl ได้เรื่องความเร็ว และทำ multi session

[TG_Min]

ไม่มีใครทราบเลยแฮะ

[TG_Min]

ตอนนี้เจอปัญหาใหม่ เข้าใจว่าปัญหาเดิมคือมันไม่ยอมให้ดึง url จากภายนอก (เลยแสดงค่าว่างไว้) ยกเว้นภายใน domain มันเอง
ลองใส่ url ใน domain มันเองก็ดึงได้ แต่ใส่ url ภายนอกมันไม่ทำงาน ต้องแก้ยังไงดีครับ

เซ็งกะ host นี้จริงๆ

[vii]

ตอนนี้เจอปัญหาใหม่ เข้าใจว่าปัญหาเดิมคือมันไม่ยอมให้ดึง url จากภายนอก (เลยแสดงค่าว่างไว้) ยกเว้นภายใน domain มันเอง
ลองใส่ url ใน domain มันเองก็ดึงได้ แต่ใส่ url ภายนอกมันไม่ทำงาน ต้องแก้ยังไงดีครับ

เซ็งกะ host นี้จริงๆ

host block ไว้รึเปล่าครับ ลองดึงจาก google.com ดู ปกติจะต้องดึงได้
ถ้าดึงจาก url ตัวเองได้แต่ url คนอื่นไม่ได้ก็โดนบล็อกแล้วครับ ที่ host นะ

[TG_Min]

โดนล๊อคจริงๆ อ่ะครับ ทดลองกับหลายๆ คำสั่งแล้ว
ในตัวเองได้ แต่ดึงจาก url นอกไม่ได้เลย

ให้ admin แก้ไขแล้วเค้าบอกกำลังติดต่อกับ admin ต่างประเทศ
ก็รอต่อไป เฮ่อ ขอบคุณมากมายครับทุกท่าน

[loveme2]

ความรู้ใหม่ๆเก็บครับผม

[bananaoxy]

curl ใช้กับ proxy ได้ด้วยนะเออ...

[dreamer]

ตามความเข้าใจของผมนะ

file_get_content ก็เหมือนอ่านไฟล์ที่อยู่ที่ไหนก็ได้ เครื่องเดียวกันหรือเครื่องอื่นก็ได้

cURL จำลอง browser มาเลย

[flash]

ที่เคยลองใช้ curl จะกิน CPU 100% เป็นช่วงๆ  ครับ  ไม่รู้จะแก้ยังไงดี

[Tee++;]

ลองหันมาดู YQL บ้างมั้ยครับ ทำ Selector แบบไม่เปลือง SERVER เราเอง อาทิเช่นผมต้องการดึงเว็บ ก็

โค้ด เลือก ขยาย

select * from html where url="http://www.jquerytips.com" and xpath='//div[@id="container"]'

ซึ่งก็คือ

โค้ด เลือก ขยาย

http://query.yahooapis.com/v1/public/yql?q=select%20*%20from%20html%20where%20url%3D%22http%3A%2F%2Fwww.jquerytips.com%22%20&diagnostics=true

ถ้าผมต้องการเขียน Regular ก็

โค้ด เลือก ขยาย

select * from regex where expression = "(.*)" and text = "The quick brown fox leaps over the lazy dog";

ต้องการโพสต์ฟอร์ม

โค้ด เลือก ขยาย

select * from htmlpost where
url='http://isithackday.com/hacks/htmlpost/index.php'
and postdata="foo=foo&bar=bar" and xpath="//p"

ใช้  CSS Selector

โค้ด เลือก ขยาย

select * from data.html.cssselect where url="www.jquerytips.com" and css=".widget_entries"

นอกจากนี้ยังทำอะไรได้อีกหลายร้อยแบบ อาทิเช่น ต่อ Social Network API, ดึง Multi Feed 

แล้วก็นอกจาก Return เป็น  XML ยังสามารถ Return  เป็น JSON ได้อีกด้วย

แล้วก็ Rate Limit สูงมาก 100,000/day 1000/ip/day  ต่อ access key (จริงๆ แล้วขอมากี่ key ก็ได้ ให้เยอะตาม สไตล์ API Yahoo ครับ)

ลองเล่นดูเองก็ได้ครับ
http://developer.yahoo.com/yql/console/