成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

RSS解析器MagpieRSS筆記

開發
MagpieRSS是一個不錯的RSS抓取/解析工具,我本來打算自己寫一個PHP的RSS解析工具,不過試了一下MagpieRSS,覺得還不錯,能滿足需要。

MagpieRSS是一個不錯的RSS抓取/解析工具,我本來打算自己寫一個php的RSS解析工具,不過試了一下MagpieRSS,覺得還不錯,能滿足需要。

順便看了看代碼,記點筆記。

1.亂碼問題

MagpieRSS過去時常出現亂碼問題,從0.7版本解決了這個問題

Version0.7

support for input and output charset encoding

based on the work in FoF,uses iconv or mbstring if available

0.7之后的版本可以指定輸入和輸出字符編碼,然后使用iconv或mbstring函數進行編碼轉換。這個工作在create_parser函數里面完成的,如果兩個函數都不存在,可以在RSS_fetch.inc中讓MAGPIE_DETECT_ENCODING為false,不檢測和轉換編碼,否則就會出錯。

一切正常的情況下,把RSS_fetch.inc中MAGPIE_OUTPUT_ENCODING定義成你需要的輸出編碼,比如UTF-8:define(‘MAGPIE_OUTPUT_ENCODING’,‘UTF-8’);就可以獲得正確的輸出結果了。

2.抓取方法

MagpieRSS用了Snoopy作為http客戶端來抓取RSS。這個庫比較完善,支持https,支持gzip。

需要注意的是,Snoopy用exec命令調用curl,然后返回結果,而不是使用編譯進php的curl函數。默認的路徑是“/usr/bin/curl”,如果這里沒有curl或是沒有執行權限,就可能失敗。不過只有https需要用到curl,普通的http訪問是用fsockopen的。

同時,Snoopy可以使用代理服務器,但是MagpieRSS沒有使用,如果需要可以在RSS_fetch.inc中的_fetch_remote_file函數里面添加$client->proxy_host和$client->proxy_port。

3.緩存

MagpieRSS設置了一個默認3600秒超時的緩存。在./cache下放了一堆文件,文件名是md5之后的url+MAGPIE_OUTPUT_ENCODING,格式是php的serialize。

所以cache目錄要可寫。超時時間在RSS_cache.inc的var$MAX_AGE=3600;這行設置,也可以在創建cache對象的時候設置。

綜合起來,這個庫還是不錯的,優點很多,也考慮了主機的各種情況,兼容性很好。函數形式的接口,很容易調用。不過應該先用head來取RSS的http header,根據Etag來判斷是否抓整個頁面回來,這樣效率還能再有提高。這個改動之后,cache就可以存在更長的時間,而不是一個固定的3600秒。同時我比較想把文章保存起來,以便以后用,這就需要數據庫了。

我將來應該會基于這個東西發布一個新版本,把我想要的功能加進來。

【編輯推薦】

  1. 基于ASP.NET AJAX技術開發在線RSS閱讀器(上篇)
  2. 基于ASP.NET AJAX技術開發在線RSS閱讀器(下篇)
  3. 如何利用.NET Framework使用RSS feed
責任編輯:book05 來源: CBSi中國·ZOL
相關推薦

2010-02-22 13:38:50

Python解析器

2010-02-22 16:51:03

Python 解析器

2020-12-02 10:13:45

JacksonJDK解析器

2021-03-18 10:56:59

SpringMVC參數解析器

2014-05-06 09:27:54

2022-02-14 13:58:32

操作系統JSON格式鴻蒙

2009-12-14 18:59:27

Ruby解析器

2022-10-20 11:00:52

SQL解析器

2009-12-09 10:31:32

ibmdwJava

2010-01-07 16:37:04

JSON解析器

2017-02-27 15:43:51

2021-03-16 10:39:29

SpringBoot參數解析器

2022-07-11 10:37:41

MapPart集合

2010-01-07 17:24:31

JSON 解析器

2020-06-17 11:42:50

異常解析器Spring MVC

2010-03-05 10:14:53

Ubuntu ruby

2009-01-03 14:39:00

ibmdwSpirit

2011-04-01 16:16:27

JavaScript

2021-10-03 15:02:50

HTTPNodejs

2019-07-05 08:39:39

GoSQL解析器
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 日本免费在线看 | 亚洲精久久久 | 久久av一区二区 | 米奇成人网 | 青青久久 | 免费一级黄色 | 久久综合久色欧美综合狠狠 | 久久精品国产亚洲一区二区三区 | 一区精品在线观看 | 色网站在线免费观看 | 亚洲高清一区二区三区 | 91精品国产91久久久久久 | 天天夜夜人人 | 久久久精品一区二区三区 | 国产亚洲精品美女久久久久久久久久 | 亚洲一区二区日韩 | 欧美成人在线免费 | 久久一区 | chinese中国真实乱对白 | 亚洲欧美精品在线 | www.青娱乐| 久久精品日产第一区二区三区 | 国产精品久久在线观看 | 日本午夜精品一区二区三区 | 99久久国产精 | 亚洲视频手机在线 | 日韩精品中文字幕一区二区三区 | japanhd成人 | 日韩一区二区在线播放 | 日韩中文一区二区三区 | 国产精品呻吟久久av凹凸 | 国产无人区一区二区三区 | 黄色三级免费网站 | 欧美黄色片 | 91精品国产91久久综合桃花 | 精品久久香蕉国产线看观看亚洲 | 超碰成人在线观看 | 色爱综合网 | 成人一区av偷拍 | 狠狠躁18三区二区一区 | 日本成人免费观看 |