CFHTTP编码问题

我试图拉一个页面来解析使用cfhttp的信息。 我打电话给的页面标题是:

内容编码:gzip

连接:保持活跃

内容长度:19066

服务器:IBM_HTTP_Server

变化:接受编码,用户代理

内容语言:en-US

Cache-Control:no-cache =“set-cookie,

设置COOKIE2"

内容类型:

text / html的;字符集= ISO-8859-1

我将字符集设置为ISO-8859-1,但是我在FileContent中获得了以下内容(仅显示了一小部分示例,但我认为它可以指向)。

EðÑq·Oã?ÌZóL¯þ'Vú5ðb䣬æ¾_HÉññQãOÇþãëë85ãÜà±°ùÖ}&bßý?,u?2SùQyk5g?UÛ3Ѹfã×ARÃi_iûRã_òCA¿-ß。 "b /¯ßíWÝÆ´}w~,°iøÜCáÇþ@ÃZ5¤ïsÁ8½°ì* ZÜéjOÝK/Ë4§ÈG5×ä*¬6ÚwÇ0]ã:àÑþé¬G"ÅÁl/t° jlá»5¶&¯lìYìºØ'yDð½|#ý<ñìTé%¾ï¬ùƪx¶}«±o9»ë¼ÂÆÒï'w8Y? ÷xxsllû6íqüGÞsÜóÀx·ªk®XºàåZ{íÁ½åo÷mbq¥ÝÃ8M

我尝试了其他的字符集,并正在考虑gzip编码导致的问题,但我不确定如何测试,如果这是问题。 任何建议或帮助将受到重视。

以下是我的代码

<cfhttp 
    METHOD="get"
    throwonerror="yes" 
    CHARSET="ISO-8859-1"
    URL="http://www.cars.com/for-sale/searchresults.action?sf1Dir=DESC&prMn=1&crSrtFlds=stkTypId-feedSegId-pseudoPrice&rd=100000&zc=44203&PMmt=0-0-0&stkTypId=28881&sf2Dir=ASC&sf1Nm=price&sf2Nm=miles&feedSegId=28705&searchSource=UTILITY&pgId=2102&rpp=10">

    <cfhttpparam type="Header" name="Accept-Encoding" value="deflate;q=0">
    <cfhttpparam type= "Header" name= "TE" value= "deflate;q=0" >
</cfhttp>

<cfset listings = #cfhttp.FileContent#>
<cfoutput>
    #listings#
</cfoutput>

我也尝试了标题:

    <cfhttpparam type="Header" name="Accept-Encoding" value="*">
    <cfhttpparam type= "Header" name= "TE" value= "deflate;q=0" >

尝试删除“Accept-Encoding”标题,然后离开TE。

更新:我还没有弄清楚,但我发现了一些可能会帮助别人帮助我的东西。 当我使用我的测试php服务器在同一页面上运行file_get_contents并且它工作正常时,如果我运行相同的cfhttp代码来调用正在调用页面的php页面,我需要它工作得很好。 感谢迄今为止的建议。


cars.com的问题似乎是他们两次gzip输出(基于这个线程)

所以,我们需要再次解压缩内容......

首先,我们需要将内容作为二进制获得,因此需要包含CFHTTP调用

getasbinary="yes"

然后,我们需要解压缩它。

我们可以使用java.util.zip来完成它。 gunzip是这个cflib.org函数的修改版本:

<cfhttp
    getasbinary="yes"
    METHOD="get"
    throwonerror="yes"
    CHARSET="ISO-8859-1"
    URL="http://www.cars.com/for-sale/searchresults.action?sf1Dir=DESC&prMn=1&crSrtFlds=stkTypId-feedSegId-pseudoPrice&rd=100000&zc=44203&PMmt=0-0-0&stkTypId=28881&sf2Dir=ASC&sf1Nm=price&sf2Nm=miles&feedSegId=28705&searchSource=UTILITY&pgId=2102&rpp=10" >

    <cfhttpparam type="Header" name="Accept" value="application/xml,application/xhtml+xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5">
    <cfhttpparam type="Header" name="User-Agent" value="Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_5_8; en-US) AppleWebKit/534.7 (KHTML, like Gecko) Chrome/7.0.517.41">
    <cfhttpparam type="Header" name="Accept-Encoding" value="deflate">
    <cfhttpparam type="Header" name="TE" value="deflate, chunked, identity, trailers">

</cfhttp>

<cfset unzippedHTML = gunzip(cfhttp.FileContent)>

<cfoutput>
    #unzippedHTML#
</cfoutput>

<cfscript>

    function gunzip(inBytes) {
        var gzInStream = createObject('java','java.util.zip.GZIPInputStream');
        var outStream = createObject('java','java.io.ByteArrayOutputStream');
        var inStream = createObject('java','java.io.ByteArrayInputStream');
        var buffer = repeatString(" ",1024).getBytes();
        var length = 0;
        var rv = "";

        try {
            inStream.init(inBytes);
            gzInStream.init(inStream);
            outStream.init();
            do {
                length = gzInStream.read(buffer,0,1024);
                if (length neq -1) outStream.write(buffer,0,length);
            } while (length neq -1);
            rv = outStream.toString();
            outStream.close();
            gzInStream.close();
            inStream.close();
        }
        catch (any e) {
            rv = "";
            try {
                outStream.close();
            } catch (any e) { }
                try {
                    gzInStream.close();
                } catch (any e) {
                    try {
                        inStream.close();
                    } catch (any e) {}
                }
        }
        return rv;
    }
</cfscript>

一定要仔细检查函数的var范围。 我可能错过了一些东西。


根据标题你看到的是文件的gzip内容。 在它对你有用之前,它将需要解压缩。 我认为你可以用cfzip做到这一点,但没有任何经验。

这篇文章似乎表明你可以在你的请求中添加一个头部,在返回之前解压缩它:

<cfhttp ...>
    <cfhttpparam type="Header" name="Accept-Encoding" value="deflate;q=0">
    <cfhttpparam type="Header" name="TE" value="deflate;q=0">
</cfhttp>

我要做的第一件事是通过在其他页面上尝试使用相同的代码,确保它不是源内容/服务器。 如果它们工作正常,那么它很可能是您尝试使用的服务器/内容。 如果他们有同样的问题,那么问题出现在你的代码中。 如果你发布你的代码,这也会很有帮助。

链接地址: http://www.djcxy.com/p/31231.html

上一篇: CFHTTP Encoding Problem

下一篇: CFHTTP and IIS 7 Connection Failture (NOT SSL)