抓取POS机数据设备

有这样的设备没,通过电话线接在POS机上去抓取POS机甩出的数据。
QQ:278359100

回答: 抓取POS机数据设备

  1. 非SQL内容,帮顶.

IPHONE4手机上如何抓取HTTPS的数据包

  1. Q
    RT

    我尝试过用手机共享电脑的网络上网,关在电脑上抓包,

    但由于是HTTPS的,所以抓取的全是加密的数据,

    有没有办法直接抓取到HTTPS明文的数据包,

    谢谢了!
  2. A
    除非有密钥,不然抓到的包也是加密后的

求助! wireshark抓取分析http数据包 看不懂?

  1. Q
    最近有个任务,就是基于libpcap库写个抓包程序,来获取我在论坛上发帖回帖的内容。本来觉得应该挺简单的,可是在我分析http数据包时感觉有些凌乱了,看不懂呀。


    如下图,我在CSDN论坛上回了篇文章,应该是post的提交方式吧,肯定是下图第一个数据包。并且长度为 930字节。
    求助! wireshark抓取分析http数据包 看不懂?



    双击数据包可以看得到详情。 第一个是物理层的封装的帧头吧 14个字节。
    求助! wireshark抓取分析http数据包 看不懂?


    接下来是IP包头,20个字节。
    求助! wireshark抓取分析http数据包 看不懂?


    接下来是TCP的包头信息吧  20个字节。并且红线划出的部分显示TCP的内容为876个字节。按照我的理解就是http数据包封装在TCP数据包里,那么HTTP协议(包括包头和正文信息)总共应该是 876个字节?
    求助! wireshark抓取分析http数据包 看不懂?


    可是接下来的Reassembled 3 TCP segments(3796bytes) ,这个我非常难以理解啊,TCP分成三段? 第一张图片明明说了总长度为930字节,这怎么又3796字节了呢?
    求助! wireshark抓取分析http数据包 看不懂?


    上图中的3796bytes 又分成了下面两段,hyper transfer protocol 和 line based test data。
    求助! wireshark抓取分析http数据包 看不懂?

    求助! wireshark抓取分析http数据包 看不懂?


    而具体的HTTP协议告诉我的提交的正文内容为 2026个字节 。
    求助! wireshark抓取分析http数据包 看不懂?



    我的疑问就在上面,http协议好复杂啊 !求高手帮我解释解释呀,这到底什么意思呢? 到底哪一部分才是我想要的论坛上的回帖内容呢? 有没有什么好的方法能够快速获取呢? 
     还有post提交内容时的encoding方式为 gzip, 即使我得到了我想要的内容,是不是还有进行gzip解码才能得到我要得结果呀?




  2. A
    之前用smsniff分析过HTTP数据包,encoding也为gzip,后面数据确实需要用用gzip编码才能看到HTML的内容。

如何抓取门户网站数据,比如联系方式?

  1. Q
    数据采集。如何获得门户网站里面的数据,比如联系方式之类的。如何抓取门户网站数据,比如联系方式?
  2. A
    以前采集数据都是自己写程序,网上应该有这样的采集程序,你去找下。

财经数据抓取,想从网页抓取一段数据,请大神看里面的代码

  1. Q
    $url = "http://www.gold678.com/indexs/business_calender.asp?date=2014-11-7"; 
    $contents = file_get_contents($url); 

    $str=preg_replace("/<table width=\"770(.*)\ " id="GridView1">(.*)<\\/table>/iU","$2",$contents);
    echo $str; 

    想得到这个表格里面的数据,但是这样匹配的话页面打开是都是超时的,不成功的,望大神指点
  2. A

    header('content-type:text/html;charset=utf-8');
    $url = "http://www.gold678.com/indexs/business_calender.asp?date=2014-11-7"; 
    $contents = iconv('gbk','utf-8',file_get_contents($url));
    $str = array(); 
    $int1=preg_match("/<table width=\"770\".*?>(.*?)<\/table>/is",$contents,$str);
    echo $str[0];

    仅作参考,没有检测是否有返回等情况

关于抓取网页数据!!!

  1. Q
    昨天我去面试一家公司,那老板说你回去用jsp做一个项目,好了你就可以上班了.....

    要求是可以从指定网页中抓取需要的数据。
    例如:我在baidu上搜索“电视”,那么我要从他返回的页面上抽取他的关键字!(注意:只是抽取客户端显示网页的数据)

    当着为老板提到这个题目时,我就想到了“网络爬虫”。
    我是这样想的:1.做一个jsp页面,向其中输入一条信息,然后由它转发到baidu。
                  2.然后接收、下载返回的页面。
                  3.把返回的html网页当成一个xml文件那样逐条逐条的分析、过滤。
                  4.对过滤好的数据进行整理后,抽取其中我需要的部分,然后再返回到自己的jsp页面进行显示!

    以上就是我的思路,请各位大神们指点指点,还有什么需要注意和改进的。
    对于接收过来的页面,如何进行分析,过滤,我的思绪不是很清新,欢迎大家向我提各种建议,和提醒我那些需要注意的!
  2. A
    不知道,楼主解决了没有,建议你可以去看一下nutch,这是一个从  抓取网页到页面分析,到建索,到查询,都完整实现的搜索引擎,是开源的
    引用 12 楼 luojihaidao 的回复:
    引用 5 楼 java2000_net 的回复:
    1 抓取
    2 正则匹配

    OVER


    那一个效率好呢???

    楼主的思路,其实就 这两步的具体解释,1,抓取,就是楼主说的 :“网络爬虫”。
    我是这样想的:1.做一个jsp页面,向其中输入一条信息,然后由它转发到baidu。
                  2.然后接收、下载返回的页面。
    2,正则匹配就是指楼主提到的:      3.把返回的html网页当成一个xml文件那样逐条逐条的分析、过滤。
                  4.对过滤好的数据进行整理后,抽取其中我需要的部分
    然后再返回到自己的jsp页面进行显示!这一步,其实就是nutch中的查询了
    以上的东西,在nutch中都已经实现了,可以参考下 

现有设备若干,如何才能实现抓取移动设备数据包的功能?

  1. Q
    本人目前有“无线路由”、“USB 无线网卡”、“有线网卡”、“电脑”、“智能手机”。

    想通过这些设备,抓取在智能手机上所有 http 访问的数据包。

    现有以下方案:
    1. 无线路由 wan 口接公网,lan 口接电脑,手机连无线路由 wifi, 并设置 PC 机上的代理,来访问互联网。
       但如果使用 CCProxy 代理,抓取的数据包返回报文会有误,并有部分封包抓不到。
    2. 无线路由 wan 口接公网,lan 口接电脑,电脑无线网卡设热点,手机通过连接 PC 机上的无线网卡来访问互联网。
       但抓包工具只能抓取网卡,这样子对 https 协议的网页交互无能为力。

    哪位前辈能替我想想其他的方案,或一个可行的代理软件,分全部奉上,十分感谢。现有设备若干,如何才能实现抓取移动设备数据包的功能?
  2. A
    既然如此,换设备吧。routeros软路由可实现

如何抓取USB电话上的按键数据?

  1. Q
    最近做的项目中,根据eXosip协议用VC开发了一套SIP软电话,目前已可以实现正常的电话呼叫。
    现在有个设备,是个USB PHONE(中兴 ZXV10 P801K,也叫IP电话、VoIP电话),通过USB口插在电脑上,话机上有0-9、*、#、拨号、挂断等实体按键。我想在按下USB电话上按键时获取到相应的按键信息,比如:按下了话机的"1",抓到这个信息之后,我可以在软电话上拨上“1”这个号,同理也可以通过话机硬件的拨号键控制软电话的拨出。
    用成熟的SIP软电话软件X-lite试了下,USBPhone的按键是可以被X-lite软件抓到的,也就是说,可能涉及到的协议是某种规范的协议而非厂家自定义的。
    请问,抓取USB-phone设备的数据是通过什么协议实现的?有没有成熟的参考例子?
    先谢谢各位了~
  2. A
    要看设备sdk文档是否提供接口

工厂端实时数据传入bd2数据库,抓取数据!(AOI与SPC结合)

  1. Q
    如题,
    1.现要将工厂端AOI设备捕获的实时数据,实时上传至公司的DB2数据库!
    2.通过数据库编程,抓取所需要的数据,并能通过SPC抓取所需要的数据,并能以表格的形式实时监控!

    注:本人之前没有做过数据库编程!还请指点下方向,给点思路,比如:数据库编程工具之类的!
  2. A
    分两步
    1、捕获数据,存入db2数据库
    2、开发前端展现工具,把数据库里的数据展现

httpclient 请求过快,导致数据抓取不全

  1. Q
    最近自己在写一爬虫,用到了httpclient4.2.X ,如果开启过多的线程去抓取数据,有时候会出现返回数据不完全的情况。请问大家有没有什么好的解决方案?
  2. A
    请求超时
    httpclient.getParams().setParameter(CoreConnectionPNames.CONNECTION_TIMEOUT, 60000);
    读取超时
    httpclient.getParams().setParameter(CoreConnectionPNames.SO_TIMEOUT, 60000);

    根据你的情况,应该只需要设置读取超时就行了,另外,java端访问页面,部分子页面的站点可能本身延时就比较长,还有ajax的访问是不会被执行的,所以ajax动态生成的页面元素就不会有了