因为需要,需要向一个API接口抓取数据并存储到本地数据库,因为接口更新时间不固定,所以抓取需要每隔3秒请求抓取一次。

针对这种情况,去查找资料,并找出以下几种解决方案。

一:使用linux的定时任务shell脚本,使用shell命令,curl指定接口,来链接数据库并存储到数据库。

二:指定一个路由地址,然后使用网上的一些监控服务平台,例如360等来定时请求自己写好的路由,来定时处理业务

三:写一个shell脚本,定时执行curl自己写好的网址路由,这个比较简单

 

linux定时任务最小是分为单位,所以需要执行自定义脚本才能以秒处理

以下是脚本:step变量值代表每隔这个秒执行一次

    #!/bin/bash
    step=10
     
    for (( i = 0; i < 60; i=(i+step) )); do
        $(curl 'http://104.224.134.48/mobile/common/getGrabbingResult')
        sleep $step
    done
     
    exit 0

 

Logo

更多推荐