时间:2021-05-18
以前在公司就写过类似的东西,这次是帮以前的上司写了一个简单的采集程序。
很简单的。。汗。没什么技术含量的。
数据来源:http://cn.finance.yahoo.co...
演示地址:http://traffic02.100steps....
(修改了下,增加了数据缓存功能。。汗,没有使用lite_cache了,自己写了个最简单的那种。。)
复制代码 代码如下:
<?
set_time_limit(0);
$max_time=3600;
$cache_file='cache_yahoo.txt';
$nowtime=time();
if(!file_exists($cache_file)){
$filetime=0;
}else{
$filetime=filemtime($cache_file);
}
if($filetime+$max_time<$nowtime){
//更新
ob_start();
functionget_yahoo_info($url){
$content=file_get_contents($url);
$pattern='|<trclass="yfnc_modtitle1"><td><small><b>(.*)</b>\((.*)\)(.*)</small></td><tdalign="right">|U';
preg_match_all($pattern,$content,$out);
$info['company_name']=$out[1][0];
$info['company_stock']=$out[2][0];
$pattern='|<tdclass="yfnc_tablehead1"width="52%">最近交易价:</td><tdclass="yfnc_tabledata1"><big><b>(.*)</b></big></td>|U';
preg_match_all($pattern,$content,$out);
$info['stock_price']=$out[1][0];
$pattern='|<tdclass="yfnc_tablehead1"width="52%">涨跌:</td><tdclass="yfnc_tabledata1">(.*)</td>|U';
preg_match_all($pattern,$content,$out);
$info['stock_upordown']=$out[1][0];
$pattern='|<tdclass="yfnc_tablehead1"width="54%">市值:</td><tdclass="yfnc_tabledata1">(.*)</td>|U';
preg_match_all($pattern,$content,$out);
$info['stock_value']=$out[1][0];
return$info;
}
$urls=explode(',',file_get_contents('url.txt'));
$i=0;
$matchs=array();
foreach($urlsas$url){
$rs=get_yahoo_info($url);
if(!empty($rs)){
$matchs[$i]=$rs;
$i++;
$rs='';
}
}
//print_r(get_yahoo_info('http://cn.finance.yahoo.com/q?s=000063.SZ'));
?>
<tableborder="1"width="100%"cellpadding="6"style="border-collapse:collapse"bordercolor="#8CBFF9"cellspacing="0"bgcolor="#DFEDFD">
<tr>
<tdwidth="30"height=""valign="top"bordercolor="#ABD0FA"bgcolor="#E1EEFD"> </td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#E1EEFD"><divalign="center">公司名称</div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#E1EEFD"><divalign="center">股票代号</div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#E1EEFD"><divalign="center">股票价格</div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#E1EEFD"><divalign="center">股票涨幅</div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#E1EEFD"><divalign="center">市值</div></td>
</tr>
<?
$i=1;
foreach($matchsas$match){
?>
<tr>
<tdheight=""align="center"valign="top"bordercolor="#ABD0FA"bgcolor="#FFFFFF"><?=$i?></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#FFFFFF"><divalign="center"><?=$match['company_name']?></div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#FFFFFF"><divalign="center"><?=$match['company_stock']?></div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#FFFFFF"><divalign="center"><?=$match['stock_price']?></div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#FFFFFF"><divalign="center"><?=$match['stock_upordown']?></div></td>
<tdvalign="top"bordercolor="#ABD0FA"bgcolor="#FFFFFF"><divalign="center"><?=$match['stock_value']?></div></td>
</tr>
<?
$i++;
}?>
</table>
<?
$content=ob_get_clean();
$fp=fopen($cache_file,'w');
if(!$fp)echo'打开文件失败';
if(flock($fp,LOCK_EX)){//进行排它型锁定
if(!fwrite($fp,$content))echo'文件写入失败';
flock($fp,LOCK_UN);//释放锁定
}else{
//echo"Couldn'tlockthefile!";
if(!fwrite($fp,$content))echo'文件写入失败';
}
fclose($fp);
//echo'cachetime:'.time();
echo$content;
}else{
//echo'cache!';
echofile_get_contents($cache_file);
}
?>
声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。
Indeed.com专门为全世界各种信息提供数据采样和支持。在这里它采集了在美国市场上编程语言和技术的一些相关数据,让我们来看一看这些有趣的图表吧: 1.
从Web2.0时代以来,「电子邮件过时」是一个经年的话题。但这位出生于1971年的老家伙,至今还没被改变世界圈颠覆。我们采集了一些关于电子邮件的调查数据,事实告
先发官方文档的地址:官方文档学习使用的书籍是Python网络数据采集(RyanMitchell著),大约是一些笔记的整理。BeautifulSoup的简介简单来
业务需求最近做一个把源数据库的数据批次导出到目标数据库。源数据库是采集程序采集而来的原始数据库,所以需要对其进行一些处理(过滤一些为空,长度太短或太长,非法字符
采集的时候不免有时候会采集到一些空白的数据,这时候为了避免自己网站垃圾的反面形象就需要清除掉这些数据了系统设置==执行SQL语句deletefromphome_