解析php利用正则表达式解决采集内容排版的问题

2015-01-24信息快讯网

本篇文章是对php利用正则表达式解决采集内容排版问题进行了详细的分析介绍,需要的朋友参考下

做采集经常遇到的问题是内容排版问题,用了一些时间写了个用正则替换html标签和样式的函数,共享下。
/**
 * 格式化内容
 * @param string $content 内容最好统一用utf-8编码
 * @return string
 * !本函数需要开启tidy扩展
 */
function removeFormat($content) {
 $replaces = array (
   "/<font.*?>/i" => '',
   "/<\/font>/i" => '',
   "/<strong>/i" => '',
   "/<\/strong>/i" => '',
   "/<span.*?>/i" => '',
   "/<\/span>/i" => '',
   "/<div.*?>/i" => "<p>",
   "/<\/div>/i" => "</p>",
   "/<!--<.*?>*-->/i"=>'',
   /* "/<table.*?>/i" => '',//遇到有表格的内容就不要启用
   "/<\/table>/i" => '',
   "/<tbody.*?>/i" => '',
   "/<\/tbody>/i" => '',
   "/<tr.*?>/i" => '<p>',
   "/<\/tr>/i" => '</p>',
   "/<td.*?>/i" => '', */
   "/style=.+?['|\"]/i" => '',
   "/class=.+?['|\"]/i" => '',
   "/id=.+?['|\"]/i"=>'',
   "/lang=.+?['|\"]/i"=>'',
   //"/width=.+?['|\"]/i"=>'',//不好控制注释掉
   //"/height=.+?['|\"]/i"=>'',
   "/border=.+?['|\"]/i"=>'',
   "/face=.+?['|\"]/i"=>'',
   "/<br.*?>[ ]*/i" => "</p><p>",
   "/<iframe.*?>.*<\/iframe>/i" => '',
   "/ /i" => ' ',//空格替换掉
   "/<p.*?>[ |\x{3000}|\r\n]*/ui" => '<p>    ',//替换半角、全角空格,换行符,用 排除写入数据库时产生的编码问题

 );
 $config = array(
         //'indent' => TRUE, //是否缩进  
                'output-html' => TRUE,//是否是输出xhtml  
                'show-body-only'=>TRUE,//是否只获得到body  
               'wrap' => 0
    );
 $content = tidy_repair_string($content, $config, 'utf8');//先利用php自带的tidy类库修复html标签,不然替换的时候容易出现各种诡异的情况
 $content = trim($content);
 foreach ( $replaces as $k => $v ) {
  $content = preg_replace ( $k, $v, $content );
 }

 if(strpos($content,'<p>')>6)//部分内容开头可能缺失<p>标签
  $content = '<p>    '.$content;

 $content = tidy_repair_string($content, $config, 'utf8');//再修复一次,可以去除html空标签
 $content = trim($content);
 return $content;
}

php导入csv文件碰到乱码问题的解决方法
php利用单例模式实现日志处理类库
php中利用explode函数分割字符串到数组
php读取文件内容的三种可行方法示例介绍
php获取网页标题和内容函数(不包含html标签)
基于preg_match_all采集后数据处理的一点心得笔记(编码转换和正则匹配)
curl实现站外采集的方法和技巧
php curl post 时出现的问题解决
PHP中source #N问题的解决方法
PHP 利用Mail_MimeDecode类提取邮件信息示例
php 获取页面中指定内容的实现类
php 根据url自动生成缩略图并处理高并发问题
解决php接收shell返回的结果中文乱码问题
利用中国天气预报接口实现简单天气预报
php利用新浪接口查询ip获取地理位置示例
php生成txt文件标题及内容的方法
php获取文件内容最后一行示例
使用phpQuery采集网页的方法
php使用curl模拟登录后采集页面的例子
php实现的一个很好用HTML解析器类可用于采集数据
IIS+fastcgi下PHP运行超时问题的解决办法详解
解析使用substr截取UTF-8中文字符串出现乱码的问题
数组与类使用PHP的可变变量名需要的注意的问题
基于PHP读取csv文件内容的详解
解析php中session的实现原理以及大网站应用应注意的问题
php unset全局变量运用问题的深入解析
PHP大小写问题:函数名和类名不区分,变量名区分
利用curl 多线程 模拟 并发的详解
利用PHP+JS实现搜索自动提示(实例)
利用php递归实现无限分类 格式化数组的详解
如何利用php array_multisort函数 对数据库结果进行复杂排序
php简单浏览目录内容的实现代码
利用php绘制饼状图的实现代码
PHP多线程批量采集下载美女图片的实现代码(续)
PHP批量采集下载美女图片的实现代码
深入php数据采集的详解
基于curl数据采集之正则处理函数get_matches的使用
基于curl数据采集之单页面并行采集函数get_htmls的使用
file_get_contents获取不到网页内容的解决方法
php excel reader读取excel内容存入数据库实现代码
PHP读取PDF内容配合Xpdf的使用
©2014-2024 dbsqp.com