亚洲精品国产国语,在线亚洲精品自拍,亚洲福利视频一区

Apache Common BeanUtils

Fri, 18 Sep 2009 16:16:00 GMT

目前 Commons ��?/strong>
     目前已经开发有 release 出来的版本有 BeanUtils, Betwixt, CLI, Collections, DBCP, Digester, Discovery, EL, FileUpload, HttpClient, Jelly, Jexl, JXPath, Lang, Latka, Logging, Modeler, Net, Pool, Validator �{�等

     每个版本都不太一�? 随时都有更新的可�? 至于�q�没�?release 出来正式的版�? 有一些项�? 可能也正�?使用�?!! 也是有可能因为其他项目做出来的一些元�? 可以抽出来共用的, 例如目前 struts 用的 Resources ( Resource bundle component ) , 也被列入 SandBox 研发�? 准备 release 更符合所有项目的 �l��g.

     jakarta ��Z��要有 commons �q�个 project 出现, ��是希望大家不用重复开发一��L(f��ng)��l��g, 辑ֈ� reusable �?目的 !! 而且他们都有�Ҏ(gu��)��使用的特�? 也是各个 jakarta committer 牛�h们的�_�֍��C��, 因此, �l�对不能�?�q�这一�?open source project !! 各位亲爱�?java 同胞(y��u)�?.................

BeanUtils 介绍
     当我在选择要先介绍哪一个组�? 实在犹��U�?ji��n)很�? 因�ؓ(f��)每一个实在都是精�? 久久无法做出军_��, 所以呢, 只好按照是否 release 再按照字母的先后, 做一个排�? 希望大家明白 ....

所�?BeanUtils ��Z��要开发呢, 每个工程师或许在�?JavaBean 的时�? 都会(x��)乖乖地去�?getters �?setters, ��是 getXXX() �?setXXX() methods, 但是当你�?object 是动态��生的, 也许是用文�g, 也许�?其他原因, 那你该如何去存取数据�?!!

     几个例子你可能会(x��)用到 BeanUtils, 当然, �q�是已经存在的项目了(ji��n)

BSF : Script Language �?Java Object Model 之间
Velocity/JSP : 使用 template 建立�怼�的网��?
jakarta taglibs/ Struts / Cocoon : 建立自己�Ҏ(gu��)��?Tag Libraries for JSP �?XSP
ant build.xml / tomcat server.xml : XML-based 的配�|�文�?( configuration resources )

     你大可以使用 java api 中的 java.lang.reflect �?java.beans 来达到这些数据交�?~~ 不过�? 隑ֺ�有点 �?=.="" ,但是, BeanUtils ��会(x��)减低你开发的旉�� !!

     目前最新的版本�?1.6.1 (2003/2/18 released), 下蝲位置�?Binary & Source

BeanUtils API 介绍
     BeanUtils �?Java API 主要�?package ��d��四项

org.apache.commons.beanutils
org.apache.commons.beanutils.converters
org.apache.commons.beanutils.locale
org.apache.commons.beanutils.locale.converters

     其实除了(ji��n)�W�一��之�? 其他的都是后来的版本才加上去�? converters ��是专门处理不同传入�?object 该如何�{�? locale �? ��是��Z��(ji��n)国际化的处理, 所以重�Ҏ(gu��)��都会(x��)摆在�W�一��?!

     而其中最常用到的 class �?PropertyUtils �?ConvertUtils �q�有 DynaBeans( 有用 struts dynaform 的应该不陌生 )

BeanUtils.PropertyUtils 介绍
     基本�? 我假讑֤�家对 JavaBean 的开发都没有问题, ��是�?getters �?setters 都了(ji��n)解是什�? 先假�? Employee class     public class Employee {         public Address getAddress(String type);         public void setAddress(String type, Address address);         public Employee getSubordinate(int index);         public void setSubordinate(int index, Employee subordinate);         public String getFirstName();         public void setFirstName(String firstName);         public String getLastName();         public void setLastName(String lastName);     }
     �?PropertyUtils 中会(x��)区分��Z��U?method 状�?br />

Simple - 如果你是用到 primitive 语法, �?int, String 或其他自行开发的 objects �{�等, 只需要单一的对象就可以取得数据

PropertyUtils.getSimpleProperty(Object bean, String name)
PropertyUtils.setSimpleProperty(Object bean, String name, Object value)
Employee employee = ...; String firstName = (String)PropertyUtils.getSimpleProperty(employee, "firstName"); String lastName = (String)PropertyUtils.getSimpleProperty(employee, "lastName"); ............. PropertyUtils.setSimpleProperty(employee, "firstName", firstName); PropertyUtils.setSimpleProperty(employee, "lastName", lastName);
Indexed - 如果你是用到 Collection �?List 实作出来�?objects , 只需要��用一�?index 数值就可以取得对象的状�?br />
PropertyUtils.getIndexedProperty(Object bean, String name)
PropertyUtils.getIndexedProperty(Object bean, String name, int index)
PropertyUtils.setIndexedProperty(Object bean, String name, Object value)
PropertyUtils.setIndexedProperty(Object bean, String name, int index, Object value) Employee employee = ...; int index = ...; String name = "subordinate[" + index + "]"; Employee subordinate = (Employee)PropertyUtils.getIndexedProperty(employee, name); Employee employee = ...; int index = ...; Employee subordinate = (Employee)PropertyUtils.getIndexedProperty(employee, "subordinate", index);
Mapped - 如果你是用到 Map 延��Z��?objects , 只需要��用一�?key 值就可以�?得数�?br />
PropertyUtils.getMappedProperty(Object bean, String name)
PropertyUtils.getMappedProperty(Object bean, String name, String key)
PropertyUtils.setMappedProperty(Object bean, String name, Object value)
PropertyUtils.setMappedProperty(Object bean, String name, String key, Object value) Employee employee = ...; Address address = ...; PropertyUtils.setMappedProperty(employee, "address(home)", address); Employee employee = ...; Address address = ...; PropertyUtils.setMappedProperty(employee, "address", "home", address);

     但是如果你是巢状(nested)的数据结�? 你该如何取得你要的数据呢

          PropertyUtils.getNestedProperty(Object bean, String name)
          PropertyUtils.setNestedProperty(Object bean, String name, Object value)

     你只需要简单地使用 ".", ��可以得��C��要的数据�?
     String city = (String)PropertyUtils.getNestedProperty(employee, "address(home).city");
     千万要记�? BeanUtils 是要让你随心(j��)所�Ʋ��? 所以呢 index , mapped 当然都可以这样��?nbsp;     Employee employee = ...;      String city = (String) PropertyUtils.getProperty(employee, "subordinate[3].address(home).city");
BeanUtils.DynaBean and BeanUtils.DynaClass 介绍
     所有的 Dynamic JavaBean 都是实现 DynaBean �?DynaClass �q�两�?interface, 也可能会(x��)用到 DynaProperty class 来存�?properties . 我们��Z��要用�?Dynamic JavaBean �? 例如, 你从数据库取出来的数�? 有时候可能是三个栏位, 有时候是四个栏位, 如果我们对于每个 Bean 都要��d��一�?class, ��׃��(x��)�?�? 所以对于每一�U?javabean 我们��p��定他的属性有哪些, 接着��可以��?PropertyUtils 来将他的数值取 �? 如此, 可以减少很多开发工�? �?Struts 的课�E�中, 很多人问到我, 请问每一�?ActionForm 都必��d�� ?java 文�g�? 当然, 不需要的, 否则一个网��一�?ActionForm ( 假设都不一�?), 那么, �q�么��费旉�� 的工�? ��Z��q�要使用 Struts 来作�?Framework �? 所以我们都是��?org.apache.struts.action.DynaActionForm!!

MutableDynaClass ( since $1.5 ) �q�是蛮新的一�?DynaClass, 是�ؓ(f��)�?ji��n)动态可以调�?properties !

BasicDynaBean and BasicDynaClass - 基本�?Dynamic �c�d��

BasicDynaClass(java.lang.String name, java.lang.Class dynaBeanClass, DynaProperty[] properties)
BasicDynaBean(DynaClass dynaClass) DynaProperty[] props = new DynaProperty[]{     new DynaProperty("address", java.util.Map.class),     new DynaProperty("subordinate", mypackage.Employee[].class),     new DynaProperty("firstName", String.class),     new DynaProperty("lastName",  String.class) }; BasicDynaClass dynaClass = new BasicDynaClass("employee", null, props); DynaBean employee = dynaClass.newInstance(); employee.set("address", new HashMap()); employee.set("subordinate", new mypackage.Employee[0]); employee.set("firstName", "Fred"); employee.set("lastName", "Flintstone");
ResultSetDynaClass (Wraps ResultSet in DynaBeans) - 使用 ResultSet �?Dynamic JavaBean

ResultSetDynaClass(java.sql.ResultSet resultSet)
ResultSetDynaClass(java.sql.ResultSet resultSet, boolean lowerCase)

如果 lowerCase 设�ؓ(f��) false , �q�回的数据栏位名��根�?JDBC �q�回的�ؓ(f��)�? default �?true. Connection conn = ...; Statement stmt = conn.createStatement(); ResultSet rs = stmt.executeQuery("select account_id, name from customers"); Iterator rows = (new ResultSetDynaClass(rs)).iterator(); while (rows.hasNext()) {     DynaBean row = (DynaBean) rows.next();     System.out.println("Account number is " + row.get("account_id") + " and name is " + row.get("name")); } rs.close(); stmt.close();
RowSetDynaClass (Disconnected ResultSet as DynaBeans) - 使用 RowSet �?Dynamic JavaBean

RowSetDynaClass(java.sql.ResultSet resultSet)
RowSetDynaClass(java.sql.ResultSet resultSet, boolean lowerCase)

如果 lowerCase 设�ؓ(f��) false , �q�回的数据栏位名��根�?JDBC �q�回的�ؓ(f��)�? default �?true. Connection conn = ...;  // Acquire connection from pool Statement stmt = conn.createStatement(); ResultSet rs = stmt.executeQuery("SELECT ..."); RowSetDynaClass rsdc = new RowSetDynaClass(rs); rs.close(); stmt.close(); ...;                    // Return connection to pool List rows = rsdc.getRows(); ...;                   // Process the rows as desired
WrapDynaBean and WrapDynaClass - 包装过�?Dynamic JavaBean

如果你对�?DynaBean 的功能强�? 非常佩服的同�? 手边�?JavaBean 又不能随随便便就不用 �?你就把他包装��h�� ....

WrapDynaClass(java.lang.Class beanClass)
WrapDynaBean(java.lang.Object instance)
ConvertingWrapDynaBean(java.lang.Object instance)

MyBean bean = ...; DynaBean wrapper = new WrapDynaBean(bean); String firstName = wrapper.get("firstName");

BeanUtils.ConvertUtils 介绍
          在很多情�? 例如 struts framework �? ��常常用�?request.getParameter 的参�? 需要�{换成正确的数据类�? 所�?ConvertUtils ��是来处理这些动�?

          ConvertUtils().convert(java.lang.Object value)
          ConvertUtils().convert(java.lang.String[] values, java.lang.Class clazz)
          ConvertUtils().convert(java.lang.String value, java.lang.Class clazz)
     HttpServletRequest request = ...;      MyBean bean = ...;      HashMap map = new HashMap();      Enumeration names = request.getParameterNames();      while (names.hasMoreElements()) {           String name = (String) names.nextElement();           map.put(name, request.getParameterValues(name));      }      BeanUtils.populate(bean, map);// it will use ConvertUtils for convertings
     目前支持的类型有

sjava.lang.BigDecimal
java.lang.BigInteger
boolean and java.lang.Boolean
byte and java.lang.Byte
char and java.lang.Character
java.lang.Class
double and java.lang.Double
float and java.lang.Float
int and java.lang.Integer
long and java.lang.Long
short and java.lang.Short
java.lang.String
java.sql.Date
java.sql.Time
java.sql.Timestamp

     也可以徏立自��q�� converter
   Converter myConverter = new org.apache.commons.beanutils.converter.IntegerConverter();    ConvertUtils.register(myConverter, Integer.TYPE);    // Native type    ConvertUtils.register(myConverter, Integer.class);   // Wrapper class

张��^�?/a> 2009-09-19 00:16 发表评论

�?r��n)态化��面

Fri, 18 Sep 2009 16:06:00 GMT

package com.zph.util;
import java.io.ByteArrayOutputStream;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.OutputStreamWriter;
import java.io.PrintWriter;
import java.nio.charset.Charset;
import javax.servlet.RequestDispatcher;
import javax.servlet.ServletContext;
import javax.servlet.ServletException;
import javax.servlet.ServletOutputStream;
import javax.servlet.http.HttpServlet;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse;
import javax.servlet.http.HttpServletResponseWrapper;

/**
* @author shaevel
* 该方法只能静(r��n)态化本应用的动态页�?br /> *
*/
public class TestToHtml extends HttpServlet {
private static final long serialVersionUID = -8637885029101603118L;
public void doGet(HttpServletRequest request, HttpServletResponse response)
   throws IOException, ServletException {

  Charset cs = Charset.forName("UTF-8"); //讄��生成文�g的字�W�集

  String url = "";
  String name = "";
  ServletContext sc = getServletContext();
  String file_name = request.getParameter("file_name");// 你要讉K��的jsp文�g,如index.jsp
  // 则你讉K��q�个servlet时加参数.�?a href="http://localhost/toHtml?file_name=index">http://localhost/toHtml?file_name=index
  url = "/" + file_name + ".jsp?id=zhang&m=13425109339";// �q�是你要生成wml的jsp文�g
  name = "E://1.wml";// �q�是生成的wml文�g??,如index.wml.
  RequestDispatcher rd = sc.getRequestDispatcher(url);
  final ByteArrayOutputStream os = new ByteArrayOutputStream();
  final ServletOutputStream stream = new ServletOutputStream() {
   public void write(byte[] data, int offset, int length) {
    os.write(data, offset, length);
   }
   public void write(int b) throws IOException {
    os.write(b);
   }
  };
  final PrintWriter pw = new PrintWriter(new OutputStreamWriter(os,cs));
  HttpServletResponse rep = new HttpServletResponseWrapper(response) {
   public ServletOutputStream getOutputStream() {
    return stream;
   }
   public PrintWriter getWriter() {
    return pw;
   }
  };
  rd.include(request, rep);
  pw.flush();
  FileOutputStream fos = new FileOutputStream(name); // 把jsp输出的内容写到xxx.wml
  os.writeTo(fos);
  fos.close();
  PrintWriter out = response.getWriter();
  out.print("
successfully??
");
}
public void doPost(HttpServletRequest request, HttpServletResponse response)
   throws IOException, ServletException {
  doGet(request, response);
}
}

张��^�?/a> 2009-09-19 00:06 发表评论

Map Cache

Fri, 18 Sep 2009 16:04:00 GMT

package com.zph.util;
import java.util.HashMap;
import java.util.Map;
/**
* @author shaevel
*
*/
public class MapUtil {

public static Map Map_Info = new HashMap();

public static void addObject(String id, Object o){
  Map_Info.put(id, o);
  System.out.println("============== size: " + Map_Info.size() + " ================");
}

public static void moveObject(String id){
  if(Map_Info.get(id) != null){
   Map_Info.remove(id);
  }
}

public static Object getObject(String id){
  if(Map_Info.get(id) != null){
   return Map_Info.get(id);
  }else{
   return "";
  }
}
}

张��^�?/a> 2009-09-19 00:04 发表评论

��d��Excel文�g

Fri, 18 Sep 2009 16:02:00 GMT

package com.zph.util;

import java.io.FileInputStream;
import java.io.FileOutputStream;
import org.apache.poi.hssf.usermodel.HSSFCell;
import org.apache.poi.hssf.usermodel.HSSFRow;
import org.apache.poi.hssf.usermodel.HSSFSheet;
import org.apache.poi.hssf.usermodel.HSSFWorkbook;

/**
* @author shaevel
*
*/
public class ReadExcel {

//public static String outputFile="D:\\JTest\\gongye.xls";

/**
* @param args
*/
public static void main(String[] args) {

  String outputFile="D:\\gongye.xls";
  createXLS(outputFile);
  //String inputFile = "D:\\shuaka.xls";
  //readXLS(inputFile);
}

public static void createXLS(String outputFile){

  try{

   // 创徏新的Excel 工作��?br />    HSSFWorkbook workbook = new HSSFWorkbook();

   // 在Excel工作��中��Z��工作表，其名为缺省�?br />    // 如要新徏一名�ؓ(f��)"效益指标"的工作表�Q�其语句为：(x��)
   // HSSFSheet sheet = workbook.createSheet("效益指标");
   HSSFSheet sheet = workbook.createSheet();

   // 在烦(ch��)�?的位�|�创��Q�最��端的行�Q?br />    HSSFRow row = sheet.createRow((short)0);

   //在烦(ch��)�?的位�|�创建单元格�Q�左上端�Q?br />    HSSFCell cell = row.createCell((short) 0);

   // 定义单元��gؓ(f��)字符串类�?br />    cell.setCellType(HSSFCell.CELL_TYPE_STRING);
   cell.setEncoding(HSSFCell.ENCODING_UTF_16);

   // 在单元格中输入一些内�?br />    cell.setCellValue("我们的故�?);

   // 新徏一输出文�g��?br />    FileOutputStream fOut = new FileOutputStream(outputFile);

   // 把相应的Excel 工作��存�?br />    workbook.write(fOut);
   fOut.flush();

   // 操作�l�束�Q�关闭文�?br />    fOut.close();

   System.out.println("文�g生成...");
  }catch(Exception e) {
   System.out.println("已运�?xlCreate() : " + e );
  }
}

public static void readXLS(String inputFile){

  try{

   // 创徏对Excel工作��文件的引用
   HSSFWorkbook workbook = new HSSFWorkbook(new FileInputStream(inputFile));

   // 创徏对工作表的引用�?br />    // 本例是按名引用（让我们假定那张表有着�~�省�?Sheet1"�Q?br />    HSSFSheet sheet = workbook.getSheet("Sheet1");

   // 也可用getSheetAt(int index)按烦(ch��)引引用，
   // 在Excel文档中，�W�一张工作表的缺省烦(ch��)引是0�Q?br />    // 其语句�ؓ(f��)�Q�HSSFSheet sheet = workbook.getSheetAt(0);
   // ��d��左上端单�?br />    for(int i = 0; i < 8; i++){
    for(int j =0; j < 6; j++){
     HSSFRow row = sheet.getRow(i);
     HSSFCell cell = row.getCell((short)j);

     // 输出单元内容�Q�cell.getStringCellValue()��是取所在单元的�?br />      if(cell.getCellType() == 0){
      System.out.print(cell.getNumericCellValue() + " ");
     }
     if(cell.getCellType() == 1){
      System.out.print(cell.getStringCellValue() + " ");
     }
    }
   System.out.print("\n");
   }
  }catch(Exception e) {
   System.out.println("已运行xlRead() : " + e );
  }
}
}

张��^�?/a> 2009-09-19 00:02 发表评论

Hibernate与JdbcTemplate�׃�n事务��理

Fri, 18 Sep 2009 15:51:00 GMT

     在Spring和Hibernate的配�|�文件中�Q�我们可以对�c�M��的方法进行事务控�Ӟ��也就是说某个�Ҏ(gu��)��中含有多个数据库的写操作�Q�我们可以通过创徏一个Spring中的HibernateTransactionManager实例�Q�把相应的sessionFactory注入到其的sessionFactory属性中�Q�由事务声明的方式进行事务控制。样例如下：(x��)





     但是�q�种方式有个局限性，如果该方法中既有调用Hibernate�q�行存储�Q�也有通过JdbcTemplate�q�行数据库的写操作，如果在方法执行过�E�中�Q�写数据发生异常�Ӟ��只有�U�_��?ji��n)事务管理的通过Hibernate�q�行存储的数据才�?x��)回滚，而通过JdbcTemplate方式�q�行操作的数据不�?x��)进行回滚�?/p>
     原因是Hibernate与JdbcTemplate使用的是不同DBConnection�Q�而且JdbcTemplate未申明相应的事务��理�Q�所以要惛_��既��用了(ji��n)Hibernate�Q�也使用�?ji��n)JdbcTemplate�q�行数据库存储操作的�Ҏ(gu��)��q�行事务��理�Q�需要在Spring的配�|�文件做适当的修改，样例如下�Q?nbsp;






     JdbcTemplate和Hibernate能被wrap到同一个事务里。成立需要几�Ҏ(gu��)��Ӟ��(x��)
     1、��用同一个datasource�Q?br />      2、事务交由HibernateTransactionManager��理�Q?br />      3、相关dao以及(qi��ng)service需要��用runtime exception体系�Q��用spring提供的exception可以�Q�自己封装设计的runtime exception体系也行�?

张��^�?/a> 2009-09-18 23:51 发表评论

JAVA生成文�g

Fri, 18 Sep 2009 15:42:00 GMT

package com.zph.test;

import java.io.File;
import java.io.FileOutputStream;
import java.io.OutputStreamWriter;

/**
* @author pinghui.zhang
*
*/
public class StringToFile {

    /**
    * 把字�W�串写入文本�?br />     * @param fileName 生成的文件绝对�\�?br />     * @param content 文�g要保存的内容
    * @param enc  文�g�~�码
    * @return
    */
    public static boolean writeStringToFile(String fileName,String content,String enc) {
        File file = new File(fileName);

        try {
            if(file.isFile()){
                file.deleteOnExit();
                file = new File(file.getAbsolutePath());
            }
            OutputStreamWriter os = null;
            if(enc==null||enc.length()==0){
                os = new OutputStreamWriter(new FileOutputStream(file));
            }else{
                os = new OutputStreamWriter(new FileOutputStream(file),enc);
            }
            os.write(content);
            os.close();
        } catch (Exception e) {
            e.printStackTrace();
            return false;
        }
        return true;
    }

    public static void main(String args[]){
        int[] ids = {995, 996, 997};
        StringBuffer presb = new StringBuffer();
        StringBuffer sufsb = new StringBuffer();
        presb.append("<%@ page language=\"java\" import=\"java.util.*\" pageEncoding=\"UTF-8\"%>\n")
                .append("<%@ taglib uri=\"\n")
                .append("<%\n")
                .append("\tString deptid = \"");

        sufsb.append("\"; //只要修改此处卛_��\n")
                .append("\trequest.setAttribute(\"dept\", com.dadi.oa.system.DepartmentUtil.getDepartmentInfo(new Long(deptid)));\n")
                .append("\tString fromurl = request.getRequestURI().substring(request.getRequestURI().lastIndexOf(\"/\") + 1);\n")
                .append("%>\n")
                .append("<%@ include file=\"body.jsp\"%>");

        String content = "";
        String fileName = "";

        for(int i = 0; i < ids.length; i++){
            fileName = "D:\\project1\\OA\\Code\\jsp\\anth\\" + ids[i] + ".jsp";
            content = presb.toString() + ids[i] + sufsb.toString();
            writeStringToFile(fileName, content, "UTF-8");
        }
    }

}

张��^�?/a> 2009-09-18 23:42 发表评论

Fri, 18 Sep 2009 15:39:00 GMT

�?�?/font> (qiuyin04@software.nju.edu.cn)南京大学

2007 �q?11 �?27 �?/p>
为应用程序添加搜索能力经常是一个常见的需求。本文介�l�了(ji��n)一个框�Ӟ��开发者可以��用它以最��的付出实现搜烦(ch��)引擎功能�Q�理��x(ch��ng)��况下只需要一个配�|�文件。该框架��Z��若干开源的库和工具�Q�如 Apache Lucene�Q�Spring 框架�Q�cpdetector �{�。它支持多种资源。其中两个典型的例子是数据库资源和文件系�l�资源。Indexer 寚w��|�的资源�q�行索引�q�传输到中央服务器，之后�q�些索引可以通过 API �q�行搜烦(ch��)。Spring 风格的配�|�文件允许清晰灵�zȝ��自定义和调整。核�?API 也提供了(ji��n)可扩展的接口�?

引言

       为应用程序添加搜索能力经常是一个常见的需求。尽��已�l�有若干�E�序库提供了(ji��n)�Ҏ(gu��)��索基��设施的支持，然而对于很多�h而言�Q��用它们从头开始徏立一个搜索引擎将是一个付��Z��而且可能乏味的过�E�。另一斚w��Q�很多的��型应用对于搜烦(ch��)功能的需求和应用场景��h��很大的相似性。本文试图以对多数小型应用的适用性�ؓ(f��)出发点，�?Java 语言构徏一个灵�zȝ��搜烦(ch��)引擎框架。��用这个框�Ӟ��多数情�Ş下可以以最��的付出建立起一个搜索引擎。最理想的情况下�Q�甚臛_��需要一个配�|�文件。特�D�的情�Ş下，可以通过灉|��地对框架�q�行扩展满��需求。当�?d��ng)��如题所�q�ͼ��q�都是借助开源工��L(f��ng)��力量�?

基础知识

        Apache Lucene 是开发搜索类应用�E�序时最常用�?Java �c�d��Q�我们的框架也将��Z��它。�ؓ(f��)�?ji��n)下文更好的描述�Q�我们需要先�?ji��n)解一些有�?Lucene 和搜索的基础知识。注意，本文不关注烦(ch��)引的文�g格式、分词技术等话题�?

什么是搜烦(ch��)和烦(ch��)�?/font>

        从用��L(f��ng)��角度来看�Q�搜索的�q�程是通过关键字在某种资源中寻扄��定的内容的过�E�。而从计算机的角度来看�Q�实现这个过�E�可以有两种办法。一是对所有资源逐个与关键字匚w��Q�返回所有满��_��配的内容�Q�二是如同字�怸�样事先徏立一个对应表�Q�把关键字与资源的内容对应�v来，搜烦(ch��)时直接查找这个表卛_��。显而易见，�W�二个办法效率要高得多。徏立这个对应表事实上就是徏立逆向索引�Q�inverted index�Q�的�q�程�?

Lucene 基本概念

        Lucene �?Doug Cutting �?Java 开发的用于全文搜烦(ch��)的工具库。在�q�里�Q�我假设读者对其已有基本的�?ji��n)解�Q�我们只对一些重要的概念��要介�l�。要深入�?ji��n)解可以参�?参考资�?/font> 中列出的相关文章和图书。下面这些是 Lucene 里比较重要的�c�R�?

DE>DocumentDE>�Q�烦(ch��)引包含多�?DE>DocumentDE>。而每�?DE>DocumentDE> 则包含多�?DE>FieldDE> 对象�?coDE>DocumentDE> 可以是从数据库表里取出的一堆数据，可以是一个文�Ӟ��也可以是一个网��늭�。注意，它不�{�同于文件系�l�中的文件�?
DE>FieldDE>�Q�一�?DE>FieldDE> 有一个名�U�ͼ�它对�?DE>DocumentDE>的一部分数据�Q�表�C�文档的内容或者文档的元数据（与下文中提到的资源元数据不是一个概念）(j��)。一�?DE>FieldDE> 对象有两个重要属性：(x��)Store ( 可以�?YES, NO, COMPACT 三种取�?) �?Index ( 可以�?TOKENIZED, UN_TOKENIZED, NO, NO_NORMS 四种取�?)
DE>QueryDE>�Q�抽象了(ji��n)搜烦(ch��)时��用的语句�?
DE>IndexSearcherDE>�Q�提�?DE>QueryDE> 对象�l�它�Q�它利用已有的烦(ch��)引进行搜索�ƈ�q�回搜烦(ch��)�l�果�?
DE>HitsDE>�Q�一个容器，包含�?ji��n)指�?em>一部分搜烦(ch��)�l�果的指针�?

        使用 Lucene 来进行编制烦(ch��)引的�q�程大致为：(x��)��输入的数据源统一为字�W�串或者文本流的�Ş式，然后从数据源提取数据�Q�创建合适的 DE>FieldDE> ��d��到对应数据源�?DE>DocumentDE> 对象之中�?

�pȝ��概览

        要徏立一个通用的框�Ӟ��必须对不同情�늚�共性进行抽象。反映到设计需要注意两炏V��一是要提供扩展接口�Q�二是要��量降低模块之间的耦合�E�度。我们的框架很简单地分�ؓ(f��)两个模块�Q�烦(ch��)引模块和搜烦(ch��)模块。烦(ch��)引模块在不同的机器上各自�q�行对资源的索引�Q��ƈ把烦(ch��)引文�Ӟ��事实上，下面我们�?x��)说刎ͼ��q�有元数据）(j��)�l�一传输到同一个地方（可以是在�q�程服务器上�Q�也可以是在本地�Q�。搜索模块则利用�q�些从多个烦(ch��)引模块收集到的数据完成用��L(f��ng)��搜烦(ch��)��h��?/p>
        �?1 展现�?ji��n)整体的框架。可以看刎ͼ�两个模块之间相对是独立的�Q�它们之间的兌��不是通过代码�Q�而是通过索引和元数据。在下文中，我们��会(x��)详细介绍如何��Z��开源工兯��计和实现�q�两个模块�?/p>

�?1. �pȝ��架构�?/strong>

建立索引

        可以�q�行索引的对象有很多�Q�如文�g、网��c(di��n)��RSS Feed �{�。在我们的框架中�Q�我们定义可以进行烦(ch��)引的一�c?/strong>对象�?em>资源。从实现�l�节上来��_(d��)��从一个资源中可以提取出多�?DE>DocumentDE> 对象。文件系�l�资源和数据库结果集资源都是资源的代表性例子�?/p>
        前面提到�Q�从资源中收集到的烦(ch��)引被�l�一传送到同一个地方，以被搜烦(ch��)模块所用。显焉��?ji��n)�?ch��)引之外，搜烦(ch��)模块需要对资源有更多的�?ji��n)解�Q�如资源的名�U�、搜索该资源后搜索结果的呈现格式�{�。这些额外的附加信息�U�Cؓ(f��)资源�?em>元数�?/em>。元数据和烦(ch��)引数据一同被攉��h��Q�放�|�到某个特定的位�|��?/p>
        ��要地介绍�q�资源的概念之后�Q�我们首先�ؓ(f��)其定义一�?DE>ResourceDE> 接口。这个接口的声明如下�?/p>

    清单 1. Resource 接口

public interface Resource { // RequestProcessor 对象被动��C��资源中提�?Document�Q��ƈ�q�回提取的数�? public int extractDocuments(ResourceProcessor processor); // ��d��?DocumentListener ��在每一�?Document 对象被提取出时被调用 public void addDocumentListener(DocumentListener l); // �q�回资源的元数据 public ResourceMetaData getMetaData(); }

        其中元数据包含的字段见下表。在下文中，我们�q��(sh��)��(x��)对元数据的用途做更多的介�l��?/p>

        �?1. 资源元数据包含的字段

属�?/th> �c�d�� 含义

resourceName String 资源�?strong>唯一名称

resourceDescription String 资源的介�l�性文�?/td>

hitTextPattern String 当文档被搜烦(ch��)到时�Q�这�?pattern 规定�?ji��n)结果显�C�的格式

searchableFields String[] 可以被搜索的字段名称

        �?DE>DocumentListenerDE> 的代码如下�?/p>

    清单 2. DocumentListener 接口

public interface DocumentListener extends EventListener { public void documentExtracted(Document doc); }

        ��Z��(ji��n)让烦(ch��)引模块能够知道所有需要被索引的资源，我们在这里��?Spring 风格�?XML 文�g配置索引模块中的所有组�Ӟ��其是所有资源。�?zh��n)�可以�?下蝲部分查看一个示例配�|�文件�?/p>

��Z��么选择使用 Spring 风格的配�|�文�Ӟ��

�q�主要有两个好处�Q?

仅依赖于 Spring Core �?Spring Beans 便免��M��(ji��n)定义配置机制和解析配�|�文件的负担�Q?
Spring �?IoC 机制降低�?ji��n)框架的耦合性，�q��扩展框架变得��单；

        ��Z��以上内容�Q�我们可以大致描�q�出索引模块工作的过�E�：(x��)

首先�?XML 配置�?bean 中找出所�?DE>ResourceDE> 对象�Q?
�Ҏ(gu��)��一个调用其 DE>extractDocuments()DE> �Ҏ(gu��)��Q�这一步除�?ji��n)完成对资源的�?ch��)引外�Q�还?sh��)��(x��)在每次提取��Z��?DE>DocumentDE> 对象之后�Q�通知注册在该资源上的所�?DE>DocumentListenerDE>�Q?
接着处理资源的元数据�Q?coDE>getMetaData()DE> 的返回��|��(j��)�Q?
��缓存里的数据写入到本地��盘或者传送给�q�程服务器；

        在这个过�E�中�Q�有两个地方值得注意�?/p>
        �W�一�Q�对资源可以注册 DE>DocumentListenerDE> 使得我们可以在运行时��d��索引�q�程有更为动态的控制。�D一个简单例子，�Ҏ(gu��)��个文章发布站点的文章�q�行索引�Ӟ��一个很正常的要求便是发布时间更靠近当前旉��的文章需要在搜烦(ch��)�l�果中排在靠前的位置。每��文章显然对应一�?DE>DocumentDE> 对象�Q�在 Lucene 中我们可以通过讄�� DE>DocumentDE> �?DE>boostDE> 值来对其�q�行加权。假讑օ�中文章发布时间的 DE>FieldDE> 的名�U�Cؓ(f��) DE>PUB_TIMEDE>�Q�那么我们可以�ؓ(f��)资源注册一�?DE>DocumentListenerDE>�Q�当它被通知�Ӟ��则检��?DE>PUB_TIMEDE> 的��|��Ҏ(gu��)��距离当前旉��的远�q�进行加权�?/p>
        �W�二点很昄��Q�在�q�个�q�程中，DE>extractDocuments()DE> �Ҏ(gu��)��的实��C��不同�c�d��的资源而各异。下面我们主要讨��Z��U�类型的资源�Q�文件系�l�资源和数据库结果集资源。这两个�c�都实现�?ji��n)上面�?DE>接口DE>�?/p>
    文�g�pȝ��资源

        �Ҏ(gu��)��件系�l�资源的索引通常从一个基目录开始，递归处理每个需要进行烦(ch��)引的文�g。该资源有一个字�W�串数组�c�d��?DE>excludedFilesDE> 属性，表示在处理文件时需要排除的文�g�l�对路径的正则表辑ּ�。在递归遍历文�g�pȝ��?w��i)的同时�Q�绝对�\径匹�?DE>excludedFilesDE> 中�Q意一��的文�g��不�?x��)被处理。这主要是考虑��C��般我们只需要对一部分文�g夹（比如排除可能存在的备份目录）(j��)中的一部分文�g�Q�如 doc, ppt 文�g�{�）(j��)�q�行索引�?/p>
        除了(ji��n)所有文件共有的文�g名、文件�\径、文件大��和修改旉��{?Field�Q�不同类型的文�g需要有不同的处理方法。�ؓ(f��)�?ji��n)保留灵�z�L��，我们使用 Strategy 模式��装对不同类型文件的处理方式。�ؓ(f��)此我们抽象出一�?DE>DocumentBuilderDE> 的接口，该接口仅定义�?ji��n)一个方法如下：(x��)

    清单 3. DocumentBuilder 接口

public interface DocumentBuilder { Document buildDocument(InputStream is); }

什么是 Strategy 模式�Q?/strong>

�Ҏ(gu��)�� Design patterns: Elements of reusable object orientated software 一书：(x��)Strategy 模式“定义一�p�d��的算法，把它们分别封装�v来，�q�且使它们相互可以替换。这个模式��得算法可以独立于使用它的客户而变化�?#8221;

        不同�?DE>DocumentBuilderDE>�Q�Strategy�Q?用于从一个输入流中读取数据，处理不同�c�d��的文件。对于常见的文�g格式来说�Q�都有合适的开源工具帮助进行解析。在下表中我们列举一些常见文件类型的解析办法�?/p>

文�g�c�d�� 常用扩展�?/th> 可以使用的解析办�?/th>

�U�文本文�?/td> txt 无需�c�d��解析

RTF 文档 rtf 使用 DE>javax.swing.text.rtf.RTFEditorKitDE> �c?/td>

Word 文档�Q�非 OOXML 格式�Q?/td> doc Apache POI �Q�可配合使用 POI Scratchpad�Q?/td>

PowerPoint 演示文稿�Q�非 OOXML 格式�Q?/td> xls Apache POI �Q�可配合使用 POI Scratchpad�Q?/td>

PDF 文档 pdf PDFBox�Q�可能中文支持欠佻I��(j��)

HTML 文档 htm, html JTidy, Cobra

        �q�里�?Word 文�g��Z��Q�给��Z��个简单的参考实现�?/p>

    清单 4. 解析�U�文本内容的实现

// WordDocument �?Apache POI Scratchpad 中的一个类 Document buildDocument(InputStream is) { String bodyText = null; try { WordDocument wordDoc = new WordDocument(is); StringWriter sw = new StringWriter(); wordDoc.writeAllText(sw); sw.close(); bodyText = sw.toString(); } catch (Exception e) { throw new DocumentHandlerException("Cannot extract text from a Word document", e); } if ((bodyText != null) && (bodyText.trim().length() > 0)) { Document doc = new Document(); doc.add(new Field("body", bodyText, Field.Store.YES, Field.Index.TOKENIZED)); return doc; } return null; }

        那么如何选择合适的 Strategy 来处理文件呢�Q�UNIX �pȝ��下的 file(1) 工具提供�?ji��n)�?magicnumber 获取文�g�c�d��的功能，我们可以使用 DE>Runtime.exec()DE> �Ҏ(gu��)��调用�q�一命��o(h��)。但�q�需要在�?file(1) 命��o(h��)的情况下�Q�而且�q�不能识别出所有文件类型。在一般的情况下我们可以简单地�Ҏ(gu��)��扩展名来使用合适的�c�d��理文件。扩展名和类的映��关�p�d��?properties 文�g中。当需要添加对新的文�g�c�d��的支持时�Q�我们只需��d��一个新的实�?DE>DocumentBuilderDE> 接口的类�Q��ƈ在映��文件中��d��一个映��关�p�d��可�?/p>
    数据库结果集资源

        大多数应用��用数据库作�ؓ(f��)�怹�存储�Q�对数据库查询结果集索引是一个常见需求�?/p>
        生成一个数据库�l�果集资源的实例需要先提供一个查询语句，然后执行查询�Q�得��C��个结果集。这个结果集中的内容便是我们需要进行烦(ch��)引的对象�?coDE>extractDocumentsDE> 的实��C��是�ؓ(f��)�l�果集中的每一行创��Z��?DE>DocumentDE> 对象。和文�g�pȝ��资源不同的是�Q�数据库资源需要放�?DE>DocumentDE> 中的 DE>FieldDE> 一般都存在在查询结果集之中。比如一个简单的文章发布站点�Q�对其后台数据库执行查询 DE>SELECT ID, TITLE, CONTENT FROM ARTICLEDE> �q�回一个有三列的结果集。对�l�果集的每一行都�?x��)被提取��Z��?DE>DocumentDE> 对象�Q�其中包含三�?DE>FieldDE>�Q�分别对应这三列�?/p>
        然而不�?DE>FieldDE> 的类型是不同的。比�?DE>IDDE> 字段一般对�?DE>Store.YESDE> �?DE>Index.NODE> �?DE>FieldDE>�Q��?DE>TITLEDE> 字段则一般对�?DE>Store.YESDE> �?DE>Index.TOKENIZEDDE> �?DE>FieldDE>。�ؓ(f��)�?ji��n)解册��个问题，我们在数据库�l�果集资源的实现中提供一个类型�ؓ(f��) DE>PropertiesDE> �?DE>fieldTypeMappingsDE> 属性，用于讄��数据库字�D�|��对应�?DE>FieldDE> 的类型。对于前面的情况来说�Q�这个属性可能会(x��)被配�|�成�c�M��q�样的�Ş式：(x��)

ID = YES, NO TITLE = YES, TOKENIZED CONTENT = NO, TOKENIZED

        配合�q�个映射�Q�我们便可以生成合适类型的 DE>FieldDE>�Q�完成对�l�果集烦(ch��)引的工作�?/p>

    攉��索引

        完成对资源的索引之后�Q�还需要让索引为搜索模块所用。前面我们已�l�说�q�这里介�l�的框架主要用于��型应用�Q�考虑到复杂性，我们采取��单地��分布在各个机器上的索引汇��d��一个地方的�{�略�?/p>
        汇�ȝ��(ch��)引的传输方式可以有很多方案，比如使用 FTP、HTTP、rsync �{�。甚至烦(ch��)引模块和搜烦(ch��)模块可以位于同一台机器上�Q�这�U�情况下只需要将索引�q�行本地拯��卛_��。同前面�c�M��Q�我们定义一�?DE>TransporterDE> 接口�?/p>

    清单 5. Transporter 接口

public interface Transporter { public void transport(File file); }

        �?FTP 方式传输��Z��Q�我们��?Commons Net 完成传输的操作�?/p>

public void transport(File file) throws TransportException { FTPClient client = new FTPClient(); client.connect(host); client.login(username, password); client.changeWorkingDirectory(remotePath); transportRecursive(client, file); client.disconnect(); } public void transportRecursive(FTPClient client, File file) { if (file.isFile() && file.canRead()) { client.storeFile(file.getName(), new FileInputStream(file)); } else if (file.isDirectory()) { client.makeDirectory(file.getName()); client.changeWorkingDirectory(file.getName()); File[] fileList = file.listFiles(); for (File f : fileList) { transportRecursive(client, f); } } }

        对其他传输方案也有各自的�Ҏ(gu��)��q�行处理�Q�具体��用哪�?DE>TransporterDE> 的实现被配置�?Spring 风格的烦(ch��)引模块配�|�文件中。传输的方式是灵�zȝ��。比如当需要强调安全性时�Q�我们可以换用基�?SSL �?FTP �q�行传输。所需要做的只是开发一个��?FTP over SSL �?DE>TransporterDE> 实现�Q��ƈ在配�|�文件中更改 DE>TransporterDE> 的实现即可�?/p>

    �q�行搜烦(ch��)

        在做�?ji��n)这么多之后�Q�我们开始接触和用户兌��最为紧密的搜烦(ch��)模块。注意，我们的框架不包括一个搜索的 Web 前端界面。但是类��D��L(f��ng)��界面可以在搜索模块的基础上方便地开发出来。基于已�l�收集好的烦(ch��)引进行搜索是个很��单的�q�程。Lucene 已经提供�?ji��n)功能强大�?DE>IndexSearcherDE> �?qi��ng)其子类。在�q�个部分�Q�我们不�?x��)再介绍如何使用�q�些�c�，而是��x(ch��ng)��在前文提到过的资源元数据上。元数据从各个资源所在的文�g夹中��d��得到�Q�它在搜索模块中扮演重要的角艌Ӏ?/p>
    构徏一个查�?/font>

        对不同资源进行搜索的查询�Ҏ(gu��)��q�不一栗��例如搜索一个论坛里的所有留�a��Ӟ��我们��x(ch��ng)��的一般是留言的标题、作者和内容�Q�而当搜烦(ch��)一�?FTP 站点�Ӟ��我们更多��x(ch��ng)��的是文�g名和文�g内容。另一斚w��Q�我们有时可能会(x��)使用一个查询去搜烦(ch��)多个资源的结果。这正是之前我们在前面所提到的元数据�?DE>searchableFieldsDE> �?DE>resourceNameDE> 属性的作用。前者指��Z��个资源中哪些字段是参与搜索的�Q�后者则用于在搜索时��定使用哪个或者哪些烦(ch��)引。从技术细节来��_(d��)��只有有了(ji��n)�q�些信息�Q�我们才可以构造出可用�?DE>QueryDE> 对象�?/p>
    呈现搜烦(ch��)�l�果

        当从 DE>IndexSearcherDE> 对象得到搜烦(ch��)�l�果�Q?coDE>HitsDE>�Q�之后，当然我们可以直接从中获取需要的��|��再格式化予以输出。但一来格式化输出搜烦(ch��)�l�果�Q�尤其在 Web 应用中）(j��)是个很常见的需求，可能�?x��)经常变��_(d��)��二来�l�果的呈现格式应该是由分散的资源各自定义�Q�而不是交由搜索模块来定义。基于上面两个原因，我们的框架将使用在资源收集端配置�l�果输出格式的方式。这个格式由资源元数据中�?DE>hitTextPatternDE> 属性定义。该属性是一个字�W�串�c�d��的��|��支持两种语法

形如 DE>${field_name}DE> 的子字符串都�?x��)被动态替换成查询�l�果中各�?DE>DocumentDE> �?DE>FieldDE> 的倹{�?
形如 DE>$function(...) DE>的被解释为函敎ͼ�括号内以逗号隔开的符号都被解释成参数�Q�函数可以嵌套�?

        例如搜烦(ch��)“具体”�q�回的搜索结果中包含一�?DE>DocumentDE> 对象�Q�其 DE>FieldDE> 如下表：(x��)

Field 名称 Field 内容

url http://example.org/article/1.html

title �C�Z��标题

content �q�里是具体的内容�?/td>

        那么如果 DE>hitTextPattenDE> 被设�|��ؓ(f��)“DE>${title}
$highlight(${content}, 5, "", "")DE>”�Q�返回的�l�果�l�浏览器解释后可能的昄��l�果如下�Q�这只是个演�C�链接，请不要点击）(j��)�Q?/p>
    �C�Z��标题
    �q�里�?strong>具体...

        上面提到�?DE>$highlight()DE> 函数用于在搜索结果中取得最匚w��的一�D�|��本，�q��?sh��)��显�C�搜索时使用的短语，其第一个参数是高�(sh��)��昄��的文本，�W�二个参数是昄��的文本长度，�W�三和第四个参数是高?sh��)��文本时使用的前�~�和后�~��?/p>
        可以使用正则表达式和文本解析来实现前面所提到的语法。我们也可以使用 JavaCC 定义 DE>hitTextPatternDE> 的文法，�q�而生成词法分析器和语法解析器。这是更为系�l��ƈ且相对而言不易出错的方法。对 JavaCC 的介�l�不是本文的重点�Q��?zh��n)�可以在下面�?阅读资源中找到学�?f��n)资料�?/p>

    相关产品

        下面列出的是一些与我们所提出的框架所相关或者类似的产品�Q��?zh��n)�可以�?学习(f��n)资料中更多地�?ji��n)解他们�?/p>
    IBM®OmniFind?Family

        OmniFind �?IBM 公司推出的企业��搜烦(ch��)解决�Ҏ(gu��)��。基�?UIMA (Unstructured Information Management Architecture) 技术，它提供了(ji��n)强大的烦(ch��)引和获取信息功能�Q�支持巨大数量、多�U�类型的文档资源�Q�无论是�l�构化还是非�l�构化）(j��)�Q��ƈ�?Lotus®Domino®�?WebSphere®Portal 专门�q�行�?ji��n)优化�?/p>
    Apache Solr

        Solr �?Apache 的一个企业��的全文检索项目，实现�?ji��n)一个基�?HTTP 的搜索服务器�Q�支持多�U�资源和 Web 界面��理�Q�它同样建立�?Lucene 之上�Q��ƈ�?Lucene 做了(ji��n)很多扩展�Q�例如支持动态字�D�及(qi��ng)唯一键，�Ҏ(gu��)��询结果进行动态分�l�和�q��o(h��)�{��?/p>
    Google SiteSearch

        使用 Google 的站�Ҏ(gu��)��索功能可以方便而快捷地建立一个站内搜索引擎。但�?Google 的站�Ҏ(gu��)��索基�?Google 的网�l�爬虫，所以无法访问受保护的站点内�Ҏ(gu��)��?Intranet 上的资源。另外，Google 所支持的资源类型也是有限的�Q�我们无法对其进行扩展�?/p>
    SearchBlox?

        SearchBlox 是一个商业的搜烦(ch��)引擎构徏框架。它本��n是一�?J2EE �l��g�Q�和我们的框架类��|��也支持对�|�页和文件系�l�等资源�q�行索引�Q�进而进行搜索�?/p>

    �q�需考虑的问�?/font>

        本文介绍的思想试图利用开源的工具解决中小型应用中的常见问题。当�?d��ng)��作��?f��)一个框�Ӟ��它还有很多不��I��下面列�D��Z��些可以进行改�q�的地方�?/p>
    性能考虑

        当需要进行烦(ch��)引的资源数目不多�Ӟ��隔一定的旉��q�行一�ơ完全烦(ch��)引不�?x��)占用很长时间。��用一�?2G 内存�Q�Xeon 2.66G 处理器的服务器进行实际测试，发现�Ҏ(gu��)��据库资源的烦(ch��)引占用的旉��很少�Q�一千多条记录花费的旉��?1 �U�到 2 �U�之内。而对 1400 多个文�g�q�行索引耗时大约十几�U�。但在大型应用中�Q�资源的定w��是巨大的�Q�如果每�ơ都�q�行完整的烦(ch��)引，耗费的时间会(x��)很惊人。我们可以通过跌��已经索引的资源内容，删除已不存在的资源内容的索引�Q��ƈ�q�行增量索引来解册��个问题。这可能�?x��)涉及(qi��ng)文件校验和索引删除�{��?/p>
        另一斚w��Q�框架可以提供查询缓存来提高查询效率。框架可以在内存?sh��)��徏立一�U�缓存，�q��用如 OSCache �?EHCache 实现��盘?sh��)��的二��~�存。当索引的内容变化不频繁�Ӟ��使用查询�~�存更会(x��)明显地提高查询速度、降低资源消耗�?/p>
    分布式烦(ch��)�?/font>

        我们的框架可以将索引分布在多台机器上。搜索资源时�Q�查询被 flood 到各个机器上从而获得搜索结果。这样可以免��M��输烦(ch��)引到某一��C��央服务器的过�E�。当然也可以��Z��实现�?ji��n)分布式哈希�?�Q�DHT�Q�的�l�构�?P2P �|�络�Q�配合烦(ch��)引复�?(Replication)�Q��得应用程序更为安全，可靠�Q�有伸羃性。在阅读资料中给��Z��(ji��n) 一��关于构建分布式环境下全文搜索的可行性的论文�?

    安全�?/font>

        目前我们的框架�ƈ没有涉及(qi��ng)到安全性。除�?ji��n)依赖资源本�w�的讉K��控制�Q�如受保护的�|�页和文件系�l�等�Q�之外，我们�q�可以从两方面增强框架本�w�的安全性：(x��)

考虑��C��个组�l�的搜烦(ch��)功能对不同用��L(f��ng)��权限讄��不一定一��P��可以支持对用戯��色的定义�Q�实行对搜烦(ch��)模块的访问控制�?
在资源烦(ch��)引模块中实现一�U�机�Ӟ��让资源可以限制自己暴露的内容�Q�从而羃?y��u)��?ch��)引模块的索引范围。这可以�c�L�� robots 文�g可以规定搜烦(ch��)引擎爬虫的行为�?

    �ȝ��

        通过上文的介�l�，我们认识�?ji��n)一个可扩展的框�Ӟ��q��(ch��)引模块和搜烦(ch��)模块两部分组成。它可以灉|��地适应不同的应用场景。如果需要更独特的需求，框架本��n预留�?ji��n)可以扩展的接口�Q�我们可以通过实现�q�些接口完成功能的定制。更重要的是�q�一切都是徏立在开源��Y件的基础之上。希望本文能为�?zh��n)�揭示开源的力量�Q�体验用开源工��L(f��ng)��装�?zh��n)�自己的解��x(ch��ng)��案所带来的莫大快乐�?/p>

张��^�?/a> 2009-09-18 23:39 发表评论

Fri, 18 Sep 2009 15:24:00 GMT
        一般GC��法也是�?x��)照��permanent generation的，每次permanent generation满了(ji��n)要做扩展前都�?x��)触发一�ơFULL GC�Q�除非设�|�了(ji��n)-Xnoclassgc�?nbsp;

        另外如果使用CMS�Q�ConcMarkSweep GC�Q�算法的话，开�?XX:+UseConcMarkSweepGC标志�Q�默认情况下��是不会(x��)扫描permanent generation的，需要同时打开下面两个标志位才能让CMS GC扫描permanent generation�?nbsp;
        -XX:+CMSPermGenSweepingEnabled
        -XX:+CMSClassUnloadingEnabled

        PS�Q�只针对SUN的JVM有效�?

张��^�?/a> 2009-09-18 23:24 发表评论

属�?/th>	�c�d��	含义
resourceName	String	资源�?strong>唯一名称
resourceDescription	String	资源的介�l�性文�?/td>
hitTextPattern	String	当文档被搜烦(ch��)到时�Q�这�?pattern 规定�?ji��n)结果显�C�的格式
searchableFields	String[]	可以被搜索的字段名称

文�g�c�d��	常用扩展�?/th>	可以使用的解析办�?/th>
�U�文本文�?/td>	txt	无需�c�d��解析
RTF 文档	rtf	使用 DE>javax.swing.text.rtf.RTFEditorKitDE> �c?/td>
Word 文档�Q�非 OOXML 格式�Q?/td>	doc	Apache POI �Q�可配合使用 POI Scratchpad�Q?/td>
PowerPoint 演示文稿�Q�非 OOXML 格式�Q?/td>	xls	Apache POI �Q�可配合使用 POI Scratchpad�Q?/td>
PDF 文档	pdf	PDFBox�Q�可能中文支持欠佻I��(j��)
HTML 文档	htm, html	JTidy, Cobra

Field 名称	Field 内容
url	http://example.org/article/1.html
title	�C�Z��标题
content	�q�里是具体的内容�?/td>

亚洲精品国产国语,在线亚洲精品自拍,亚洲福利视频一区

Apache Common BeanUtils

�?r��n)态化��面

Map Cache

��d��Excel文�g

Hibernate与JdbcTemplate�׃�n事务���理

JAVA生成文�g

Hibernate与JdbcTemplate�׃�n事务��理