使用Indexdank进行网站搜索 - Using Indextank for a site search

我正在寻找易于实现的免费&谷歌CSE的无广告替代品。

我发现了indextank，它看起来是一种很简单的索引内容的方法，但它不会抓取你的网站。我想我设想过能够通过谷歌CSE的url。

因此，有没有一种简单的方法可以设置一个PHP脚本来完成爬行部分？即，向其传递URL并使其索引该域上的所有网页。

最终的结果是我可以在我的网站上进行网站搜索。

我在站点中实现了此功能。基本上，我有一个HTML表单，用户可以在其中查询：

<form method="post" action="[_LINK_HELP_SEARCH_]">
  <div class="static-text">(_INTRO_)</div>
  <input class="inline" name="q" id="search" type="text" value="[_QUERY_]" />
  <input class="inline" type="submit" value="(_SEARCH_)" />
  <div class="micro-text">(_EXAMPLE_)</div>
</form>

注意：所有[XXX]和（YYY）都是模板字段，您应该在代码中进行替换。

当发送表单时，PHP文件将查询拆分为单词：

$query = preg_replace('/'s{2,}/', ' ', $query);
$words = explode(' ', $query);

搜索目标文件夹中的每个文件（

$help_files = _get_all_files('help');
$help_files = array_slice($help_files, 0, MAX_RESULTS);
foreach($help_files as $file) {

请注意，我只在"帮助"文件夹上搜索，您应该根据自己的需要进行调整。请注意，_get_all_files是一个自定义函数，它只列出给定文件夹中的所有PHP文件。

然后加载并解析文本：

$text_file = '';
$filename = $file['page'];
if (_file_exists($filename)) {
    $text_file = _read_php_file($filename);
}
$text_file = strtolower($text_file);
$text_file = strip_tags($text_file);
$text_file = preg_replace('/'[_(.*?)_']/', '...', $text_file);
$text_file = preg_replace(array('/'s{2,}/', '['t'n]'), ' ', $text_file);

请注意，_read_php_file读取php内容文件，即与用户调用该文件时获得的内容文件相同。这是因为我使用模板，而我的HTML文件不是直接的。如果使用静态HTML，则可以使用readfile（）或类似的方法。

下一步，搜索词：

$score = 0;
foreach ($words as $word) {
    if (strpos($text_file, $word) !== false) {
        $score++;
    }
}

我知道它可以优化，但目前还没有必要。基本上，这段代码统计文本中发现的每个单词，并得到分数。

接下来，您可能有兴趣创建一个文本摘录：

$pos = strpos($text_file, $words[0]);
$cut_ini = max($pos - RESUME_LIMIT/2, 0);
$extract = substr($text_file, $cut_ini, RESUME_LIMIT);
$extract = "...$extract...";

最后，我将所有这些信息存储在输出数组中（对于找到的每个文件），如果分数是有意义的：

if (($score > 0) && (count($words) / $score > 0.7)) {
    $result = array (
        'extract'   => $extract,
        'title'     => $file['title'],
        'link'      => $file['page'],
        'score'     => $score
    );
    $results[] = $result;
}

当然，所有这些都必须为你想要索引的每个文件获取，最后，你必须对你的数组进行排序：

usort($results, "_search_sort");

具有此功能：

function _search_sort($a, $b) {
    if ($a['score'] == $b['score']) {
        return 0;
    }
    return ($a['score'] > $b['score']) ? -1 : 1;
}

最后，您将得到一个带有搜索结果的排序数组。我希望这能有所帮助。