能在线观看的小视频你懂的,欧美精品欧美极品欧美视频

業(yè)務經(jīng)理

微信掃描以上二維碼

028-61286886

在線咨詢

二次開發(fā)文檔

火車頭內(nèi)容采集范例

創(chuàng)建時間：2021-01-06 09:37:43 更新時間：2023-02-23 22:07:17 文檔糾錯/我來修改此文檔（2）不會操作怎么辦？

采集工具：火車采集器（可以百度搜索一下這個工具的下載）

采集模塊：新聞 News

第一步、編寫采集入庫腳本接口

新建：/api/caiji.php （應用于URL地址請求，大小寫隨意）

如果根目錄沒有api文件夾，就創(chuàng)建到 /public/api/caiji.php （應用于URL地址請求，大小寫隨意）

新建：./dayrui/My/Api/Caiji.php（首字母必須大寫，最終php文件命名與上面的名稱保持相同）

<?php

$this->_module_init('news'); // news 是模塊目錄

if ($_GET['action'] == 'category') {
    $this->module['category'] = \Phpcmf\Service::L('category', 'module')->get_category($this->module['share'] ? 'share' : $this->module['dirname']);
    if (!$this->module['category']) {
        echo '模塊【'.$this->module['dirname'].'】沒有創(chuàng)建欄目';
    }
    foreach ($this->module['category'] as $t) {
        if ($t['child'] == 0 && $t['tid'] == 1) {
            echo '<h1>'.$t['name'].'<=>'.$t['id'].'</h1>'.PHP_EOL;
        }
    }

} else {
    // 入庫數(shù)據(jù)

$data = $_REQUEST;

// 發(fā)布者id 1
    $data['uid'] = 1;

// 發(fā)布者筆名 admin
    $data['author'] = 'admin';

// 主表字段
    $fields[1] = $this->get_cache('table-'.SITE_ID, $this->content_model->dbprefix(SITE_ID.'_'.MOD_DIR));
    $cache = $this->get_cache('table-'.SITE_ID, $this->content_model->dbprefix(SITE_ID.'_'.MOD_DIR.'_category_data'));
    $cache && $fields[1] = array_merge($fields[1], $cache);

// 附表字段
    $fields[0] = $this->get_cache('table-'.SITE_ID, $this->content_model->dbprefix(SITE_ID.'_'.MOD_DIR.'_data_0'));

// 去重復
    $fields[0] = array_unique($fields[0]);
    $fields[1] = array_unique($fields[1]);
    
    // 格式化入庫字段
    
    // 一般是格式化非文本類的字段（例如多文件上傳、復選框、聯(lián)動字段等等）
    // 這里需要按采集資料的格式入庫格式化字段，
    
    
    // 開始歸類存儲

$save = [];

// 主表附表歸類
    foreach ($fields as $ismain => $field) {
        foreach ($field as $name) {
            isset($data[$name]) && $save[$ismain][$name] = $data[$name];
        }
    }
    if (!$data['catid']) {
       exit('欄目為空');
    }

$save[1]['uid'] = $save[0]['uid'] = $data['uid'];
    $save[1]['catid'] = $save[0]['catid'] = $data['catid'];

$save[1]['url'] = ''; // 地址留空，系統(tǒng)會自動生成
    $save[1]['status'] = 9; //9表示正常發(fā)布，1表示審核里面
    $save[1]['hits'] = 0; // 閱讀數(shù)
    $save[1]['displayorder'] = 0; // 排序權(quán)重值，默認填寫0
    $save[1]['link_id'] = 0; // 填寫0不管他
    $save[1]['inputtime'] = SYS_TIME; // 發(fā)布時間設置成為當前時間
    $save[1]['updatetime'] = SYS_TIME; // 更新時間也設置成為當前時間，關(guān)于時間采集如果是這種格式2022-12-12xx，那么需要使用strtotime函數(shù)轉(zhuǎn)換成時間戳入庫
    $save[1]['inputip'] = '127.0.0.1'; // 發(fā)布者ip地址
    
    //$save[1]['keywords'] = dr_get_keywords( $save[1]['title']); // 按插件提取關(guān)鍵詞
    
    //$save[1]['description'] = dr_get_description( $save[0]['content'], 100); // 在內(nèi)容里面提取100個子作為描述

// 驗證標題重復
    if ($this->content_model->table(SITE_ID.'_'.MOD_DIR)->where('title', $save[1]['title'])->counts()) {
        echo '重復';exit;
    }

$rt = $this->content_model->save_content(0, $save);

if ($rt['code']) {
        /*
        // 用于發(fā)布成功后生成靜態(tài)文件代碼
        //dr_html_auth($_SERVER['SERVER_ADDR']);
        //dr_catcher_data(SITE_URL.'index.php?s='.MOD_DIR.'&c=html&m=showfile&id='.$rt['id']);
        $atcode = 'chtml_'.SITE_ID.'_'.MOD_DIR.'_'.$rt['code'];
        \Phpcmf\Service::L('cache')->set_auth_data($atcode, $rt['code'], SITE_ID);
        dr_catcher_data(SITE_URL.'index.php?s='.MOD_DIR.'&c=html&m=showfile&id='.$rt['code'].'&atcode='.$atcode);
$save[1]['id'] = $save[0]['id'] = $rt['code'];
\Phpcmf\Service::L('router')->show_url(\Phpcmf\Service::C()->module, $save[1]);
        */
        exit('成功');
    } else {
        exit('失敗');
    }

}

exit;

腳本文件中可以定義發(fā)布者等一些預定義字段默認值，如果你不會php的話可以保持默認

注意：本腳本的程序代碼只對內(nèi)容等字段入庫有效，由于采集目標網(wǎng)站的數(shù)據(jù)規(guī)范性無法做到統(tǒng)一；

如果開發(fā)者對其他字段（例如多文件上傳、復選框、聯(lián)動字段等等）需要開發(fā)者自己根據(jù)采集的實際情況來編寫入庫程序來組裝入庫的POST數(shù)據(jù)，需要PHP開發(fā)技術(shù)基礎，下面來舉一些基礎例子。

1、多文件上傳字段

2、復選框字段

測試規(guī)則地址：

如果能顯示出來欄目信息，說明ok了

如果顯示api file is error，表示你./dayrui/My/Api/Caiji.php沒有創(chuàng)建正確。

第二步、火車采集器編寫web發(fā)布規(guī)則

QQ20161021-0@2x.png

第三步、新建一個在線發(fā)布模塊

QQ20161021-1@2x.png

第四步、填寫獲取欄目列表的參數(shù)

按照上面的格式寫就ok了

第五步、內(nèi)容發(fā)布規(guī)則參數(shù)

表單參數(shù)：這里可以配置任意自定義字段的入庫，不知道入庫格式怎么辦？

查看數(shù)據(jù)庫儲存數(shù)據(jù)格式進行入庫處理，必要時需要在接口文件中重新編程

第六步、保存模塊

QQ20161021-5@2x.png

第七步、然后返回web發(fā)布配置里面

QQ20161021-6@2x.png

按照圖中的參數(shù)配置，點“獲取欄目”，如果可以獲取到就表示成功了一大半了

第八步、測試入庫發(fā)布

QQ20161021-7@2x.png

第九步、后臺查看采集內(nèi)容

QQ20161021-8@2x.png

本文地址：http://www.apdwn.com/doc/1084.html

技術(shù)求助：不會操作怎么辦？點擊前往技術(shù)求助！

文檔修改：文檔有誤、不完善、我來提醒官方修改此文檔（2）

相關(guān)實例

成年人的在线免费视频,婷婷91精品国产91久久综合,人妻精品人妻888,性感美女视频一区二区三区,国产熟女精品视频免费看,国内精品九九久久精品小草,中文字幕日韩精品欧美丝袜,午夜精品久久久久蜜桃毛片,91久久在线视频观看

幫助文檔

開發(fā)入門

函數(shù)方法

模型/類方法

鉤子開發(fā)

通知提醒

高級開發(fā)

開發(fā)實例

第三方類

火車頭內(nèi)容采集范例