├── .openshift ├── pear.txt ├── cron │ ├── daily │ │ └── .gitignore │ ├── hourly │ │ └── .gitignore │ ├── minutely │ │ └── .gitignore │ ├── monthly │ │ └── .gitignore │ ├── weekly │ │ ├── chrono.dat │ │ ├── chronograph │ │ ├── jobs.deny │ │ ├── jobs.allow │ │ └── README │ └── README.cron ├── action_hooks │ └── README.md ├── markers │ └── README.md └── README.md ├── crawler ├── crawlStatus.txt ├── PHPCrawl │ ├── CHANGELOG.txt │ ├── test_interface │ │ ├── info.gif │ │ ├── style.css │ │ └── phpcrawl_testinterface.conf.php │ ├── libs │ │ ├── PHPCrawlerUtils.class.php │ │ ├── PHPCrawlerHTTPRequest.class.php │ │ ├── Enums │ │ │ ├── PHPCrawlerHTTPProtocols.class.php │ │ │ ├── PHPCrawlerUrlCacheTypes.class.php │ │ │ ├── PHPCrawlerMultiProcessModes.class.php │ │ │ ├── PHPCrawlerAbortReasons.class.php │ │ │ └── PHPCrawlerRequestErrors.class.php │ │ ├── CookieCache │ │ │ └── PHPCrawlerCookieCacheBase.class.php │ │ ├── PHPCrawlerUrlPartsDescriptor.class.php │ │ ├── PHPCrawlerURLDescriptor.class.php │ │ ├── PHPCrawlerDNSCache.class.php │ │ └── PHPCrawlerStatus.class.php │ ├── documentation │ │ ├── testinterface.jpg │ │ ├── classreferences │ │ │ ├── expand.gif │ │ │ ├── collapse.gif │ │ │ ├── PHPCrawler │ │ │ │ ├── collapse.gif │ │ │ │ ├── expand.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── property_detail_tpl_property_class_version.htm │ │ │ │ ├── method_detail_tpl_method_PHPCrawler.htm │ │ │ │ └── method_detail_tpl_method_getCrawlerId.htm │ │ │ ├── PHPCrawlerAbortReasons │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── constant_detail_tpl_constant_ABORTREASON_PASSEDTHROUGH.htm │ │ │ │ ├── constant_detail_tpl_constant_ABORTREASON_USERABORT.htm │ │ │ │ ├── constant_detail_tpl_constant_ABORTREASON_FILELIMIT_REACHED.htm │ │ │ │ └── constant_detail_tpl_constant_ABORTREASON_TRAFFICLIMIT_REACHED.htm │ │ │ ├── PHPCrawlerDocumentInfo │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── method_detail_tpl_method_toArray.htm │ │ │ │ ├── property_detail_tpl_property_benchmarks.htm │ │ │ │ ├── method_detail_tpl_method_setLinksFoundArray.htm │ │ │ │ ├── property_detail_tpl_property_port.htm │ │ │ │ ├── property_detail_tpl_property_file.htm │ │ │ │ ├── property_detail_tpl_property_path.htm │ │ │ │ ├── property_detail_tpl_property_source.htm │ │ │ │ ├── property_detail_tpl_property_host.htm │ │ │ │ ├── property_detail_tpl_property_query.htm │ │ │ │ ├── property_detail_tpl_property_header.htm │ │ │ │ ├── property_detail_tpl_property_protocol.htm │ │ │ │ ├── property_detail_tpl_property_url.htm │ │ │ │ ├── property_detail_tpl_property_referer_url.htm │ │ │ │ ├── property_detail_tpl_property_header_send.htm │ │ │ │ ├── property_detail_tpl_property_content_type.htm │ │ │ │ ├── property_detail_tpl_property_bytes_received.htm │ │ │ │ ├── property_detail_tpl_property_error_occured.htm │ │ │ │ ├── property_detail_tpl_property_http_status_code.htm │ │ │ │ ├── property_detail_tpl_property_header_bytes_received.htm │ │ │ │ ├── property_detail_tpl_property_refering_link_raw.htm │ │ │ │ ├── property_detail_tpl_property_received.htm │ │ │ │ ├── property_detail_tpl_property_content_tmp_file.htm │ │ │ │ ├── property_detail_tpl_property_refering_linkcode.htm │ │ │ │ ├── property_detail_tpl_property_error_string.htm │ │ │ │ ├── property_detail_tpl_property_received_completly.htm │ │ │ │ ├── property_detail_tpl_property_server_connect_time.htm │ │ │ │ ├── property_detail_tpl_property_content.htm │ │ │ │ ├── property_detail_tpl_property_cookies.htm │ │ │ │ ├── property_detail_tpl_property_received_to_file.htm │ │ │ │ ├── property_detail_tpl_property_traffic_limit_reached.htm │ │ │ │ ├── property_detail_tpl_property_received_to_memory.htm │ │ │ │ └── property_detail_tpl_property_unbuffered_bytes_read.htm │ │ │ ├── PHPCrawlerHTTPProtocols │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── constant_detail_tpl_constant_HTTP_1_0.htm │ │ │ │ └── constant_detail_tpl_constant_HTTP_1_1.htm │ │ │ ├── PHPCrawlerProcessReport │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── method_detail_tpl_method_toArray.htm │ │ │ │ ├── property_detail_tpl_property_files_received.htm │ │ │ │ ├── property_detail_tpl_property_bytes_received.htm │ │ │ │ ├── property_detail_tpl_property_links_followed.htm │ │ │ │ ├── property_detail_tpl_property_data_throughput.htm │ │ │ │ ├── property_detail_tpl_property_file_limit_reached.htm │ │ │ │ ├── property_detail_tpl_property_process_runtime.htm │ │ │ │ ├── property_detail_tpl_property_traffic_limit_reached.htm │ │ │ │ ├── property_detail_tpl_property_user_abort.htm │ │ │ │ ├── property_detail_tpl_property_avg_proc_data_transfer_rate.htm │ │ │ │ ├── property_detail_tpl_property_memory_peak_usage.htm │ │ │ │ ├── property_detail_tpl_property_avg_server_response_time.htm │ │ │ │ ├── property_detail_tpl_property_abort_reason.htm │ │ │ │ └── property_detail_tpl_property_avg_server_connect_time.htm │ │ │ ├── PHPCrawlerRequestErrors │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── constant_detail_tpl_constant_ERROR_HOST_UNREACHABLE.htm │ │ │ │ ├── constant_detail_tpl_constant_ERROR_PROXY_UNREACHABLE.htm │ │ │ │ ├── constant_detail_tpl_constant_ERROR_SOCKET_TIMEOUT.htm │ │ │ │ ├── constant_detail_tpl_constant_ERROR_NO_HTTP_HEADER.htm │ │ │ │ ├── constant_detail_tpl_constant_ERROR_TMP_FILE_NOT_WRITEABLE.htm │ │ │ │ └── constant_detail_tpl_constant_ERROR_SSL_NOT_SUPPORTED.htm │ │ │ ├── PHPCrawlerResponseHeader │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── property_detail_tpl_property_content_type.htm │ │ │ │ ├── property_detail_tpl_property_http_status_code.htm │ │ │ │ ├── property_detail_tpl_property_header_raw.htm │ │ │ │ ├── property_detail_tpl_property_content_length.htm │ │ │ │ ├── property_detail_tpl_property_source_url.htm │ │ │ │ ├── property_detail_tpl_property_content_encoding.htm │ │ │ │ ├── property_detail_tpl_property_transfer_encoding.htm │ │ │ │ ├── method_detail_tpl_method_PHPCrawlerResponseHeader.htm │ │ │ │ └── property_detail_tpl_property_cookies.htm │ │ │ ├── PHPCrawlerURLDescriptor │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── method_detail_tpl_method_PHPCrawlerURLDescriptor.htm │ │ │ │ ├── property_detail_tpl_property_linktext.htm │ │ │ │ ├── property_detail_tpl_property_link_raw.htm │ │ │ │ ├── property_detail_tpl_property_url_rebuild.htm │ │ │ │ ├── property_detail_tpl_property_linkcode.htm │ │ │ │ ├── property_detail_tpl_property_refering_url.htm │ │ │ │ └── property_detail_tpl_property_is_redirect_url.htm │ │ │ ├── PHPCrawlerUrlCacheTypes │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── constant_detail_tpl_constant_URLCACHE_MEMORY.htm │ │ │ │ └── constant_detail_tpl_constant_URLCACHE_SQLITE.htm │ │ │ ├── PHPCrawlerCookieDescriptor │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── property_detail_tpl_property_name.htm │ │ │ │ ├── property_detail_tpl_property_path.htm │ │ │ │ ├── property_detail_tpl_property_value.htm │ │ │ │ ├── property_detail_tpl_property_domain.htm │ │ │ │ ├── property_detail_tpl_property_source_url.htm │ │ │ │ ├── property_detail_tpl_property_expires.htm │ │ │ │ ├── property_detail_tpl_property_source_domain.htm │ │ │ │ ├── property_detail_tpl_property_expire_timestamp.htm │ │ │ │ └── property_detail_tpl_property_cookie_send_time.htm │ │ │ ├── PHPCrawlerMultiProcessModes │ │ │ │ ├── expand.gif │ │ │ │ ├── collapse.gif │ │ │ │ ├── google_code.php │ │ │ │ ├── index.html │ │ │ │ ├── constant_detail_tpl_constant_MPMODE_NONE.htm │ │ │ │ ├── constant_detail_tpl_constant_MPMODE_PARENT_EXECUTES_USERCODE.htm │ │ │ │ └── constant_detail_tpl_constant_MPMODE_CHILDS_EXECUTES_USERCODE.htm │ │ │ ├── google_code.php │ │ │ ├── print_googlead_div.js │ │ │ └── index.html │ │ ├── google_code.php │ │ └── index.html │ └── classes │ │ └── phpcrawler.class.php ├── bgCrawl.php ├── admin │ ├── login.php │ ├── home.php │ └── index.php └── runCrawl.php ├── inc ├── .gitignore ├── composer.json ├── error.php ├── config.php └── track.php ├── favicon.ico ├── load.php ├── robots.txt ├── cdn └── css │ ├── index.css │ └── search.css ├── url.php ├── .htaccess ├── about ├── bot.php ├── stats.php └── index.php ├── README.md ├── index.php └── LICENSE /.openshift/pear.txt: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /crawler/crawlStatus.txt: -------------------------------------------------------------------------------- 1 | 0 -------------------------------------------------------------------------------- /.openshift/cron/daily/.gitignore: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /.openshift/cron/hourly/.gitignore: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /.openshift/cron/minutely/.gitignore: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /.openshift/cron/monthly/.gitignore: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /inc/.gitignore: -------------------------------------------------------------------------------- 1 | vendor/ 2 | composer.lock -------------------------------------------------------------------------------- /favicon.ico: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/subins2000/search/HEAD/favicon.ico -------------------------------------------------------------------------------- /.openshift/cron/weekly/chrono.dat: -------------------------------------------------------------------------------- 1 | Time And Relative D...n In Execution (Open)Shift! 2 | -------------------------------------------------------------------------------- /inc/composer.json: -------------------------------------------------------------------------------- 1 | { 2 | "require": { 3 | "francium/process": "^0.3.2" 4 | } 5 | } 6 | -------------------------------------------------------------------------------- /.openshift/cron/weekly/chronograph: -------------------------------------------------------------------------------- 1 | #!/bin/bash 2 | 3 | echo "`date`: `cat $(dirname \"$0\")/chrono.dat`" 4 | -------------------------------------------------------------------------------- /crawler/PHPCrawl/CHANGELOG.txt: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/subins2000/search/HEAD/crawler/PHPCrawl/CHANGELOG.txt -------------------------------------------------------------------------------- /crawler/PHPCrawl/test_interface/info.gif: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/subins2000/search/HEAD/crawler/PHPCrawl/test_interface/info.gif -------------------------------------------------------------------------------- /load.php: -------------------------------------------------------------------------------- 1 | 2 |
3 | 4 |6 | The request file was not found on this server. 7 |
8 | 9 |