innmind/crawler
Composer 安装命令：
composer require innmind/crawler
包简介
Library to extract meaningful informations out of a webpage
关键字：
README 文档
README
This tool allows you to extract a lot of useful informations out of a web page (may it be html, an image, or anything else).
Installation
composer require innmind/crawler
Usage
use function Innmind\Crawler\bootstrap; use Innmind\OperatingSystem\Factory; use Innmind\UrlResolver\UrlResolver; use Innmind\Url\Url; use Innmind\Http\{ Message\Request\Request, Message\Method\Method, ProtocolVersion, }; use function Innmind\Html\bootstrap as reader; $os = Factory::build(); $crawl = bootstrap( $os->remote()->http(), $os->clock(), reader(), new UrlResolver ); $resource = $crawl( new Request( Url::of('https://en.wikipedia.org/wiki/H2g2'), new Method('GET'), new ProtocolVersion(2, 0), ), );
Here $resource is an instance of HttpResource.
innmind/crawler 适用场景与选型建议
innmind/crawler 是一款 基于 HTML 开发的 Composer 扩展包，目前已累计 978 次下载、GitHub Stars 达 1， 最近一次更新时间为 2015 年 11 月 01 日， 在 PHP 生态内属于活跃度较高的组件。
它主要适用于以下技术方向： 「crawler」 等业务场景。在实际项目中，围绕这些方向常见需要落地的问题包括：接口对接、性能调优、并发安全、与既有框架（Laravel / ThinkPHP / Yii / Webman 等）的兼容适配，以及生产环境的日志埋点与稳定性保障。
我们在过去多个企业项目中使用过 innmind/crawler 或与其功能相近的方案，如果你在选型或落地过程中遇到问题，例如 版本兼容、二次改造、私有化封装、与内部系统对接、生产 BUG 排查，欢迎联系我们协助评估。
基于 innmind/crawler 在你已有业务上做功能扩展、字段裁剪、UI 适配、与内部账号 / 权限 / 日志系统的深度对接。
线上偶发问题、内存泄漏、慢查询、并发异常等排查修复；针对高流量场景做缓存、队列、索引层面的调优。
承接完整的项目从需求 → 设计 → 开发 → 上线 → 长期运维；也可按月提供技术保姆服务。
与 innmind/crawler 相关的其它包
同方向 / 同关键字的高下载量 PHP Composer 包推荐，方便对比选型：
A lightweight, dependency free PHP class that acts as wrapper for Crawlbase API
Sitemap crawler/generator. For the given URL it will return sitemap XML file with URLs and images.
Small library for obtaining RSS feed with caching.
simple crawl link and parser it
Most powerful, popular and production crawling/scraping package for PHP
统计信息
- 总下载量： 978
- 月度下载量： 0
- 日度下载量： 0
- 收藏数： 2
- 点击次数： 8
- 依赖项目数： 4
- 推荐数： 0
其他信息
- 授权协议： MIT
- 更新时间： 2015-11-01