Pure Golangで書かれた分散型高並行性クローラソフトウェア
- ソフト名 : Pholcus
- OS : Mac,Windows
- 言語 : Go
- 開発者 : HOME
Pholcus 詳細説明
Pholcusは、プログラミング学習と研究にのみ使用されている純粋なGO言語で書かれた高並行クローラソフトウェアです。スタンドアロン、サーバー、クライアントの3つの動作モードをサポートし、3つの動作インターフェイス、Web、GUI、およびコマンドラインをサポートしています。シンプルで柔軟なルール、並行バッチタスク、およびリッチ出力メソッド(MySQL / MongoDB / KAFKA / CSV / Excelなど);さらに、水平および垂直方向の把持モード、およびシミュレートされたログインおよびタスクのサスペンションおよびキャンセルなどの一連の高度な機能もサポートしています。このソフトウェアは学術研究にのみ使用され、ユーザーはその場所の関連法と規制を遵守する必要があります。違法目的のためにそれを使用しないでください!ルールのカスタマイズと完全な機能に注意を払う必要があるヘビー級クローラツールを使用して、特定のGOまたはJSプログラミング基盤をユーザーに提供します。