2015年12月10日星期四

Heritrix is a web crawler designed for web archiving. It was written by the Internet Archive. It is free software license and written in Java. The main interface is accessible using a web browser, and there is a command-line tool that can optionally be used to initiate crawls.

網路爬蟲

http://www.oschina.net/project/tag/64/?lang=19&os=0&sort=view

主流的爬蟲

Nutch

開發語言：Java

主頁：http://lucene.apache.org/nutch/

簡介：

Apache的子項目之一，屬於Lucene項目下的子項目。

Nutch是一個基於Lucene，類似Google的完整網絡搜索引擎解決方案，基於Hadoop的分布式處理模型保證了系統的性能，類似Eclipse的插件機制保證了系統的可客戶化，而且很容易集成到自己的應用之中。

Heritrix

開發語言：Java

主頁：http://crawler.archive.org/

與Nutch比較：

二者均為Java開源框架，Heritrix是 SourceForge上的開源產品，Nutch為Apache的一個子項目，它們都稱作網絡爬蟲/蜘蛛（ Web Crawler），它們實現的原理基本一致：深度遍歷網站的資源，將這些資源抓取到本地，使用的方法都是分析網站每一個有效的URI，並提交Http請求，從而獲得相應結果，生成本地文件及相應的日誌信息等。

Heritrix 是個「archival crawler」 – 用來獲取完整的、精確的、站點內容的深度複製。包括獲取圖像以及其他非文本內容。抓取並存儲相關的內容。對內容來者不拒，不對頁面進行內容上的修改。重新爬行對相同的URL不針對先前的進行替換。爬蟲通過Web用戶界面啓動、監控、調整，允許彈性的定義要獲取的URL。

二者的差異：

Nutch 只獲取並保存可索引的內容。Heritrix則是照單全收。力求保存頁面原貌。

Nutch 可以修剪內容，或者對內容格式進行轉換。

Nutch 保存內容為數據庫優化格式便於以後索引；刷新替換舊的內容。而Heritrix 是添加(追加)新的內容。

Nutch 從命令行運行、控制。Heritrix 有 Web 控制管理界面。

Nutch 的定制能力不夠強，不過現在已經有了一定改進。Heritrix 可控制的參數更多。

Heritrix提供的功能沒有nutch多，有點整站下載的味道。既沒有索引又沒有解析，甚至對於重復爬取URL都處理不是很好。

Heritrix的功能強大，但是配置起來卻有點麻煩。

其他的爬蟲

WebLech

http://weblech.sourceforge.net/

WebLech是一個功能強大的Web站點下載與鏡像工具。它支持按功能需求來下載web站點並能夠盡可能模仿標準Web瀏覽器的行為。 WebLech有一個功能控制台並採用多線程操作。

Arale

http://web.tiscali.it/_flat/arale.jsp.html

Arale主要為個人使用而設計，而沒有像其它爬蟲一樣是關注於頁面索引。Arale能夠下載整個web站點或來自web站點的某些資源。 Arale還能夠把動態頁面映射成靜態頁面。

J-Spider

http://j-spider.sourceforge.net/

J-Spider:是一個完全可配置和定制的Web Spider引擎.你可以利用它來檢查網站的錯誤(內在的服務器錯誤等),網站內外部鏈接檢查，分析網站的結構(可創建一個網站地圖),下載整個Web站點，你還可以寫一個JSpider插件來擴展你所需要的功能。

Spindle

http://www.bitmechanic.com/projects/spindle/

spindle 是一個構建在Lucene工具包之上的Web索引/搜索工具.它包括一個用於創建索引的HTTP spider和一個用於搜索這些索引的搜索類。 spindle項目提供了一組JSP標籤庫使得那些基於JSP的站點不需要開發任何Java類就能夠增加搜索功能。

Arachnid

http://arachnid.sourceforge.net/

Arachnid: 是一個基於Java的web spider框架.它包含一個簡單的HTML剖析器能夠分析包含HTML內容的輸入流.通過實現Arachnid的子類就能夠開發一個簡單的Web spiders並能夠在Web站上的每個頁面被解析之後增加幾行代碼調用。 Arachnid的下載包中包含兩個spider應用程序例子用於演示如何使用該框架。

LARM

http://larm.sourceforge.net/

LARM能夠為Jakarta Lucene搜索引擎框架的用戶提供一個純Java的搜索解決方案。它包含能夠為文件，數據庫表格建立索引的方法和為Web站點建索引的爬蟲。

JoBo

http://www.matuschek.net/software/jobo/index.html

JoBo 是一個用於下載整個Web站點的簡單工具。它本質是一個Web Spider。與其它下載工具相比較它的主要優勢是能夠自動填充form(如：自動登錄)和使用cookies來處理session。JoBo還有靈活的下載規則(如：通過網頁的URL，大小，MIME類型等)來限制下載。

snoics-reptile

http://www.blogjava.net/snoics

snoics -reptile是用純Java開發的，用來進行網站鏡像抓取的工具，可以使用配制文件中提供的URL入口，把這個網站所有的能用瀏覽器通過GET的方式獲取到的資源全部抓取到本地，包括網頁和各種類型的文件，如：圖片、flash、mp3、zip、rar、exe等文件。可以將整個網站完整地下傳至硬盤內，並能保持原有的網站結構精確不變。只需要把抓取下來的網站放到web服務器(如：Apache)中，就可以實現完整的網站鏡像。

Web-Harvest

http://web-harvest.sourceforge.net

Web-Harvest 是一個Java開源Web數據抽取工具。它能夠收集指定的Web頁面並從這些頁面中提取有用的數據。Web-Harvest主要是運用了像XSLT, XQuery,正則表達式等這些技術來實現對text/xml的操作。

Spiderpy

http://pyspider.sourceforge.net/

spiderpy是一個基於Python編碼的一個開源web爬蟲工具，允許用戶收集文件和搜索網站，並有一個可配置的界面。

The Spider Web Network Xoops Mod Team

http://www.tswn.com/

pider Web Network Xoops Mod是一個Xoops下的模塊，完全由PHP語言實現。

HiSpider

https://code.google.com/p/hispider/

Hispider is a fast and high performance spider with high speed

嚴格說只能是一個spider系統的框架, 沒有細化需求, 目前只是能提取URL, URL排重, 異步DNS解析, 隊列化任務, 支持N機分布式下載, 支持網站定向下載(需要配置hispiderd.ini whitelist).

特徵和用法:

基於unix/linux系統的開發

異步DNS解析

URL排重

支持HTTP 壓縮編碼傳輸 gzip/deflate

字符集判斷自動轉換成UTF-8編碼

文檔壓縮存儲

支持多下載節點分…

xterm program terminal emulator bash 終端機

http://invisible-island.net/xterm/

老牌

The xterm program is a terminal emulator for the X Window System. It provides DEC VT102 and Tektronix 4014

說是最早針對dec t102開發的直接終端機，並沒有視窗考慮 compatible terminals for programs that can't use the window system directly.

This version implements ISO/ANSI colors using the "new" color model (i.e., background color erase). It also implements

後來他實做了更多，標準色彩模式跟更多相容機種most of the control sequences for VT220, as well as selected features from other DEC terminals such as VT320, VT420 and VT520.

後來x11問世後，他也融入x11世界了，現在應該是每個版本都有了

（Initial release 1984; 31 years ago）

非常久的東西

https://en.wikipedia.org/wiki/Xterm

/*他並不是開放原始碼的產品*/

https://en.wikipedia.org/wiki/Terminal_emulator
terminal 終端機 emulator 模擬器，算是叫終端機模擬器吧，就是 linux , mac (linux,bsd都是client/server架構的主體)上的 bash terminal (bash環境的終端機)
https://en.wikipedia.org/wiki/PuTTY這樣算起來PuTTY才是真正的終端機，
https://en.wikipedia.org/wiki/Comparison_of_terminal_emulators

Mac OS X

Terminal - default OS X terminal 系統預設
iTerm2 - open-source terminal specifically for OS X https://www.iterm2.com網路搜尋最多
xterm - default terminal when the X Window System started
MacWise
SecureCRT
SyncTERM - includes serial line terminal
Terminator
ZOC就是下面那個
ZTerm - serial line terminal

一個功能相當完整的專案，不過要付費
http://www.emtec.com/zoc/features.html
http://www.emtec.com/zoc/index.html

ZOC • SSH/Telnet Client and Terminal Emulator for Mac OS X and Windows

isdn and other methods of communication.

With its modern user interface, this terminal has many ways of making your life easier. In its own way, ZOC is the Swiss Army Knife of terminal emulators: versatile, robust, proven.

Key Benefits:

Tabbed sessions with thumbnails 標籤有小圖檢視
Address book with folders and color coded hosts 提供位址簿紀錄
Customizable to meet your preferences and needs客製化設定
Scripting language with over 200 commands 多描述語言跟指令
Compatible with Windows 10 and OS X El Capitan 支援最新版作業系統
Administrator friendly (deployment, configuration)深度管理與設定
Now $79.99 with attractive bulk discounts兩千多

More Features:

Extensive logging, full keyboard remapping, scroll back長的歷程紀錄與過程記錄輸入
User defined buttons, automatic actions, macro recorder巨集記錄
Emulations: xterm, VT220, TN3270, TN5250, Wyse, QNX, ...
Communication: SSH, Telnet, Rlogin, Modem, Serial Cable, ...數據機跟rs232都有
File Transfer: SCP, Zmodem, Xmodem, Ymodem, Kermit, ...多多協定支援

Find out about ZOC's features in more detail...

Start your free 30 days evaluation today and download
ZOC Terminal V7.07.1 for Windows or Mac OS X.

If you want to check the version history or if you are looking for older ZOC versions, visit the ZOC section in our download area.

超簡單電路，超簡單的無線充電電路 Wireless electricity transmission circuit

超簡單電路，超簡單的無線充電電路
http://www.instructables.com/id/Wireless-electricity-transmission-circuit/
google Wireless electricity transmission circuit
google Wireless power transmission circuit
google image Wireless electricity transmission circuit
youtube https://www.youtube.com/results?client=safari&rls=en&q=Wireless%20electricity%20transmission%20circuit&oe=UTF-8&gfe_rd=cr&um=1&ie=UTF-8&gl=TW&sa=N&tab=w1

你需要
npn電晶體2n3904或是BC 337, BC547，還有 1k 歐姆電阻，led 3Ｖ的，跟一些漆包線，還有一些電線

其他
http://rimstar.org/science_electronics_projects/wireless_transmission_of_electricity_power.htm

更多

AD9851 DDS Signal Generator Function signal generator 信號產生器

AD9851 DDS Signal Generator Function signal generator 信號產生器
AD9851 DDS Signal Generator Module Circuit

WARNING - it has come to light that there are versions of these modules with 3v3 oscillators. Click link for one builders mods DDS 3v3 mods. (Click Browser "back" button to return to this page)http://www.vk5tm.com/homebrew/dds/dds.phpDDS Signal Generator

A DDS based Signal Generator that runs from 1Hz to 60MHz in 1Hz steps -

The AD9850 Module uses a 125MHz oscillator module while the AD9851 module uses a 30MHz oscillator. For all intents and purposes, they look identical unless you have a magnifying glass in hand.

https://www.minikits.com.au/eme167.htm - EME167 AD9851 DDS Kits
DDS Circuit CPLD Function Generator

http://search.proquest.com/openview/5d6afdc8d21e833c43a856755c292ff6/1.pdf?pq-origsite=gscholar&cbl=2029177
- Design and Implementation of Digital Signal Generator Based on LPC2132 - Design and Implementation of Digital Signal Generator Based on LPC2132
DDS Circuit CPLD Function Generator digital dynamics simulator

AD9851 DDS Signal Generator Function signal generator

http://www.seeedstudio.com/depot/
chinese dds generator http://www.seeedstudio.com/depot/Mini-DDS-Function-Generator-p-915.html

Mini DDS Function Generator

SKU: 109990019

USD

$69.50

簡單數位訊號產生器，可以產生模擬類比訊號，電視同步訊號，隨機訊號，USB通訊波型，函數訊號，可以設定寬度，電壓框限，可以有同步化輸出

This is a low cost yet versatile function generator capable of producing many different waveforms. As an easy-to-use tool operation of FG085 is very simple and straightforward. It is an ideal test/experiment tool for electronics hobbyists and students.

Specification

Frequency range: 0 - 200KHz (Sine)

Frequency resolution: 1Hz

Period resolution: 1ms

Amplitude range: 0 - 10V peak-to-peak

Offset range: -5V - +5V

Memory depth: 256 bytes

Sample rate: 2.5Msps

Output impedance: 50 ohm

Power supply voltage: DC 15V

Current consumption: < 150mA (without loading)

Dimension: 155 X 55 X 30 mm

Net weight: 100 gram

Features implemented as of current firmware

Generating continuous Sine, Square, Triangle, Ramp (up and down), and Staircase (up and down) signals

Generating servo test/control signals with user defined pulse width, amplitude, and cycle [ NEW ]

Setting of frequency (or period), amplitude, and offset is done with digits - quick and straightforward

Frequency (period), amplitude, and offset can be incrementally adjusted up and down with rotary encoder

Settings are memorized after power down.

Can be used as an adjustable DC voltage source by setting amplitude to 0

Features to be implemented (hardware support already in place)

Generating arbitrary signals

Generating special test signals NTSC/PAL video synchronous signal, and more

Generating sweeping signal with continuous phase

USB connection for waveform download and control

Programmable frequency, amplitude, and offset

Synchronous output

Burst output at trig

https://www.google.com.tw/search?client=safari&rls=en&q=cpld+DDS+Signal+Generator+++Circuit&oq=cpld+DDS+Signal+Generator+++Circuit&gs_l=serp.3...15123.15123.0.15675.1.1.0.0.0.0.152.152.0j1.1.0....0...1c.1.64.serp..1.0.0.6nAHVnwBX9A
按鈕按鍵邏輯電路限制電阻 button circuit logic Current Limiting Resistor
按鈕按鍵邏輯電路限制電阻電晶體 button circuit logic Current Limiting Resistor Transistors
陣列 circuit logic Button Electronic Matrix
開放原始碼電路硬體列表https://en.wikipedia.org/wiki/List_of_open-source_hardware_projects

訂閱：文章 (Atom)

tubbysong

2015年12月10日星期四

Kendo UI At Any Screen Size 讓你的網頁可以在所有螢幕大小

Five broad multi-thing development strategies:

原始碼搜尋 javascript source code web developer

Heritrix 網路爬蟲網站分析結構分析語法及標籤分析 crawling

xterm program terminal emulator bash 終端機

Mac OS X

ZOC is a professional SSH/telnet client and terminal emulator. With its impressive list of emulations and features, it is a snap to access hosts and mainframes via secure shell, telnet, serial cable, modem/isdn and other methods of communication.

超簡單電路，超簡單的無線充電電路 Wireless electricity transmission circuit

AD9851 DDS Signal Generator Function signal generator 信號產生器

標籤

熱門文章

2015年12月10日 星期四

Kendo UI At Any Screen Size 讓你的網頁可以在所有螢幕大小

Five broad multi-thing development strategies:

原始碼 搜尋 javascript source code web developer

Heritrix 網路 爬蟲 網站分析 結構分析 語法及標籤分析 crawling

xterm program terminal emulator bash 終端機

Mac OS X

ZOC is a professional SSH/telnet client and terminal emulator. With its impressive list of emulations and features, it is a snap to access hosts and mainframes via secure shell, telnet, serial cable, modem/isdn and other methods of communication.

超簡單電路，超簡單的無線充電 電路 Wireless electricity transmission circuit

AD9851 DDS Signal Generator Function signal generator 信號產生器

2015年12月10日星期四

原始碼搜尋 javascript source code web developer

Heritrix 網路爬蟲網站分析結構分析語法及標籤分析 crawling

超簡單電路，超簡單的無線充電電路 Wireless electricity transmission circuit