home *** CD-ROM | disk | FTP | other *** search
/ Meeting Pearls 3 / Meeting_Pearls_III.iso / Pearls / tcp / Networking / TCP / WWW / GetURL / GetURL-1.03.readme < prev    next >
Text File  |  1995-01-31  |  4KB  |  128 lines
  1. Short:    Fetch Web source trees, save to file.
  2. Uploader: James Burton (burton@cs.latrobe.edu.au)
  3. Author:   James Burton (burton@cs.latrobe.edu.au)
  4. Type:     comm/tcp
  5.  
  6. TITLE          
  7.  
  8.     GetURL.rexx
  9.     
  10. VERSION
  11.  
  12.     1.03
  13.     
  14. AUTHOR
  15.  
  16.     James Burton
  17.     
  18.     c/o 
  19.     Department of Computer Science & Computer Engineering
  20.     Latrobe University
  21.     Bundoora, Victoria, 3083
  22.     Australia
  23.  
  24.     EMail:  burton@cs.latrobe.edu.au
  25.     Web:    http://www.cs.latrobe.edu.au/~burton/
  26.     
  27.     Also a few other people helped out, please read the documentation
  28.     file.
  29.     
  30. DESCRIPTION
  31.  
  32.     -- Script to download HTML systems across the network --
  33.  
  34.     GetURL.rexx is an ARexx script which will download World-Wide Web pages.
  35.     With a simple command line it will download a specific page, and with
  36.     more complex command lines it will be able to download specific sets of
  37.     documents.
  38.     
  39.     The intention was to create a tool that allowed local caching of important
  40.     web pages and a flexible way of specifying what pages are important. The
  41.     script has no GUI as of yet but may have at some stage in the future.
  42.     
  43.     If you have ever tried to download and save to disc a 200 page document
  44.     using Mosaic, then you know what this script is for. Mosaic will only
  45.     let you load a page, then load it to disc, then load another page etc.
  46.     This is a very frustrating process. GetURL automates this process and
  47.     will run in batch mode without user intervention.
  48.     
  49.     The major features of GetURL.rexx are as follows:
  50.     
  51.     * doesn't require AMosaic, so you can be browsing something else
  52.         with AMosaic whilst this is running
  53.         
  54.     * save pages to your hard disc so that they can be read offline and
  55.         you can also give them to friends on a floppy disc. Who knows, 
  56.         you may even be able to sell discs containing web pages :-)
  57.  
  58.     * flexible set of command line switches that allow you to restrict the 
  59.         type of pages that it downloads
  60.     
  61.     * ability to specify files for the lists of URLs that it keeps so
  62.         that any search for pages can be stopped and restarted at a later
  63.         date. i.e. you could run GetURL for 2 hours a day whilst you are
  64.         online and gradually download everything in the entire universe
  65.         and it won't repeat itself.
  66.         
  67.     * includes the ability to download itself when there are new versions.
  68.     
  69.     * will use a proxy if you have access to one, in order to both speed up
  70.         access to pages and also to reduce network load.
  71.         
  72.     * will download binary files (*.gif, *.lha) as easily as text and html
  73.         files.
  74.         
  75. NEW FEATURES
  76.  
  77.     * AmigaDOS pattern matching to specify or restict URLs to download
  78.     
  79.     * Update facility
  80.     
  81.     * a few bugs fixed
  82.     
  83.     * documentation
  84.  
  85. SPECIAL REQUIREMENTS
  86.  
  87.     * Until somebody writes a TCP: device for the AS225 TCP/IP protocol
  88.         stack unfortunately this script will require AmiTCP.
  89.  
  90.     * requires the TCP: device be mounted
  91.     
  92.     * either restraint, or an extremely large hard disc - your choice :-)
  93.     
  94.     - This script is no use at all unless you have AmiTCP set up and running.
  95.     If you don't know what this means then please ask me (burton@cs.latrobe.edu.au).
  96.     
  97. HOST NAME
  98. DIRECTORY
  99.  
  100.     This script is available via
  101.     
  102.     Anonymous FTP to AmiNet
  103.         wuarchive.wustl.edu (128.252.135.4)
  104.         /pub/aminet/comm/tcp/GetURL-1.03.lha
  105.         
  106.         and all of it's mirrors. Please check the closest mirror FIRST.
  107.         
  108.     HTTP from my university account
  109.         http://www.cs.latrobe.edu.au/~burton/Public/GetURL.rexx
  110.         (this URL will always point to the newest version)
  111.         
  112. FILE NAMES
  113.  
  114.     GetURL-1.03.lha              41770 Bytes
  115.     GetURL-1.03.readme           3874 Bytes
  116.     
  117. PRICE
  118.     
  119.     Absolutely free to humans
  120.     
  121. DISTRIBUTABILITY
  122.     
  123.     Public domain. But so that a hundred different versions of this don't 
  124.     appear, please send corrections, new features, bug fixes etc. to me
  125.     and I will coordinate.
  126.                           
  127. End of File
  128.