This commit was manufactured by cvs2svn to create tag
[python/dscho.git] / Misc / NEWS
blobeafe10ea1f1d9971296adb206d00365d7daad66e
1 What's New in Python 2.2 final?
2 Release date: 21-Dec-2001
3 ===============================
5 Type/class unification and new-style classes
7 Core and builtins
9 Extension modules
11 Library
13 Tools/Demos
15 Build
17 C API
19 New platforms
21 Tests
23 Windows
25 Mac
28 What's New in Python 2.2c1?
29 Release date: 14-Dec-2001
30 ===========================
32 Type/class unification and new-style classes
34 - Guido's tutorial introduction to the new type/class features has
35   been extensively updated.  See
37       http://www.python.org/2.2/descrintro.html
39   That remains the primary documentation in this area.
41 - Fixed a leak: instance variables declared with __slots__ were never
42   deleted!
44 - The "delete attribute" method of descriptor objects is called
45   __delete__, not __del__.  In previous releases, it was mistakenly
46   called __del__, which created an unfortunate overloading condition
47   with finalizers.  (The "get attribute" and "set attribute" methods
48   are still called __get__ and __set__, respectively.)
50 - Some subtle issues with the super built-in were fixed:
52   (a) When super itself is subclassed, its __get__ method would still
53       return an instance of the base class (i.e., of super).
55   (b) super(C, C()).__class__ would return C rather than super.  This
56       is confusing.  To fix this, I decided to change the semantics of
57       super so that it only applies to code attributes, not to data
58       attributes.  After all, overriding data attributes is not
59       supported anyway.
61   (c) The __get__ method didn't check whether the argument was an
62       instance of the type used in creation of the super instance.
64 - Previously, hash() of an instance of a subclass of a mutable type
65   (list or dictionary) would return some value, rather than raising
66   TypeError.  This has been fixed.  Also, directly calling
67   dict.__hash__ and list.__hash__ now raises the same TypeError
68   (previously, these were the same as object.__hash__).
70 - New-style objects now support deleting their __dict__.  This is for
71   all intents and purposes equivalent to assigning a brand new empty
72   dictionary, but saves space if the object is not used further.
74 Core and builtins
76 - -Qnew now works as documented in PEP 238:  when -Qnew is passed on
77   the command line, all occurrences of "/" use true division instead
78   of classic division.  See the PEP for details.  Note that "all"
79   means all instances in library and 3rd-party modules, as well as in
80   your own code.  As the PEP says, -Qnew is intended for use only in
81   educational environments with control over the libraries in use.
82   Note that test_coercion.py in the standard Python test suite fails
83   under -Qnew; this is expected, and won't be repaired until true
84   division becomes the default (in the meantime, test_coercion is
85   testing the current rules).
87 - complex() now only allows the first argument to be a string
88   argument, and raises TypeError if either the second arg is a string
89   or if the second arg is specified when the first is a string.
91 Extension modules
93 - gc.get_referents was renamed to gc.get_referrers.
95 Library
97 - Functions in the os.spawn() family now release the global interpreter
98   lock around calling the platform spawn.  They should always have done
99   this, but did not before 2.2c1.  Multithreaded programs calling
100   an os.spawn function with P_WAIT will no longer block all Python threads
101   until the spawned program completes.  It's possible that some programs
102   relies on blocking, although more likely by accident than by design.
104 - webbrowser defaults to netscape.exe on OS/2 now.
106 - Tix.ResizeHandle exposes detach_widget, hide, and show.
108 - The charset alias windows_1252 has been added.
110 - types.StringTypes is a tuple containing the defined string types;
111   usually this will be (str, unicode), but if Python was compiled
112   without Unicode support it will be just (str,).
114 - The pulldom and minidom modules were synchronized to PyXML.
116 Tools/Demos
118 - A new script called Tools/scripts/google.py was added, which fires
119   off a search on Google.
121 Build
123 - Note that release builds of Python should arrange to define the
124   preprocessor symbol NDEBUG on the command line (or equivalent).
125   In the 2.2 pre-release series we tried to define this by magic in
126   Python.h instead, but it proved to cause problems for extension
127   authors.  The Unix, Windows and Mac builds now all define NDEBUG in
128   release builds via cmdline (or equivalent) instead.  Ports to
129   other platforms should do likewise.
131 - It is no longer necessary to use --with-suffix when building on a
132   case-insensitive file system (such as Mac OS X HFS+). In the build
133   directory an extension is used, but not in the installed python.
135 C API
137 - New function PyDict_MergeFromSeq2() exposes the builtin dict
138   constructor's logic for updating a dictionary from an iterable object
139   producing key-value pairs.
141 - PyArg_ParseTupleAndKeywords() requires that the number of entries in
142   the keyword list equal the number of argument specifiers.  This
143   wasn't checked correctly, and PyArg_ParseTupleAndKeywords could even
144   dump core in some bad cases.  This has been repaired.  As a result,
145   PyArg_ParseTupleAndKeywords may raise RuntimeError in bad cases that
146   previously went unchallenged.
148 New platforms
150 Tests
152 Windows
156 - In unix-Python on Mac OS X (and darwin) sys.platform is now "darwin",
157   without any trailing digits.
159 - Changed logic for finding python home in Mac OS X framework Pythons.
160   Now sys.executable points to the executable again, in stead of to
161   the shared library. The latter is used only for locating the python
162   home.
165 What's New in Python 2.2b2?
166 Release date: 16-Nov-2001
167 ===========================
169 Type/class unification and new-style classes
171 - Multiple inheritance mixing new-style and classic classes in the
172   list of base classes is now allowed, so this works now:
174       class Classic: pass
175       class Mixed(Classic, object): pass
177   The MRO (method resolution order) for each base class is respected
178   according to its kind, but the MRO for the derived class is computed
179   using new-style MRO rules if any base clase is a new-style class.
180   This needs to be documented.
182 - The new builtin dictionary() constructor, and dictionary type, have
183   been renamed to dict.  This reflects a decade of common usage.
185 - dict() now accepts an iterable object producing 2-sequences.  For
186   example, dict(d.items()) == d for any dictionary d.  The argument,
187   and the elements of the argument, can be any iterable objects.
189 - New-style classes can now have a __del__ method, which is called
190   when the instance is deleted (just like for classic classes).
192 - Assignment to object.__dict__ is now possible, for objects that are
193   instances of new-style classes that have a __dict__ (unless the base
194   class forbids it).
196 - Methods of built-in types now properly check for keyword arguments
197   (formerly these were silently ignored).  The only built-in methods
198   that take keyword arguments are __call__, __init__ and __new__.
200 - The socket function has been converted to a type; see below.
202 Core and builtins
204 - Assignment to __debug__ raises SyntaxError at compile-time.  This
205   was promised when 2.1c1 was released as "What's New in Python 2.1c1"
206   (see below) says.
208 - Clarified the error messages for unsupported operands to an operator
209   (like 1 + '').
211 Extension modules
213 - mmap has a new keyword argument, "access", allowing a uniform way for
214   both Windows and Unix users to create read-only, write-through and
215   copy-on-write memory mappings.  This was previously possible only on
216   Unix.  A new keyword argument was required to support this in a
217   uniform way because the mmap() signuatures had diverged across
218   platforms.  Thanks to Jay T Miller for repairing this!
220 - By default, the gc.garbage list now contains only those instances in
221   unreachable cycles that have __del__ methods; in 2.1 it contained all
222   instances in unreachable cycles.  "Instances" here has been generalized
223   to include instances of both new-style and old-style classes.
225 - The socket module defines a new method for socket objects,
226   sendall().  This is like send() but may make multiple calls to
227   send() until all data has been sent.  Also, the socket function has
228   been converted to a subclassable type, like list and tuple (etc.)
229   before it; socket and SocketType are now the same thing.
231 - Various bugfixes to the curses module.  There is now a test suite
232   for the curses module (you have to run it manually).
234 - binascii.b2a_base64 no longer places an arbitrary restriction of 57
235   bytes on its input.
237 Library
239 - tkFileDialog exposes a Directory class and askdirectory
240   convenience function.
242 - Symbolic group names in regular expressions must be unique.  For
243   example, the regexp r'(?P<abc>)(?P<abc>)' is not allowed, because a
244   single name can't mean both "group 1" and "group 2" simultaneously.
245   Python 2.2 detects this error at regexp compilation time;
246   previously, the error went undetected, and results were
247   unpredictable.  Also in sre, the pattern.split(), pattern.sub(), and
248   pattern.subn() methods have been rewritten in C.  Also, an
249   experimental function/method finditer() has been added, which works
250   like findall() but returns an iterator.
252 - Tix exposes more commands through the classes DirSelectBox,
253   DirSelectDialog, ListNoteBook, Meter, CheckList, and the
254   methods tix_addbitmapdir, tix_cget, tix_configure, tix_filedialog,
255   tix_getbitmap, tix_getimage, tix_option_get, and tix_resetoptions.
257 - Traceback objects are now scanned by cyclic garbage collection, so
258   cycles created by casual use of sys.exc_info() no longer cause
259   permanent memory leaks (provided garbage collection is enabled).
261 - os.extsep -- a new variable needed by the RISCOS support.  It is the
262   separator used by extensions, and is '.' on all platforms except
263   RISCOS, where it is '/'.  There is no need to use this variable
264   unless you have a masochistic desire to port your code to RISCOS.
266 - mimetypes.py has optional support for non-standard, but commonly
267   found types.  guess_type() and guess_extension() now accept an
268   optional `strict' flag, defaulting to true, which controls whether
269   recognize non-standard types or not.  A few non-standard types we
270   know about have been added.  Also, when run as a script, there are
271   new -l and -e options.
273 - statcache is now deprecated.
275 - email.Utils.formatdate() now produces the preferred RFC 2822 style
276   dates with numeric timezones (it used to produce obsolete dates
277   hard coded to "GMT" timezone).  An optional `localtime' flag is
278   added to produce dates in the local timezone, with daylight savings
279   time properly taken into account.
281 - In pickle and cPickle, instead of masking errors in load() by
282   transforming them into SystemError, we let the original exception
283   propagate out.  Also, implement support for __safe_for_unpickling__
284   in pickle, as it already was supported in cPickle.
286 Tools/Demos
288 Build
290 - The dbm module is built using libdb1 if available.  The bsddb module
291   is built with libdb3 if available.
293 - Misc/Makefile.pre.in has been removed by BDFL pronouncement.
295 C API
297 - New function PySequence_Fast_GET_SIZE() returns the size of a non-
298   NULL result from PySequence_Fast(), more quickly than calling
299   PySequence_Size().
301 - New argument unpacking function PyArg_UnpackTuple() added.
303 - New functions PyObject_CallFunctionObjArgs() and
304   PyObject_CallMethodObjArgs() have been added to make it more
305   convenient and efficient to call functions and methods from C.
307 - PyArg_ParseTupleAndKeywords() no longer masks errors, so it's
308   possible that this will propagate errors it didn't before.
310 - New function PyObject_CheckReadBuffer(), which returns true if its
311   argument supports the single-segment readable buffer interface.
313 New platforms
315 - We've finally confirmed that this release builds on HP-UX 11.00,
316   *with* threads, and passes the test suite.
318 - Thanks to a series of patches from Michael Muller, Python may build
319   again under OS/2 Visual Age C++.
321 - Updated RISCOS port by Dietmar Schwertberger.
323 Tests
325 - Added a test script for the curses module.  It isn't run automatically;
326   regrtest.py must be run with '-u curses' to enable it.
328 Windows
332 - PythonScript has been moved to unsupported and is slated to be
333   removed completely in the next release.
335 - It should now be possible to build applets that work on both OS9 and
336   OSX.
338 - The core is now linked with CoreServices not Carbon; as a side
339   result, default 8bit encoding on OSX is now ASCII.
341 - Python should now build on OSX 10.1.1
344 What's New in Python 2.2b1?
345 Release date: 19-Oct-2001
346 ===========================
348 Type/class unification and new-style classes
350 - New-style classes are now always dynamic (except for built-in and
351   extension types).  There is no longer a performance penalty, and I
352   no longer see another reason to keep this baggage around.  One relic
353   remains: the __dict__ of a new-style class is a read-only proxy; you
354   must set the class's attribute to modify it.  As a consequence, the
355   __defined__ attribute of new-style types no longer exists, for lack
356   of need: there is once again only one __dict__ (although in the
357   future a __cache__ may be resurrected with a similar function, if I
358   can prove that it actually speeds things up).
360 - C.__doc__ now works as expected for new-style classes (in 2.2a4 it
361   always returned None, even when there was a class docstring).
363 - doctest now finds and runs docstrings attached to new-style classes,
364   class methods, static methods, and properties.
366 Core and builtins
368 - A very subtle syntactical pitfall in list comprehensions was fixed.
369   For example: [a+b for a in 'abc', for b in 'def'].  The comma in
370   this example is a mistake.  Previously, this would silently let 'a'
371   iterate over the singleton tuple ('abc',), yielding ['abcd', 'abce',
372   'abcf'] rather than the intended ['ad', 'ae', 'af', 'bd', 'be',
373   'bf', 'cd', 'ce', 'cf'].  Now, this is flagged as a syntax error.
374   Note that [a for a in <singleton>] is a convoluted way to say
375   [<singleton>] anyway, so it's not like any expressiveness is lost.
377 - getattr(obj, name, default) now only catches AttributeError, as
378   documented, rather than returning the default value for all
379   exceptions (which could mask bugs in a __getattr__ hook, for
380   example).
382 - Weak reference objects are now part of the core and offer a C API.
383   A bug which could allow a core dump when binary operations involved
384   proxy reference has been fixed.  weakref.ReferenceError is now a
385   built-in exception.
387 - unicode(obj) now behaves more like str(obj), accepting arbitrary
388   objects, and calling a __unicode__ method if it exists.
389   unicode(obj, encoding) and unicode(obj, encoding, errors) still
390   require an 8-bit string or character buffer argument.
392 - isinstance() now allows any object as the first argument and a
393   class, a type or something with a __bases__ tuple attribute for the
394   second argument.  The second argument may also be a tuple of a
395   class, type, or something with __bases__, in which case isinstance()
396   will return true if the first argument is an instance of any of the
397   things contained in the second argument tuple.  E.g.
399   isinstance(x, (A, B))
401   returns true if x is an instance of A or B.
403 Extension modules
405 - thread.start_new_thread() now returns the thread ID (previously None).
407 - binascii has now two quopri support functions, a2b_qp and b2a_qp.
409 - readline now supports setting the startup_hook and the
410   pre_event_hook, and adds the add_history() function.
412 - os and posix supports chroot(), setgroups() and unsetenv() where
413   available.  The stat(), fstat(), statvfs() and fstatvfs() functions
414   now return "pseudo-sequences" -- the various fields can now be
415   accessed as attributes (e.g. os.stat("/").st_mtime) but for
416   backwards compatibility they also behave as a fixed-length sequence.
417   Some platform-specific fields (e.g. st_rdev) are only accessible as
418   attributes.
420 - time: localtime(), gmtime() and strptime() now return a
421   pseudo-sequence similar to the os.stat() return value, with
422   attributes like tm_year etc.
424 - Decompression objects in the zlib module now accept an optional
425   second parameter to decompress() that specifies the maximum amount
426   of memory to use for the uncompressed data.
428 - optional SSL support in the socket module now exports OpenSSL
429   functions RAND_add(), RAND_egd(), and RAND_status().  These calls
430   are useful on platforms like Solaris where OpenSSL does not
431   automatically seed its PRNG.  Also, the keyfile and certfile
432   arguments to socket.ssl() are now optional.
434 - posixmodule (and by extension, the os module on POSIX platforms) now
435   exports O_LARGEFILE, O_DIRECT, O_DIRECTORY, and O_NOFOLLOW.
437 Library
439 - doctest now excludes functions and classes not defined by the module
440   being tested, thanks to Tim Hochberg.
442 - HotShot, a new profiler implemented using a C-based callback, has
443   been added.  This substantially reduces the overhead of profiling,
444   but it is still quite preliminary.  Support modules and
445   documentation will be added in upcoming releases (before 2.2 final).
447 - profile now produces correct output in situations where an exception
448   raised in Python is cleared by C code (e.g. hasattr()).  This used
449   to cause wrong output, including spurious claims of recursive
450   functions and attribution of time spent to the wrong function.
452   The code and documentation for the derived OldProfile and HotProfile
453   profiling classes was removed.  The code hasn't worked for years (if
454   you tried to use them, they raised exceptions).  OldProfile
455   intended to reproduce the behavior of the profiler Python used more
456   than 7 years ago, and isn't interesting anymore.  HotProfile intended
457   to provide a faster profiler (but producing less information), and
458   that's a worthy goal we intend to meet via a different approach (but
459   without losing information).
461 - Profile.calibrate() has a new implementation that should deliver
462   a much better system-specific calibration constant.  The constant can
463   now be specified in an instance constructor, or as a Profile class or
464   instance variable, instead of by editing profile.py's source code.
465   Calibration must still be done manually (see the docs for the profile
466   module).
468   Note that Profile.calibrate() must be overriden by subclasses.
469   Improving the accuracy required exploiting detailed knowledge of
470   profiler internals; the earlier method abstracted away the details
471   and measured a simplified model instead, but consequently computed
472   a constant too small by a factor of 2 on some modern machines.
474 - quopri's encode and decode methods take an optional header parameter,
475   which indicates whether output is intended for the header 'Q'
476   encoding.
478 - The SocketServer.ThreadingMixIn class now closes the request after
479   finish_request() returns.  (Not when it errors out though.)
481 - The nntplib module's NNTP.body() method has grown a `file' argument
482   to allow saving the message body to a file.
484 - The email package has added a class email.Parser.HeaderParser which
485   only parses headers and does not recurse into the message's body.
486   Also, the module/class MIMEAudio has been added for representing
487   audio data (contributed by Anthony Baxter).
489 - ftplib should be able to handle files > 2GB.
491 - ConfigParser.getboolean() now also interprets TRUE, FALSE, YES, NO,
492   ON, and OFF.
494 - xml.dom.minidom NodeList objects now support the length attribute
495   and item() method as required by the DOM specifications.
497 Tools/Demos
499 - Demo/dns was removed.  It no longer serves any purpose; a package
500   derived from it is now maintained by Anthony Baxter, see
501   http://PyDNS.SourceForge.net.
503 - The freeze tool has been made more robust, and two new options have
504   been added: -X and -E.
506 Build
508 - configure will use CXX in LINKCC if CXX is used to build main() and
509   the system requires to link a C++ main using the C++ compiler.
511 C API
513 - The documentation for the tp_compare slot is updated to require that
514   the return value must be -1, 0, 1; an arbitrary number <0 or >0 is
515   not correct.  This is not yet enforced but will be enforced in
516   Python 2.3; even later, we may use -2 to indicate errors and +2 for
517   "NotImplemented".  Right now, -1 should be used for an error return.
519 - PyLong_AsLongLong() now accepts int (as well as long) arguments.
520   Consequently, PyArg_ParseTuple's 'L' code also accepts int (as well
521   as long) arguments.
523 - PyThread_start_new_thread() now returns a long int giving the thread
524   ID, if one can be calculated; it returns -1 for error, 0 if no
525   thread ID is calculated (this is an incompatible change, but only
526   the thread module used this API).  This code has only really been
527   tested on Linux and Windows; other platforms please beware (and
528   report any bugs or strange behavior).
530 - PyUnicode_FromEncodedObject() no longer accepts Unicode objects as
531   input.
533 New platforms
535 Tests
537 Windows
539 - Installer:  If you install IDLE, and don't disable file-extension
540   registration, a new "Edit with IDLE" context (right-click) menu entry
541   is created for .py and .pyw files.
543 - The signal module now supports SIGBREAK on Windows, thanks to Steven
544   Scott.  Note that SIGBREAK is unique to Windows.  The default SIGBREAK
545   action remains to call Win32 ExitProcess().  This can be changed via
546   signal.signal().  For example:
548   # Make Ctrl+Break raise KeyboardInterrupt, like Python's default Ctrl+C
549   # (SIGINT) behavior.
550   import signal
551   signal.signal(signal.SIGBREAK,
552                 signal.default_int_handler)
554   try:
555       while 1:
556           pass
557   except KeyboardInterrupt:
558       # We get here on Ctrl+C or Ctrl+Break now; if we had not changed
559       # SIGBREAK, only on Ctrl+C (and Ctrl+Break would terminate the
560       # program without the possibility for any Python-level cleanup).
561       print "Clean exit"
564 What's New in Python 2.2a4?
565 Release date: 28-Sep-2001
566 ===========================
568 Type/class unification and new-style classes
570 - pydoc and inspect are now aware of new-style classes;
571   e.g. help(list) at the interactive prompt now shows proper
572   documentation for all operations on list objects.
574 - Applications using Jim Fulton's ExtensionClass module can now safely
575   be used with Python 2.2.  In particular, Zope 2.4.1 now works with
576   Python 2.2 (as well as with Python 2.1.1).  The Demo/metaclass
577   examples also work again.  It is hoped that Gtk and Boost also work
578   with 2.2a4 and beyond.  (If you can confirm this, please write
579   webmaster@python.org; if there are still problems, please open a bug
580   report on SourceForge.)
582 - property() now takes 4 keyword arguments:  fget, fset, fdel and doc.
583   These map to readonly attributes 'fget', 'fset', 'fdel', and '__doc__'
584   in the constructed property object.  fget, fset and fdel weren't
585   discoverable from Python in 2.2a3.  __doc__ is new, and allows to
586   associate a docstring with a property.
588 - Comparison overloading is now more completely implemented.  For
589   example, a str subclass instance can properly be compared to a str
590   instance, and it can properly overload comparison.  Ditto for most
591   other built-in object types.
593 - The repr() of new-style classes has changed; instead of <type
594   'M.Foo'> a new-style class is now rendered as <class 'M.Foo'>,
595   *except* for built-in types, which are still rendered as <type
596   'Foo'> (to avoid upsetting existing code that might parse or
597   otherwise rely on repr() of certain type objects).
599 - The repr() of new-style objects is now always <Foo object at XXX>;
600   previously, it was sometimes <Foo instance at XXX>.
602 - For new-style classes, what was previously called __getattr__ is now
603   called __getattribute__.  This method, if defined, is called for
604   *every* attribute access.  A new __getattr__ hook more similar to the
605   one in classic classes is defined which is called only if regular
606   attribute access raises AttributeError; to catch *all* attribute
607   access, you can use __getattribute__ (for new-style classes).  If
608   both are defined, __getattribute__ is called first, and if it raises
609   AttributeError, __getattr__ is called.
611 - The __class__ attribute of new-style objects can be assigned to.
612   The new class must have the same C-level object layout as the old
613   class.
615 - The builtin file type can be subclassed now.  In the usual pattern,
616   "file" is the name of the builtin type, and file() is a new builtin
617   constructor, with the same signature as the builtin open() function.
618   file() is now the preferred way to open a file.
620 - Previously, __new__ would only see sequential arguments passed to
621   the type in a constructor call; __init__ would see both sequential
622   and keyword arguments.  This made no sense whatsoever any more, so
623   now both __new__ and __init__ see all arguments.
625 - Previously, hash() applied to an instance of a subclass of str or
626   unicode always returned 0.  This has been repaired.
628 - Previously, an operation on an instance of a subclass of an
629   immutable type (int, long, float, complex, tuple, str, unicode),
630   where the subtype didn't override the operation (and so the
631   operation was handled by the builtin type), could return that
632   instance instead a value of the base type.  For example, if s was of
633   a str sublass type, s[:] returned s as-is.  Now it returns a str
634   with the same value as s.
636 - Provisional support for pickling new-style objects has been added.
638 Core
640 - file.writelines() now accepts any iterable object producing strings.
642 - PyUnicode_FromEncodedObject() now works very much like
643   PyObject_Str(obj) in that it tries to use __str__/tp_str
644   on the object if the object is not a string or buffer. This
645   makes unicode() behave like str() when applied to non-string/buffer
646   objects.
648 - PyFile_WriteObject now passes Unicode objects to the file's write
649   method. As a result, all file-like objects which may be the target
650   of a print statement must support Unicode objects, i.e. they must
651   at least convert them into ASCII strings.
653 - Thread scheduling on Solaris should be improved; it is no longer
654   necessary to insert a small sleep at the start of a thread in order
655   to let other runnable threads be scheduled.
657 Library
659 - StringIO.StringIO instances and cStringIO.StringIO instances support
660   read character buffer compatible objects for their .write() methods.
661   These objects are converted to strings and then handled as such
662   by the instances.
664 - The "email" package has been added.  This is basically a port of the
665   mimelib package <http://sf.net/projects/mimelib> with API changes
666   and some implementations updated to use iterators and generators.
668 - difflib.ndiff() and difflib.Differ.compare() are generators now.  This
669   restores the ability of Tools/scripts/ndiff.py to start producing output
670   before the entire comparison is complete.
672 - StringIO.StringIO instances and cStringIO.StringIO instances support
673   iteration just like file objects (i.e. their .readline() method is
674   called for each iteration until it returns an empty string).
676 - The codecs module has grown four new helper APIs to access
677   builtin codecs: getencoder(), getdecoder(), getreader(),
678   getwriter().
680 - SimpleXMLRPCServer: a new module (based upon SimpleHTMLServer)
681   simplifies writing XML RPC servers.
683 - os.path.realpath(): a new function that returns the absolute pathname
684   after interpretation of symbolic links.  On non-Unix systems, this
685   is an alias for os.path.abspath().
687 - operator.indexOf() (PySequence_Index() in the C API) now works with any
688   iterable object.
690 - smtplib now supports various authentication and security features of
691   the SMTP protocol through the new login() and starttls() methods.
693 - hmac: a new module implementing keyed hashing for message
694   authentication.
696 - mimetypes now recognizes more extensions and file types.  At the
697   same time, some mappings not sanctioned by IANA were removed.
699 - The "compiler" package has been brought up to date to the state of
700   Python 2.2 bytecode generation.  It has also been promoted from a
701   Tool to a standard library package.  (Tools/compiler still exists as
702   a sample driver.)
704 Tools
706 Build
708 - Large file support (LFS) is now automatic when the platform supports
709   it; no more manual configuration tweaks are needed.  On Linux, at
710   least, it's possible to have a system whose C library supports large
711   files but whose kernel doesn't; in this case, large file support is
712   still enabled but doesn't do you any good unless you upgrade your
713   kernel or share your Python executable with another system whose
714   kernel has large file support.
716 - The configure script now supplies plausible defaults in a
717   cross-compilation environment.  This doesn't mean that the supplied
718   values are always correct, or that cross-compilation now works
719   flawlessly -- but it's a first step (and it shuts up most of
720   autoconf's warnings about AC_TRY_RUN).
722 - The Unix build is now a bit less chatty, courtesy of the parser
723   generator.  The build is completely silent (except for errors) when
724   using "make -s", thanks to a -q option to setup.py.
726 C API
728 - The "structmember" API now supports some new flag bits to deny read
729   and/or write access to attributes in restricted execution mode.
731 New platforms
733 - Compaq's iPAQ handheld, running the "familiar" Linux distribution
734   (http://familiar.handhelds.org).
736 Tests
738 - The "classic" standard tests, which work by comparing stdout to
739   an expected-output file under Lib/test/output/, no longer stop at
740   the first mismatch.  Instead the test is run to completion, and a
741   variant of ndiff-style comparison is used to report all differences.
742   This is much easier to understand than the previous style of reporting.
744 - The unittest-based standard tests now use regrtest's test_main()
745   convention, instead of running as a side-effect of merely being
746   imported.  This allows these tests to be run in more natural and
747   flexible ways as unittests, outside the regrtest framework.
749 - regrtest.py is much better integrated with unittest and doctest now,
750   especially in regard to reporting errors.
752 Windows
754 - Large file support now also works for files > 4GB, on filesystems
755   that support it (NTFS under Windows 2000).  See "What's New in
756   Python 2.2a3" for more detail.
759 What's New in Python 2.2a3?
760 Release Date: 07-Sep-2001
761 ===========================
763 Core
765 - Conversion of long to float now raises OverflowError if the long is too
766   big to represent as a C double.
768 - The 3-argument builtin pow() no longer allows a third non-None argument
769   if either of the first two arguments is a float, or if both are of
770   integer types and the second argument is negative (in which latter case
771   the arguments are converted to float, so this is really the same
772   restriction).
774 - The builtin dir() now returns more information, and sometimes much
775   more, generally naming all attributes of an object, and all attributes
776   reachable from the object via its class, and from its class's base
777   classes, and so on from them too.  Example:  in 2.2a2, dir([]) returned
778   an empty list.  In 2.2a3,
780   >>> dir([])
781   ['__add__', '__class__', '__contains__', '__delattr__', '__delitem__',
782    '__eq__', '__ge__', '__getattr__', '__getitem__', '__getslice__',
783    '__gt__', '__hash__', '__iadd__', '__imul__', '__init__', '__le__',
784    '__len__', '__lt__', '__mul__', '__ne__', '__new__', '__repr__',
785    '__rmul__', '__setattr__', '__setitem__', '__setslice__', '__str__',
786    'append', 'count', 'extend', 'index', 'insert', 'pop', 'remove',
787    'reverse', 'sort']
789   dir(module) continues to return only the module's attributes, though.
791 - Overflowing operations on plain ints now return a long int rather
792   than raising OverflowError.  This is a partial implementation of PEP
793   237.  You can use -Wdefault::OverflowWarning to enable a warning for
794   this situation, and -Werror::OverflowWarning to revert to the old
795   OverflowError exception.
797 - A new command line option, -Q<arg>, is added to control run-time
798   warnings for the use of classic division.  (See PEP 238.)  Possible
799   values are -Qold, -Qwarn, -Qwarnall, and -Qnew.  The default is
800   -Qold, meaning the / operator has its classic meaning and no
801   warnings are issued.  Using -Qwarn issues a run-time warning about
802   all uses of classic division for int and long arguments; -Qwarnall
803   also warns about classic division for float and complex arguments
804   (for use with fixdiv.py).
805   [Note:  the remainder of this paragraph (preserved below) became
806    obsolete in 2.2c1 -- -Qnew has global effect in 2.2]
807   <obsolete>
808   Using -Qnew is questionable; it turns on new division by default, but
809   only in the __main__ module.  You can usefully combine -Qwarn or
810   -Qwarnall and -Qnew: this gives the __main__ module new division, and
811   warns about classic division everywhere else.
812   </obsolete>
814 - Many built-in types can now be subclassed.  This applies to int,
815   long, float, str, unicode, and tuple.  (The types complex, list and
816   dictionary can also be subclassed; this was introduced earlier.)
817   Note that restrictions apply when subclassing immutable built-in
818   types: you can only affect the value of the instance by overloading
819   __new__.  You can add mutable attributes, and the subclass instances
820   will have a __dict__ attribute, but you cannot change the "value"
821   (as implemented by the base class) of an immutable subclass instance
822   once it is created.
824 - The dictionary constructor now takes an optional argument, a
825   mapping-like object, and initializes the dictionary from its
826   (key, value) pairs.
828 - A new built-in type, super, has been added.  This facilitates making
829   "cooperative super calls" in a multiple inheritance setting.  For an
830   explanation, see http://www.python.org/2.2/descrintro.html#cooperation
832 - A new built-in type, property, has been added.  This enables the
833   creation of "properties".  These are attributes implemented by
834   getter and setter functions (or only one of these for read-only or
835   write-only attributes), without the need to override __getattr__.
836   See http://www.python.org/2.2/descrintro.html#property
838 - The syntax of floating-point and imaginary literals has been
839   liberalized, to allow leading zeroes.  Examples of literals now
840   legal that were SyntaxErrors before:
842       00.0    0e3   0100j   07.5   00000000000000000008.
844 - An old tokenizer bug allowed floating point literals with an incomplete
845   exponent, such as 1e and 3.1e-.  Such literals now raise SyntaxError.
847 Library
849 - telnetlib includes symbolic names for the options, and support for
850   setting an option negotiation callback.
852 - The new C standard no longer requires that math libraries set errno to
853   ERANGE on overflow.  For platform libraries that exploit this new
854   freedom, Python's overflow-checking was wholly broken.  A new overflow-
855   checking scheme attempts to repair that, but may not be reliable on all
856   platforms (C doesn't seem to provide anything both useful and portable
857   in this area anymore).
859 - Asynchronous timeout actions are available through the new class
860   threading.Timer.
862 - math.log and math.log10 now return sensible results for even huge
863   long arguments.  For example, math.log10(10 ** 10000) ~= 10000.0.
865 - A new function, imp.lock_held(), returns 1 when the import lock is
866   currently held.  See the docs for the imp module.
868 - pickle, cPickle and marshal on 32-bit platforms can now correctly read
869   dumps containing ints written on platforms where Python ints are 8 bytes.
870   When read on a box where Python ints are 4 bytes, such values are
871   converted to Python longs.
873 - In restricted execution mode (using the rexec module), unmarshalling
874   code objects is no longer allowed.  This plugs a security hole.
876 - unittest.TestResult instances no longer store references to tracebacks
877   generated by test failures. This prevents unexpected dangling references
878   to objects that should be garbage collected between tests.
880 Tools
882 - Tools/scripts/fixdiv.py has been added which can be used to fix
883   division operators as per PEP 238.
885 Build
887 - If you are an adventurous person using Mac OS X you may want to look at
888   Mac/OSX. There is a Makefile there that will build Python as a real Mac
889   application, which can be used for experimenting with Carbon or Cocoa.
890   Discussion of this on pythonmac-sig, please.
892 C API
894 - New function PyObject_Dir(obj), like Python __builtin__.dir(obj).
896 - Note that PyLong_AsDouble can fail!  This has always been true, but no
897   callers checked for it.  It's more likely to fail now, because overflow
898   errors are properly detected now.  The proper way to check:
900   double x = PyLong_AsDouble(some_long_object);
901   if (x == -1.0 && PyErr_Occurred()) {
902           /* The conversion failed. */
903   }
905 - The GC API has been changed.  Extensions that use the old API will still
906   compile but will not participate in GC.  To upgrade an extension
907   module:
909     - rename Py_TPFLAGS_GC to PyTPFLAGS_HAVE_GC
911     - use PyObject_GC_New or PyObject_GC_NewVar to allocate objects and
912       PyObject_GC_Del to deallocate them
914     - rename PyObject_GC_Init to PyObject_GC_Track and PyObject_GC_Fini
915       to PyObject_GC_UnTrack
917     - remove PyGC_HEAD_SIZE from object size calculations
919     - remove calls to PyObject_AS_GC and PyObject_FROM_GC
921 - Two new functions: PyString_FromFormat() and PyString_FromFormatV().
922   These can be used safely to construct string objects from a
923   sprintf-style format string (similar to the format string supported
924   by PyErr_Format()).
926 New platforms
928 - Stephen Hansen contributed patches sufficient to get a clean compile
929   under Borland C (Windows), but he reports problems running it and ran
930   out of time to complete the port.  Volunteers?  Expect a MemoryError
931   when importing the types module; this is probably shallow, and
932   causing later failures too.
934 Tests
936 Windows
938 - Large file support is now enabled on Win32 platforms as well as on
939   Win64.  This means that, for example, you can use f.tell() and f.seek()
940   to manipulate files larger than 2 gigabytes (provided you have enough
941   disk space, and are using a Windows filesystem that supports large
942   partitions).  Windows filesystem limits:  FAT has a 2GB (gigabyte)
943   filesize limit, and large file support makes no difference there.
944   FAT32's limit is 4GB, and files >= 2GB are easier to use from Python now.
945   NTFS has no practical limit on file size, and files of any size can be
946   used from Python now.
948 - The w9xpopen hack is now used on Windows NT and 2000 too when COMPSPEC
949   points to command.com (patch from Brian Quinlan).
952 What's New in Python 2.2a2?
953 Release Date: 22-Aug-2001
954 ===========================
956 Build
958 - Tim Peters developed a brand new Windows installer using Wise 8.1,
959   generously donated to us by Wise Solutions.
961 - configure supports a new option --enable-unicode, with the values
962   ucs2 and ucs4 (new in 2.2a1). With --disable-unicode, the Unicode
963   type and supporting code is completely removed from the interpreter.
965 - A new configure option --enable-framework builds a Mac OS X framework,
966   which "make frameworkinstall" will install. This provides a starting
967   point for more mac-like functionality, join pythonmac-sig@python.org
968   if you are interested in helping.
970 - The NeXT platform is no longer supported.
972 - The `new' module is now statically linked.
974 Tools
976 - The new Tools/scripts/cleanfuture.py can be used to automatically
977   edit out obsolete future statements from Python source code.  See
978   the module docstring for details.
980 Tests
982 - regrtest.py now knows which tests are expected to be skipped on some
983   platforms, allowing to give clearer test result output.  regrtest
984   also has optional --use/-u switch to run normally disabled tests
985   which require network access or consume significant disk resources.
987 - Several new tests in the standard test suite, with special thanks to
988   Nick Mathewson.
990 Core
992 - The floor division operator // has been added as outlined in PEP
993   238.  The / operator still provides classic division (and will until
994   Python 3.0) unless "from __future__ import division" is included, in
995   which case the / operator will provide true division.  The operator
996   module provides truediv() and floordiv() functions.  Augmented
997   assignment variants are included, as are the equivalent overloadable
998   methods and C API methods.  See the PEP for a full discussion:
999   <http://python.sf.net/peps/pep-0238.html>
1001 - Future statements are now effective in simulated interactive shells
1002   (like IDLE).  This should "just work" by magic, but read Michael
1003   Hudson's "Future statements in simulated shells" PEP 264 for full
1004   details:  <http://python.sf.net/peps/pep-0264.html>.
1006 - The type/class unification (PEP 252-253) was integrated into the
1007   trunk and is not so tentative any more (the exact specification of
1008   some features is still tentative).  A lot of work has done on fixing
1009   bugs and adding robustness and features (performance still has to
1010   come a long way).
1012 - Warnings about a mismatch in the Python API during extension import
1013   now use the Python warning framework (which makes it possible to
1014   write filters for these warnings).
1016 - A function's __dict__ (aka func_dict) will now always be a
1017   dictionary.  It used to be possible to delete it or set it to None,
1018   but now both actions raise TypeErrors.  It is still legal to set it
1019   to a dictionary object.  Getting func.__dict__ before any attributes
1020   have been assigned now returns an empty dictionary instead of None.
1022 - A new command line option, -E, was added which disables the use of
1023   all environment variables, or at least those that are specifically
1024   significant to Python.  Usually those have a name starting with
1025   "PYTHON".  This was used to fix a problem where the tests fail if
1026   the user happens to have PYTHONHOME or PYTHONPATH pointing to an
1027   older distribution.
1029 Library
1031 - New class Differ and new functions ndiff() and restore() in difflib.py.
1032   These package the algorithms used by the popular Tools/scripts/ndiff.py,
1033   for programmatic reuse.
1035 - New function xml.sax.saxutils.quoteattr():  Quote an XML attribute
1036   value using the minimal quoting required for the value; more
1037   reliable than using xml.sax.saxutils.escape() for attribute values.
1039 - Readline completion support for cmd.Cmd was added.
1041 - Calling os.tempnam() or os.tmpnam() generate RuntimeWarnings.
1043 - Added function threading.BoundedSemaphore()
1045 - Added Ka-Ping Yee's cgitb.py module.
1047 - The `new' module now exposes the CO_xxx flags.
1049 - The gc module offers the get_referents function.
1051 New platforms
1053 C API
1055 - Two new APIs PyOS_snprintf() and PyOS_vsnprintf() were added
1056   which provide a cross-platform implementations for the
1057   relatively new snprintf()/vsnprintf() C lib APIs. In contrast to
1058   the standard sprintf() and vsprintf() C lib APIs, these versions
1059   apply bounds checking on the used buffer which enhances protection
1060   against buffer overruns.
1062 - Unicode APIs now use name mangling to assure that mixing interpreters
1063   and extensions using different Unicode widths is rendered next to
1064   impossible. Trying to import an incompatible Unicode-aware extension
1065   will result in an ImportError.  Unicode extensions writers must make
1066   sure to check the Unicode width compatibility in their extensions by
1067   using at least one of the mangled Unicode APIs in the extension.
1069 - Two new flags METH_NOARGS and METH_O are available in method definition
1070   tables to simplify implementation of methods with no arguments and a
1071   single untyped argument. Calling such methods is more efficient than
1072   calling corresponding METH_VARARGS methods. METH_OLDARGS is now
1073   deprecated.
1075 Windows
1077 - "import module" now compiles module.pyw if it exists and nothing else
1078   relevant is found.
1081 What's New in Python 2.2a1?
1082 Release date: 18-Jul-2001
1083 ===========================
1085 Core
1087 - TENTATIVELY, a large amount of code implementing much of what's
1088   described in PEP 252 (Making Types Look More Like Classes) and PEP
1089   253 (Subtyping Built-in Types) was added.  This will be released
1090   with Python 2.2a1.  Documentation will be provided separately
1091   through http://www.python.org/2.2/.  The purpose of releasing this
1092   with Python 2.2a1 is to test backwards compatibility.  It is
1093   possible, though not likely, that a decision is made not to release
1094   this code as part of 2.2 final, if any serious backwards
1095   incompapatibilities are found during alpha testing that cannot be
1096   repaired.
1098 - Generators were added; this is a new way to create an iterator (see
1099   below) using what looks like a simple function containing one or
1100   more 'yield' statements.  See PEP 255.  Since this adds a new
1101   keyword to the language, this feature must be enabled by including a
1102   future statement: "from __future__ import generators" (see PEP 236).
1103   Generators will become a standard feature in a future release
1104   (probably 2.3).  Without this future statement, 'yield' remains an
1105   ordinary identifier, but a warning is issued each time it is used.
1106   (These warnings currently don't conform to the warnings framework of
1107   PEP 230; we intend to fix this in 2.2a2.)
1109 - The UTF-16 codec was modified to be more RFC compliant. It will now
1110   only remove BOM characters at the start of the string and then
1111   only if running in native mode (UTF-16-LE and -BE won't remove a
1112   leading BMO character).
1114 - Strings now have a new method .decode() to complement the already
1115   existing .encode() method. These two methods provide direct access
1116   to the corresponding decoders and encoders of the registered codecs.
1118   To enhance the usability of the .encode() method, the special
1119   casing of Unicode object return values was dropped (Unicode objects
1120   were auto-magically converted to string using the default encoding).
1122   Both methods will now return whatever the codec in charge of the
1123   requested encoding returns as object, e.g. Unicode codecs will
1124   return Unicode objects when decoding is requested ("äöü".decode("latin-1")
1125   will return u"äöü"). This enables codec writer to create codecs
1126   for various simple to use conversions.
1128   New codecs were added to demonstrate these new features (the .encode()
1129   and .decode() columns indicate the type of the returned objects):
1131   Name     | .encode() | .decode() | Description
1132   ----------------------------------------------------------------------
1133   uu       | string    | string    | UU codec (e.g. for email)
1134   base64   | string    | string    | base64 codec
1135   quopri   | string    | string    | quoted-printable codec
1136   zlib     | string    | string    | zlib compression
1137   hex      | string    | string    | 2-byte hex codec
1138   rot-13   | string    | Unicode   | ROT-13 Unicode charmap codec
1140 - Some operating systems now support the concept of a default Unicode
1141   encoding for file system operations.  Notably, Windows supports 'mbcs'
1142   as the default.  The Macintosh will also adopt this concept in the medium
1143   term, although the default encoding for that platform will be other than
1144   'mbcs'.
1146   On operating system that support non-ASCII filenames, it is common for
1147   functions that return filenames (such as os.listdir()) to return Python
1148   string objects pre-encoded using the default file system encoding for
1149   the platform.  As this encoding is likely to be different from Python's
1150   default encoding, converting this name to a Unicode object before passing
1151   it back to the Operating System would result in a Unicode error, as Python
1152   would attempt to use its default encoding (generally ASCII) rather than
1153   the default encoding for the file system.
1155   In general, this change simply removes surprises when working with
1156   Unicode and the file system, making these operations work as you expect,
1157   increasing the transparency of Unicode objects in this context.
1158   See [????] for more details, including examples.
1160 - Float (and complex) literals in source code were evaluated to full
1161   precision only when running from a .py file; the same code loaded from a
1162   .pyc (or .pyo) file could suffer numeric differences starting at about the
1163   12th significant decimal digit.  For example, on a machine with IEEE-754
1164   floating arithmetic,
1166       x = 9007199254740992.0
1167       print long(x)
1169   printed 9007199254740992 if run directly from .py, but 9007199254740000
1170   if from a compiled (.pyc or .pyo) file.  This was due to marshal using
1171   str(float) instead of repr(float) when building code objects.  marshal
1172   now uses repr(float) instead, which should reproduce floats to full
1173   machine precision (assuming the platform C float<->string I/O conversion
1174   functions are of good quality).
1176   This may cause floating-point results to change in some cases, and
1177   usually for the better, but may also cause numerically unstable
1178   algorithms to break.
1180 - The implementation of dicts suffers fewer collisions, which has speed
1181   benefits.  However, the order in which dict entries appear in dict.keys(),
1182   dict.values() and dict.items() may differ from previous releases for a
1183   given dict.  Nothing is defined about this order, so no program should
1184   rely on it.  Nevertheless, it's easy to write test cases that rely on the
1185   order by accident, typically because of printing the str() or repr() of a
1186   dict to an "expected results" file.  See Lib/test/test_support.py's new
1187   sortdict(dict) function for a simple way to display a dict in sorted
1188   order.
1190 - Many other small changes to dicts were made, resulting in faster
1191   operation along the most common code paths.
1193 - Dictionary objects now support the "in" operator: "x in dict" means
1194   the same as dict.has_key(x).
1196 - The update() method of dictionaries now accepts generic mapping
1197   objects.  Specifically the argument object must support the .keys()
1198   and __getitem__() methods.  This allows you to say, for example,
1199   {}.update(UserDict())
1201 - Iterators were added; this is a generalized way of providing values
1202   to a for loop.  See PEP 234.  There's a new built-in function iter()
1203   to return an iterator.  There's a new protocol to get the next value
1204   from an iterator using the next() method (in Python) or the
1205   tp_iternext slot (in C).  There's a new protocol to get iterators
1206   using the __iter__() method (in Python) or the tp_iter slot (in C).
1207   Iterating (i.e. a for loop) over a dictionary generates its keys.
1208   Iterating over a file generates its lines.
1210 - The following functions were generalized to work nicely with iterator
1211   arguments:
1212     map(), filter(), reduce(), zip()
1213     list(), tuple() (PySequence_Tuple() and PySequence_Fast() in C API)
1214     max(), min()
1215     join() method of strings
1216     extend() method of lists
1217     'x in y' and 'x not in y' (PySequence_Contains() in C API)
1218     operator.countOf() (PySequence_Count() in C API)
1219     right-hand side of assignment statements with multiple targets, such as
1220         x, y, z = some_iterable_object_returning_exactly_3_values
1222 - Accessing module attributes is significantly faster (for example,
1223   random.random or os.path or yourPythonModule.yourAttribute).
1225 - Comparing dictionary objects via == and != is faster, and now works even
1226   if the keys and values don't support comparisons other than ==.
1228 - Comparing dictionaries in ways other than == and != is slower:  there were
1229   insecurities in the dict comparison implementation that could cause Python
1230   to crash if the element comparison routines for the dict keys and/or
1231   values mutated the dicts.  Making the code bulletproof slowed it down.
1233 - Collisions in dicts are resolved via a new approach, which can help
1234   dramatically in bad cases.  For example, looking up every key in a dict
1235   d with d.keys() == [i << 16 for i in range(20000)] is approximately 500x
1236   faster now.  Thanks to Christian Tismer for pointing out the cause and
1237   the nature of an effective cure (last December! better late than never).
1239 - repr() is much faster for large containers (dict, list, tuple).
1242 Library
1244 - The constants ascii_letters, ascii_lowercase. and ascii_uppercase
1245   were added to the string module.  These a locale-indenpendent
1246   constants, unlike letters, lowercase, and uppercase.  These are now
1247   use in appropriate locations in the standard library.
1249 - The flags used in dlopen calls can now be configured using
1250   sys.setdlopenflags and queried using sys.getdlopenflags.
1252 - Fredrik Lundh's xmlrpclib is now a standard library module.  This
1253   provides full client-side XML-RPC support.  In addition,
1254   Demo/xmlrpc/ contains two server frameworks (one SocketServer-based,
1255   one asyncore-based).  Thanks to Eric Raymond for the documentation.
1257 - The xrange() object is simplified: it no longer supports slicing,
1258   repetition, comparisons, efficient 'in' checking, the tolist()
1259   method, or the start, stop and step attributes.  See PEP 260.
1261 - A new function fnmatch.filter to filter lists of file names was added.
1263 - calendar.py uses month and day names based on the current locale.
1265 - strop is now *really* obsolete (this was announced before with 1.6),
1266   and issues DeprecationWarning when used (except for the four items
1267   that are still imported into string.py).
1269 - Cookie.py now sorts key+value pairs by key in output strings.
1271 - pprint.isrecursive(object) didn't correctly identify recursive objects.
1272   Now it does.
1274 - pprint functions now much faster for large containers (tuple, list, dict).
1276 - New 'q' and 'Q' format codes in the struct module, corresponding to C
1277   types "long long" and "unsigned long long" (on Windows, __int64).  In
1278   native mode, these can be used only when the platform C compiler supports
1279   these types (when HAVE_LONG_LONG is #define'd by the Python config
1280   process), and then they inherit the sizes and alignments of the C types.
1281   In standard mode, 'q' and 'Q' are supported on all platforms, and are
1282   8-byte integral types.
1284 - The site module installs a new built-in function 'help' that invokes
1285   pydoc.help.  It must be invoked as 'help()'; when invoked as 'help',
1286   it displays a message reminding the user to use 'help()' or
1287   'help(object)'.
1289 Tests
1291 - New test_mutants.py runs dict comparisons where the key and value
1292   comparison operators mutute the dicts randomly during comparison.  This
1293   rapidly causes Python to crash under earlier releases (not for the faint
1294   of heart:  it can also cause Win9x to freeze or reboot!).
1296 - New test_pprint.py verfies that pprint.isrecursive() and
1297   pprint.isreadable() return sensible results.  Also verifies that simple
1298   cases produce correct output.
1300 C API
1302 - Removed the unused last_is_sticky argument from the internal
1303   _PyTuple_Resize().  If this affects you, you were cheating.
1306 ======================================================================
1309 What's New in Python 2.1 (final)?
1310 =================================
1312 We only changed a few things since the last release candidate, all in
1313 Python library code:
1315 - A bug in the locale module was fixed that affected locales which
1316   define no grouping for numeric formatting.
1318 - A few bugs in the weakref module's implementations of weak
1319   dictionaries (WeakValueDictionary and WeakKeyDictionary) were fixed,
1320   and the test suite was updated to check for these bugs.
1322 - An old bug in the os.path.walk() function (introduced in Python
1323   2.0!) was fixed: a non-existent file would cause an exception
1324   instead of being ignored.
1326 - Fixed a few bugs in the new symtable module found by Neil Norwitz's
1327   PyChecker.
1330 What's New in Python 2.1c2?
1331 ===========================
1333 A flurry of small changes, and one showstopper fixed in the nick of
1334 time made it necessary to release another release candidate.  The list
1335 here is the *complete* list of patches (except version updates):
1337 Core
1339 - Tim discovered a nasty bug in the dictionary code, caused by
1340   PyDict_Next() calling dict_resize(), and the GC code's use of
1341   PyDict_Next() violating an assumption in dict_items().  This was
1342   fixed with considerable amounts of band-aid, but the net effect is a
1343   saner and more robust implementation.
1345 - Made a bunch of symbols static that were accidentally global.
1347 Build and Ports
1349 - The setup.py script didn't check for a new enough version of zlib
1350   (1.1.3 is needed).  Now it does.
1352 - Changed "make clean" target to also remove shared libraries.
1354 - Added a more general warning about the SGI Irix optimizer to README.
1356 Library
1358 - Fix a bug in urllib.basejoin("http://host", "../file.html") which
1359   omitted the slash between host and file.html.
1361 - The mailbox module's _Mailbox class contained a completely broken
1362   and undocumented seek() method.  Ripped it out.
1364 - Fixed a bunch of typos in various library modules (urllib2, smtpd,
1365   sgmllib, netrc, chunk) found by Neil Norwitz's PyChecker.
1367 - Fixed a few last-minute bugs in unittest.
1369 Extensions
1371 - Reverted the patch to the OpenSSL code in socketmodule.c to support
1372   RAND_status() and the EGD, and the subsequent patch that tried to
1373   fix it for pre-0.9.5 versions; the problem with the patch is that on
1374   some systems it issues a warning whenever socket is imported, and
1375   that's unacceptable.
1377 Tests
1379 - Fixed the pickle tests to work with "import test.test_pickle".
1381 - Tweaked test_locale.py to actually run the test Windows.
1383 - In distutils/archive_util.py, call zipfile.ZipFile() with mode "w",
1384   not "wb" (which is not a valid mode at all).
1386 - Fix pstats browser crashes.  Import readline if it exists to make
1387   the user interface nicer.
1389 - Add "import thread" to the top of test modules that import the
1390   threading module (test_asynchat and test_threadedtempfile).  This
1391   prevents test failures caused by a broken threading module resulting
1392   from a previously caught failed import.
1394 - Changed test_asynchat.py to set the SO_REUSEADDR option; this was
1395   needed on some platforms (e.g. Solaris 8) when the tests are run
1396   twice in succession.
1398 - Skip rather than fail test_sunaudiodev if no audio device is found.
1401 What's New in Python 2.1c1?
1402 ===========================
1404 This list was significantly updated when 2.1c2 was released; the 2.1c1
1405 release didn't mention most changes that were actually part of 2.1c1:
1407 Legal
1409 - Copyright was assigned to the Python Software Foundation (PSF) and a
1410   PSF license (very similar to the CNRI license) was added.
1412 - The CNRI copyright notice was updated to include 2001.
1414 Core
1416 - After a public outcry, assignment to __debug__ is no longer illegal;
1417   instead, a warning is issued.  It will become illegal in 2.2.
1419 - Fixed a core dump with "%#x" % 0, and changed the semantics so that
1420   "%#x" now always prepends "0x", even if the value is zero.
1422 - Fixed some nits in the bytecode compiler.
1424 - Fixed core dumps when calling certain kinds of non-functions.
1426 - Fixed various core dumps caused by reference count bugs.
1428 Build and Ports
1430 - Use INSTALL_SCRIPT to install script files.
1432 - New port: SCO Unixware 7, by Billy G. Allie.
1434 - Updated RISCOS port.
1436 - Updated BeOS port and notes.
1438 - Various other porting problems resolved.
1440 Library
1442 - The TERMIOS and SOCKET modules are now truly obsolete and
1443   unnecessary.  Their symbols are incorporated in the termios and
1444   socket modules.
1446 - Fixed some 64-bit bugs in pickle, cPickle, and struct, and added
1447   better tests for pickling.
1449 - threading: make Condition.wait() robust against KeyboardInterrupt.
1451 - zipfile: add support to zipfile to support opening an archive
1452   represented by an open file rather than a file name.  Fix bug where
1453   the archive was not properly closed.  Fixed a bug in this bugfix
1454   where flush() was called for a read-only file.
1456 - imputil: added an uninstall() method to the ImportManager.
1458 - Canvas: fixed bugs in lower() and tkraise() methods.
1460 - SocketServer: API change (added overridable close_request() method)
1461   so that the TCP server can explicitly close the request.
1463 - pstats: Eric Raymond added a simple interactive statistics browser,
1464   invoked when the module is run as a script.
1466 - locale: fixed a problem in format().
1468 - webbrowser: made it work when the BROWSER environment variable has a
1469   value like "/usr/bin/netscape".  Made it auto-detect Konqueror for
1470   KDE 2.  Fixed some other nits.
1472 - unittest: changes to allow using a different exception than
1473   AssertionError, and added a few more function aliases.  Some other
1474   small changes.
1476 - urllib, urllib2: fixed redirect problems and a coupleof other nits.
1478 - asynchat: fixed a critical bug in asynchat that slipped through the
1479   2.1b2 release.  Fixed another rare bug.
1481 - Fix some unqualified except: clauses (always a bad code example).
1485 - pyexpat: new API get_version_string().
1487 - Fixed some minidom bugs.
1489 Extensions
1491 - Fixed a core dump in _weakref.  Removed the weakref.mapping()
1492   function (it adds nothing to the API).
1494 - Rationalized the use of header files in the readline module, to make
1495   it compile (albeit with some warnings) with the very recent readline
1496   4.2, without breaking for earlier versions.
1498 - Hopefully fixed a buffering problem in linuxaudiodev.
1500 - Attempted a fix to make the OpenSSL support in the socket module
1501   work again with pre-0.9.5 versions of OpenSSL.
1503 Tests
1505 - Added a test case for asynchat and asyncore.
1507 - Removed coupling between tests where one test failing could break
1508   another.
1510 Tools
1512 - Ping added an interactive help browser to pydoc, fixed some nits
1513   in the rest of the pydoc code, and added some features to his
1514   inspect module.
1516 - An updated python-mode.el version 4.1 which integrates Ken
1517   Manheimer's pdbtrack.el.  This makes debugging Python code via pdb
1518   much nicer in XEmacs and Emacs.  When stepping through your program
1519   with pdb, in either the shell window or the *Python* window, the
1520   source file and line will be tracked by an arrow.  Very cool!
1522 - IDLE: syntax warnings in interactive mode are changed into errors.
1524 - Some improvements to Tools/webchecker (ignore some more URL types,
1525   follow some more links).
1527 - Brought the Tools/compiler package up to date.
1530 What's New in Python 2.1 beta 2?
1531 ================================
1533 (Unlisted are many fixed bugs, more documentation, etc.)
1535 Core language, builtins, and interpreter
1537 - The nested scopes work (enabled by "from __future__ import
1538   nested_scopes") is completed; in particular, the future now extends
1539   into code executed through exec, eval() and execfile(), and into the
1540   interactive interpreter.
1542 - When calling a base class method (e.g. BaseClass.__init__(self)),
1543   this is now allowed even if self is not strictly spoken a class
1544   instance (e.g. when using metaclasses or the Don Beaudry hook).
1546 - Slice objects are now comparable but not hashable; this prevents
1547   dict[:] from being accepted but meaningless.
1549 - Complex division is now calculated using less braindead algorithms.
1550   This doesn't change semantics except it's more likely to give useful
1551   results in extreme cases.  Complex repr() now uses full precision
1552   like float repr().
1554 - sgmllib.py now calls handle_decl() for simple <!...> declarations.
1556 - It is illegal to assign to the name __debug__, which is set when the
1557   interpreter starts.  It is effectively a compile-time constant.
1559 - A warning will be issued if a global statement for a variable
1560   follows a use or assignment of that variable.
1562 Standard library
1564 - unittest.py, a unit testing framework by Steve Purcell (PyUNIT,
1565   inspired by JUnit), is now part of the standard library.  You now
1566   have a choice of two testing frameworks: unittest requires you to
1567   write testcases as separate code, doctest gathers them from
1568   docstrings.  Both approaches have their advantages and
1569   disadvantages.
1571 - A new module Tix was added, which wraps the Tix extension library
1572   for Tk.  With that module, it is not necessary to statically link
1573   Tix with _tkinter, since Tix will be loaded with Tcl's "package
1574   require" command.  See Demo/tix/.
1576 - tzparse.py is now obsolete.
1578 - In gzip.py, the seek() and tell() methods are removed -- they were
1579   non-functional anyway, and it's better if callers can test for their
1580   existence with hasattr().
1582 Python/C API
1584 - PyDict_Next(): it is now safe to call PyDict_SetItem() with a key
1585   that's already in the dictionary during a PyDict_Next() iteration.
1586   This used to fail occasionally when a dictionary resize operation
1587   could be triggered that would rehash all the keys.  All other
1588   modifications to the dictionary are still off-limits during a
1589   PyDict_Next() iteration!
1591 - New extended APIs related to passing compiler variables around.
1593 - New abstract APIs PyObject_IsInstance(), PyObject_IsSubclass()
1594   implement isinstance() and issubclass().
1596 - Py_BuildValue() now has a "D" conversion to create a Python complex
1597   number from a Py_complex C value.
1599 - Extensions types which support weak references must now set the
1600   field allocated for the weak reference machinery to NULL themselves;
1601   this is done to avoid the cost of checking each object for having a
1602   weakly referencable type in PyObject_INIT(), since most types are
1603   not weakly referencable.
1605 - PyFrame_FastToLocals() and PyFrame_LocalsToFast() copy bindings for
1606   free variables and cell variables to and from the frame's f_locals.
1608 - Variants of several functions defined in pythonrun.h have been added
1609   to support the nested_scopes future statement.  The variants all end
1610   in Flags and take an extra argument, a PyCompilerFlags *; examples:
1611   PyRun_AnyFileExFlags(), PyRun_InteractiveLoopFlags().  These
1612   variants may be removed in Python 2.2, when nested scopes are
1613   mandatory.
1615 Distutils
1617 - the sdist command now writes a PKG-INFO file, as described in PEP 241,
1618   into the release tree.
1620 - several enhancements to the bdist_wininst command from Thomas Heller
1621   (an uninstaller, more customization of the installer's display)
1623 - from Jack Jansen: added Mac-specific code to generate a dialog for
1624   users to specify the command-line (because providing a command-line with
1625   MacPython is awkward).  Jack also made various fixes for the Mac
1626   and the Metrowerks compiler.
1628 - added 'platforms' and 'keywords' to the set of metadata that can be
1629   specified for a distribution.
1631 - applied patches from Jason Tishler to make the compiler class work with
1632   Cygwin.
1635 What's New in Python 2.1 beta 1?
1636 ================================
1638 Core language, builtins, and interpreter
1640 - Following an outcry from the community about the amount of code
1641   broken by the nested scopes feature introduced in 2.1a2, we decided
1642   to make this feature optional, and to wait until Python 2.2 (or at
1643   least 6 months) to make it standard.  The option can be enabled on a
1644   per-module basis by adding "from __future__ import nested_scopes" at
1645   the beginning of a module (before any other statements, but after
1646   comments and an optional docstring).  See PEP 236 (Back to the
1647   __future__) for a description of the __future__ statement.  PEP 227
1648   (Statically Nested Scopes) has been updated to reflect this change,
1649   and to clarify the semantics in a number of endcases.
1651 - The nested scopes code, when enabled, has been hardened, and most
1652   bugs and memory leaks in it have been fixed.
1654 - Compile-time warnings are now generated for a number of conditions
1655   that will break or change in meaning when nested scopes are enabled:
1657   - Using "from...import *" or "exec" without in-clause in a function
1658     scope that also defines a lambda or nested function with one or
1659     more free (non-local) variables.  The presence of the import* or
1660     bare exec makes it impossible for the compiler to determine the
1661     exact set of local variables in the outer scope, which makes it
1662     impossible to determine the bindings for free variables in the
1663     inner scope.  To avoid the warning about import *, change it into
1664     an import of explicitly name object, or move the import* statement
1665     to the global scope; to avoid the warning about bare exec, use
1666     exec...in... (a good idea anyway -- there's a possibility that
1667     bare exec will be deprecated in the future).
1669   - Use of a global variable in a nested scope with the same name as a
1670     local variable in a surrounding scope.  This will change in
1671     meaning with nested scopes: the name in the inner scope will
1672     reference the variable in the outer scope rather than the global
1673     of the same name.  To avoid the warning, either rename the outer
1674     variable, or use a global statement in the inner function.
1676 - An optional object allocator has been included.  This allocator is
1677   optimized for Python objects and should be faster and use less memory
1678   than the standard system allocator.  It is not enabled by default
1679   because of possible thread safety problems.  The allocator is only
1680   protected by the Python interpreter lock and it is possible that some
1681   extension modules require a thread safe allocator.  The object
1682   allocator can be enabled by providing the "--with-pymalloc" option to
1683   configure.
1685 Standard library
1687 - pyexpat now detects the expat version if expat.h defines it. A
1688   number of additional handlers are provided, which are only available
1689   since expat 1.95. In addition, the methods SetParamEntityParsing and
1690   GetInputContext of Parser objects are available with 1.95.x
1691   only. Parser objects now provide the ordered_attributes and
1692   specified_attributes attributes. A new module expat.model was added,
1693   which offers a number of additional constants if 1.95.x is used.
1695 - xml.dom offers the new functions registerDOMImplementation and
1696   getDOMImplementation.
1698 - xml.dom.minidom offers a toprettyxml method. A number of DOM
1699   conformance issues have been resolved. In particular, Element now
1700   has an hasAttributes method, and the handling of namespaces was
1701   improved.
1703 - Ka-Ping Yee contributed two new modules: inspect.py, a module for
1704   getting information about live Python code, and pydoc.py, a module
1705   for interactively converting docstrings to HTML or text.
1706   Tools/scripts/pydoc, which is now automatically installed into
1707   <prefix>/bin, uses pydoc.py to display documentation; try running
1708   "pydoc -h" for instructions.  "pydoc -g" pops up a small GUI that
1709   lets you browse the module docstrings using a web browser.
1711 - New library module difflib.py, primarily packaging the SequenceMatcher
1712   class at the heart of the popular ndiff.py file-comparison tool.
1714 - doctest.py (a framework for verifying Python code examples in docstrings)
1715   is now part of the std library.
1717 Windows changes
1719 - A new entry in the Start menu, "Module Docs", runs "pydoc -g" -- a
1720   small GUI that lets you browse the module docstrings using your
1721   default web browser.
1723 - Import is now case-sensitive.  PEP 235 (Import on Case-Insensitive
1724   Platforms) is implemented.  See
1726       http://python.sourceforge.net/peps/pep-0235.html
1728   for full details, especially the "Current Lower-Left Semantics" section.
1729   The new Windows import rules are simpler than before:
1731   A. If the PYTHONCASEOK environment variable exists, same as
1732      before:  silently accept the first case-insensitive match of any
1733      kind; raise ImportError if none found.
1735   B. Else search sys.path for the first case-sensitive match; raise
1736      ImportError if none found.
1738   The same rules have been implented on other platforms with case-
1739   insensitive but case-preserving filesystems too (including Cygwin, and
1740   several flavors of Macintosh operating systems).
1742 - winsound module:  Under Win9x, winsound.Beep() now attempts to simulate
1743   what it's supposed to do (and does do under NT and 2000) via direct
1744   port manipulation.  It's unknown whether this will work on all systems,
1745   but it does work on my Win98SE systems now and was known to be useless on
1746   all Win9x systems before.
1748 - Build:  Subproject _test (effectively) renamed to _testcapi.
1750 New platforms
1752 - 2.1 should compile and run out of the box under MacOS X, even using HFS+.
1753   Thanks to Steven Majewski!
1755 - 2.1 should compile and run out of the box on Cygwin.  Thanks to Jason
1756   Tishler!
1758 - 2.1 contains new files and patches for RISCOS, thanks to Dietmar
1759   Schwertberger!  See RISCOS/README for more information -- it seems
1760   that because of the bizarre filename conventions on RISCOS, no port
1761   to that platform is easy.
1764 What's New in Python 2.1 alpha 2?
1765 =================================
1767 Core language, builtins, and interpreter
1769 - Scopes nest.  If a name is used in a function or class, but is not
1770   local, the definition in the nearest enclosing function scope will
1771   be used.  One consequence of this change is that lambda statements
1772   could reference variables in the namespaces where the lambda is
1773   defined.  In some unusual cases, this change will break code.
1775   In all previous version of Python, names were resolved in exactly
1776   three namespaces -- the local namespace, the global namespace, and
1777   the builtin namespace.  According to this old definition, if a
1778   function A is defined within a function B, the names bound in B are
1779   not visible in A.  The new rules make names bound in B visible in A,
1780   unless A contains a name binding that hides the binding in B.
1782   Section 4.1 of the reference manual describes the new scoping rules
1783   in detail.  The test script in Lib/test/test_scope.py demonstrates
1784   some of the effects of the change.
1786   The new rules will cause existing code to break if it defines nested
1787   functions where an outer function has local variables with the same
1788   name as globals or builtins used by the inner function.  Example:
1790     def munge(str):
1791         def helper(x):
1792             return str(x)
1793         if type(str) != type(''):
1794             str = helper(str)
1795         return str.strip()
1797   Under the old rules, the name str in helper() is bound to the
1798   builtin function str().  Under the new rules, it will be bound to
1799   the argument named str and an error will occur when helper() is
1800   called.
1802 - The compiler will report a SyntaxError if "from ... import *" occurs
1803   in a function or class scope.  The language reference has documented
1804   that this case is illegal, but the compiler never checked for it.
1805   The recent introduction of nested scope makes the meaning of this
1806   form of name binding ambiguous.  In a future release, the compiler
1807   may allow this form when there is no possibility of ambiguity.
1809 - repr(string) is easier to read, now using hex escapes instead of octal,
1810   and using \t, \n and \r instead of \011, \012 and \015 (respectively):
1812   >>> "\texample \r\n" + chr(0) + chr(255)
1813   '\texample \r\n\x00\xff'         # in 2.1
1814   '\011example \015\012\000\377'   # in 2.0
1816 - Functions are now compared and hashed by identity, not by value, since
1817   the func_code attribute is writable.
1819 - Weak references (PEP 205) have been added.  This involves a few
1820   changes in the core, an extension module (_weakref), and a Python
1821   module (weakref).  The weakref module is the public interface.  It
1822   includes support for "explicit" weak references, proxy objects, and
1823   mappings with weakly held values.
1825 - A 'continue' statement can now appear in a try block within the body
1826   of a loop.  It is still not possible to use continue in a finally
1827   clause.
1829 Standard library
1831 - mailbox.py now has a new class, PortableUnixMailbox which is
1832   identical to UnixMailbox but uses a more portable scheme for
1833   determining From_ separators.  Also, the constructors for all the
1834   classes in this module have a new optional `factory' argument, which
1835   is a callable used when new message classes must be instantiated by
1836   the next() method.
1838 - random.py is now self-contained, and offers all the functionality of
1839   the now-deprecated whrandom.py.  See the docs for details.  random.py
1840   also supports new functions getstate() and setstate(), for saving
1841   and restoring the internal state of the generator; and jumpahead(n),
1842   for quickly forcing the internal state to be the same as if n calls to
1843   random() had been made.  The latter is particularly useful for multi-
1844   threaded programs, creating one instance of the random.Random() class for
1845   each thread, then using .jumpahead() to force each instance to use a
1846   non-overlapping segment of the full period.
1848 - random.py's seed() function is new.  For bit-for-bit compatibility with
1849   prior releases, use the whseed function instead.  The new seed function
1850   addresses two problems:  (1) The old function couldn't produce more than
1851   about 2**24 distinct internal states; the new one about 2**45 (the best
1852   that can be done in the Wichmann-Hill generator).  (2) The old function
1853   sometimes produced identical internal states when passed distinct
1854   integers, and there was no simple way to predict when that would happen;
1855   the new one guarantees to produce distinct internal states for all
1856   arguments in [0, 27814431486576L).
1858 - The socket module now supports raw packets on Linux.  The socket
1859   family is AF_PACKET.
1861 - test_capi.py is a start at running tests of the Python C API.  The tests
1862   are implemented by the new Modules/_testmodule.c.
1864 - A new extension module, _symtable, provides provisional access to the
1865   internal symbol table used by the Python compiler.  A higher-level
1866   interface will be added on top of _symtable in a future release.
1868 - Removed the obsolete soundex module.
1870 - xml.dom.minidom now uses the standard DOM exceptions. Node supports
1871   the isSameNode method; NamedNodeMap the get method.
1873 - xml.sax.expatreader supports the lexical handler property; it
1874   generates comment, startCDATA, and endCDATA events.
1876 Windows changes
1878 - Build procedure:  the zlib project is built in a different way that
1879   ensures the zlib header files used can no longer get out of synch with
1880   the zlib binary used.  See PCbuild\readme.txt for details.  Your old
1881   zlib-related directories can be deleted; you'll need to download fresh
1882   source for zlib and unpack it into a new directory.
1884 - Build:  New subproject _test for the benefit of test_capi.py (see above).
1886 - Build:  New subproject _symtable, for new DLL _symtable.pyd (a nascent
1887   interface to some Python compiler internals).
1889 - Build:  Subproject ucnhash is gone, since the code was folded into the
1890   unicodedata subproject.
1892 What's New in Python 2.1 alpha 1?
1893 =================================
1895 Core language, builtins, and interpreter
1897 - There is a new Unicode companion to the PyObject_Str() API
1898   called PyObject_Unicode(). It behaves in the same way as the
1899   former, but assures that the returned value is an Unicode object
1900   (applying the usual coercion if necessary).
1902 - The comparison operators support "rich comparison overloading" (PEP
1903   207).  C extension types can provide a rich comparison function in
1904   the new tp_richcompare slot in the type object.  The cmp() function
1905   and the C function PyObject_Compare() first try the new rich
1906   comparison operators before trying the old 3-way comparison.  There
1907   is also a new C API PyObject_RichCompare() (which also falls back on
1908   the old 3-way comparison, but does not constrain the outcome of the
1909   rich comparison to a Boolean result).
1911   The rich comparison function takes two objects (at least one of
1912   which is guaranteed to have the type that provided the function) and
1913   an integer indicating the opcode, which can be Py_LT, Py_LE, Py_EQ,
1914   Py_NE, Py_GT, Py_GE (for <, <=, ==, !=, >, >=), and returns a Python
1915   object, which may be NotImplemented (in which case the tp_compare
1916   slot function is used as a fallback, if defined).
1918   Classes can overload individual comparison operators by defining one
1919   or more of the methods__lt__, __le__, __eq__, __ne__, __gt__,
1920   __ge__.  There are no explicit "reflected argument" versions of
1921   these; instead, __lt__ and __gt__ are each other's reflection,
1922   likewise for__le__ and __ge__; __eq__ and __ne__ are their own
1923   reflection (similar at the C level).  No other implications are
1924   made; in particular, Python does not assume that == is the Boolean
1925   inverse of !=, or that < is the Boolean inverse of >=.  This makes
1926   it possible to define types with partial orderings.
1928   Classes or types that want to implement (in)equality tests but not
1929   the ordering operators (i.e. unordered types) should implement ==
1930   and !=, and raise an error for the ordering operators.
1932   It is possible to define types whose rich comparison results are not
1933   Boolean; e.g. a matrix type might want to return a matrix of bits
1934   for A < B, giving elementwise comparisons.  Such types should ensure
1935   that any interpretation of their value in a Boolean context raises
1936   an exception, e.g. by defining __nonzero__ (or the tp_nonzero slot
1937   at the C level) to always raise an exception.
1939 - Complex numbers use rich comparisons to define == and != but raise
1940   an exception for <, <=, > and >=.  Unfortunately, this also means
1941   that cmp() of two complex numbers raises an exception when the two
1942   numbers differ.  Since it is not mathematically meaningful to compare
1943   complex numbers except for equality, I hope that this doesn't break
1944   too much code.
1946 - The outcome of comparing non-numeric objects of different types is
1947   not defined by the language, other than that it's arbitrary but
1948   consistent (see the Reference Manual).  An implementation detail changed
1949   in 2.1a1 such that None now compares less than any other object.  Code
1950   relying on this new behavior (like code that relied on the previous
1951   behavior) does so at its own risk.
1953 - Functions and methods now support getting and setting arbitrarily
1954   named attributes (PEP 232).  Functions have a new __dict__
1955   (a.k.a. func_dict) which hold the function attributes.  Methods get
1956   and set attributes on their underlying im_func.  It is a TypeError
1957   to set an attribute on a bound method.
1959 - The xrange() object implementation has been improved so that
1960   xrange(sys.maxint) can be used on 64-bit platforms.  There's still a
1961   limitation that in this case len(xrange(sys.maxint)) can't be
1962   calculated, but the common idiom "for i in xrange(sys.maxint)" will
1963   work fine as long as the index i doesn't actually reach 2**31.
1964   (Python uses regular ints for sequence and string indices; fixing
1965   that is much more work.)
1967 - Two changes to from...import:
1969   1) "from M import X" now works even if (after loading module M)
1970      sys.modules['M'] is not a real module; it's basically a getattr()
1971      operation with AttributeError exceptions changed into ImportError.
1973   2) "from M import *" now looks for M.__all__ to decide which names to
1974      import; if M.__all__ doesn't exist, it uses M.__dict__.keys() but
1975      filters out names starting with '_' as before.  Whether or not
1976      __all__ exists, there's no restriction on the type of M.
1978 - File objects have a new method, xreadlines().  This is the fastest
1979   way to iterate over all lines in a file:
1981   for line in file.xreadlines():
1982       ...do something to line...
1984   See the xreadlines module (mentioned below) for how to do this for
1985   other file-like objects.
1987 - Even if you don't use file.xreadlines(), you may expect a speedup on
1988   line-by-line input.  The file.readline() method has been optimized
1989   quite a bit in platform-specific ways:  on systems (like Linux) that
1990   support flockfile(), getc_unlocked(), and funlockfile(), those are
1991   used by default.  On systems (like Windows) without getc_unlocked(),
1992   a complicated (but still thread-safe) method using fgets() is used by
1993   default.
1995   You can force use of the fgets() method by #define'ing
1996   USE_FGETS_IN_GETLINE at build time (it may be faster than
1997   getc_unlocked()).
1999   You can force fgets() not to be used by #define'ing
2000   DONT_USE_FGETS_IN_GETLINE (this is the first thing to try if std test
2001   test_bufio.py fails -- and let us know if it does!).
2003 - In addition, the fileinput module, while still slower than the other
2004   methods on most platforms, has been sped up too, by using
2005   file.readlines(sizehint).
2007 - Support for run-time warnings has been added, including a new
2008   command line option (-W) to specify the disposition of warnings.
2009   See the description of the warnings module below.
2011 - Extensive changes have been made to the coercion code.  This mostly
2012   affects extension modules (which can now implement mixed-type
2013   numerical operators without having to use coercion), but
2014   occasionally, in boundary cases the coercion semantics have changed
2015   subtly.  Since this was a terrible gray area of the language, this
2016   is considered an improvement.  Also note that __rcmp__ is no longer
2017   supported -- instead of calling __rcmp__, __cmp__ is called with
2018   reflected arguments.
2020 - In connection with the coercion changes, a new built-in singleton
2021   object, NotImplemented is defined.  This can be returned for
2022   operations that wish to indicate they are not implemented for a
2023   particular combination of arguments.  From C, this is
2024   Py_NotImplemented.
2026 - The interpreter accepts now bytecode files on the command line even
2027   if they do not have a .pyc or .pyo extension. On Linux, after executing
2029 import imp,sys,string
2030 magic = string.join(["\\x%.2x" % ord(c) for c in imp.get_magic()],"")
2031 reg = ':pyc:M::%s::%s:' % (magic, sys.executable)
2032 open("/proc/sys/fs/binfmt_misc/register","wb").write(reg)
2034   any byte code file can be used as an executable (i.e. as an argument
2035   to execve(2)).
2037 - %[xXo] formats of negative Python longs now produce a sign
2038   character.  In 1.6 and earlier, they never produced a sign,
2039   and raised an error if the value of the long was too large
2040   to fit in a Python int.  In 2.0, they produced a sign if and
2041   only if too large to fit in an int.  This was inconsistent
2042   across platforms (because the size of an int varies across
2043   platforms), and inconsistent with hex() and oct().  Example:
2045   >>> "%x" % -0x42L
2046   '-42'      # in 2.1
2047   'ffffffbe' # in 2.0 and before, on 32-bit machines
2048   >>> hex(-0x42L)
2049   '-0x42L'   # in all versions of Python
2051   The behavior of %d formats for negative Python longs remains
2052   the same as in 2.0 (although in 1.6 and before, they raised
2053   an error if the long didn't fit in a Python int).
2055   %u formats don't make sense for Python longs, but are allowed
2056   and treated the same as %d in 2.1.  In 2.0, a negative long
2057   formatted via %u produced a sign if and only if too large to
2058   fit in an int.  In 1.6 and earlier, a negative long formatted
2059   via %u raised an error if it was too big to fit in an int.
2061 - Dictionary objects have an odd new method, popitem().  This removes
2062   an arbitrary item from the dictionary and returns it (in the form of
2063   a (key, value) pair).  This can be useful for algorithms that use a
2064   dictionary as a bag of "to do" items and repeatedly need to pick one
2065   item.  Such algorithms normally end up running in quadratic time;
2066   using popitem() they can usually be made to run in linear time.
2068 Standard library
2070 - In the time module, the time argument to the functions strftime,
2071   localtime, gmtime, asctime and ctime is now optional, defaulting to
2072   the current time (in the local timezone).
2074 - The ftplib module now defaults to passive mode, which is deemed a
2075   more useful default given that clients are often inside firewalls
2076   these days.  Note that this could break if ftplib is used to connect
2077   to a *server* that is inside a firewall, from outside; this is
2078   expected to be a very rare situation.  To fix that, you can call
2079   ftp.set_pasv(0).
2081 - The module site now treats .pth files not only for path configuration,
2082   but also supports extensions to the initialization code: Lines starting
2083   with import are executed.
2085 - There's a new module, warnings, which implements a mechanism for
2086   issuing and filtering warnings.  There are some new built-in
2087   exceptions that serve as warning categories, and a new command line
2088   option, -W, to control warnings (e.g. -Wi ignores all warnings, -We
2089   turns warnings into errors).  warnings.warn(message[, category])
2090   issues a warning message; this can also be called from C as
2091   PyErr_Warn(category, message).
2093 - A new module xreadlines was added.  This exports a single factory
2094   function, xreadlines().  The intention is that this code is the
2095   absolutely fastest way to iterate over all lines in an open
2096   file(-like) object:
2098   import xreadlines
2099   for line in xreadlines.xreadlines(file):
2100       ...do something to line...
2102   This is equivalent to the previous the speed record holder using
2103   file.readlines(sizehint).  Note that if file is a real file object
2104   (as opposed to a file-like object), this is equivalent:
2106   for line in file.xreadlines():
2107       ...do something to line...
2109 - The bisect module has new functions bisect_left, insort_left,
2110   bisect_right and insort_right.  The old names bisect and insort
2111   are now aliases for bisect_right and insort_right.  XXX_right
2112   and XXX_left methods differ in what happens when the new element
2113   compares equal to one or more elements already in the list:  the
2114   XXX_left methods insert to the left, the XXX_right methods to the
2115   right.  Code that doesn't care where equal elements end up should
2116   continue to use the old, short names ("bisect" and "insort").
2118 - The new curses.panel module wraps the panel library that forms part
2119   of SYSV curses and ncurses.  Contributed by Thomas Gellekum.
2121 - The SocketServer module now sets the allow_reuse_address flag by
2122   default in the TCPServer class.
2124 - A new function, sys._getframe(), returns the stack frame pointer of
2125   the caller.  This is intended only as a building block for
2126   higher-level mechanisms such as string interpolation.
2128 - The pyexpat module supports a number of new handlers, which are
2129   available only in expat 1.2. If invocation of a callback fails, it
2130   will report an additional frame in the traceback. Parser objects
2131   participate now in garbage collection. If expat reports an unknown
2132   encoding, pyexpat will try to use a Python codec; that works only
2133   for single-byte charsets. The parser type objects is exposed as
2134   XMLParserObject.
2136 - xml.dom now offers standard definitions for symbolic node type and
2137   exception code constants, and a hierarchy of DOM exceptions. minidom
2138   was adjusted to use them.
2140 - The conformance of xml.dom.minidom to the DOM specification was
2141   improved. It detects a number of additional error cases; the
2142   previous/next relationship works even when the tree is modified;
2143   Node supports the normalize() method; NamedNodeMap, DocumentType and
2144   DOMImplementation classes were added; Element supports the
2145   hasAttribute and hasAttributeNS methods; and Text supports the splitText
2146   method.
2148 Build issues
2150 - For Unix (and Unix-compatible) builds, configuration and building of
2151   extension modules is now greatly automated.  Rather than having to
2152   edit the Modules/Setup file to indicate which modules should be
2153   built and where their include files and libraries are, a
2154   distutils-based setup.py script now takes care of building most
2155   extension modules.  All extension modules built this way are built
2156   as shared libraries.  Only a few modules that must be linked
2157   statically are still listed in the Setup file; you won't need to
2158   edit their configuration.
2160 - Python should now build out of the box on Cygwin.  If it doesn't,
2161   mail to Jason Tishler (jlt63 at users.sourceforge.net).
2163 - Python now always uses its own (renamed) implementation of getopt()
2164   -- there's too much variation among C library getopt()
2165   implementations.
2167 - C++ compilers are better supported; the CXX macro is always set to a
2168   C++ compiler if one is found.
2170 Windows changes
2172 - select module:  By default under Windows, a select() call
2173   can specify no more than 64 sockets.  Python now boosts
2174   this Microsoft default to 512.  If you need even more than
2175   that, see the MS docs (you'll need to #define FD_SETSIZE
2176   and recompile Python from source).
2178 - Support for Windows 3.1, DOS and OS/2 is gone.  The Lib/dos-8x3
2179   subdirectory is no more!
2182 What's New in Python 2.0?
2183 =========================
2185 Below is a list of all relevant changes since release 1.6.  Older
2186 changes are in the file HISTORY.  If you are making the jump directly
2187 from Python 1.5.2 to 2.0, make sure to read the section for 1.6 in the
2188 HISTORY file!  Many important changes listed there.
2190 Alternatively, a good overview of the changes between 1.5.2 and 2.0 is
2191 the document "What's New in Python 2.0" by Kuchling and Moshe Zadka:
2192 http://starship.python.net/crew/amk/python/writing/new-python/.
2194 --Guido van Rossum (home page: http://www.pythonlabs.com/~guido/)
2196 ======================================================================
2198 What's new in 2.0 (since release candidate 1)?
2199 ==============================================
2201 Standard library
2203 - The copy_reg module was modified to clarify its intended use: to
2204   register pickle support for extension types, not for classes.
2205   pickle() will raise a TypeError if it is passed a class.
2207 - Fixed a bug in gettext's "normalize and expand" code that prevented
2208   it from finding an existing .mo file.
2210 - Restored support for HTTP/0.9 servers in httplib.
2212 - The math module was changed to stop raising OverflowError in case of
2213   underflow, and return 0 instead in underflow cases.  Whether Python
2214   used to raise OverflowError in case of underflow was platform-
2215   dependent (it did when the platform math library set errno to ERANGE
2216   on underflow).
2218 - Fixed a bug in StringIO that occurred when the file position was not
2219   at the end of the file and write() was called with enough data to
2220   extend past the end of the file.
2222 - Fixed a bug that caused Tkinter error messages to get lost on
2223   Windows.  The bug was fixed by replacing direct use of
2224   interp->result with Tcl_GetStringResult(interp).
2226 - Fixed bug in urllib2 that caused it to fail when it received an HTTP
2227   redirect response.
2229 - Several changes were made to distutils: Some debugging code was
2230   removed from util.  Fixed the installer used when an external zip
2231   program (like WinZip) is not found; the source code for this
2232   installer is in Misc/distutils.  check_lib() was modified to behave
2233   more like AC_CHECK_LIB by add other_libraries() as a parameter.  The
2234   test for whether installed modules are on sys.path was changed to
2235   use both normcase() and normpath().
2237 - Several minor bugs were fixed in the xml package (the minidom,
2238   pulldom, expatreader, and saxutils modules).
2240 - The regression test driver (regrtest.py) behavior when invoked with
2241   -l changed: It now reports a count of objects that are recognized as
2242   garbage but not freed by the garbage collector.
2244 - The regression test for the math module was changed to test
2245   exceptional behavior when the test is run in verbose mode.  Python
2246   cannot yet guarantee consistent exception behavior across platforms,
2247   so the exception part of test_math is run only in verbose mode, and
2248   may fail on your platform.
2250 Internals
2252 - PyOS_CheckStack() has been disabled on Win64, where it caused
2253   test_sre to fail.
2255 Build issues
2257 - Changed compiler flags, so that gcc is always invoked with -Wall and
2258   -Wstrict-prototypes.  Users compiling Python with GCC should see
2259   exactly one warning, except if they have passed configure the
2260   --with-pydebug flag.  The expected warning is for getopt() in
2261   Modules/main.c.  This warning will be fixed for Python 2.1.
2263 - Fixed configure to add -threads argument during linking on OSF1.
2265 Tools and other miscellany
2267 - The compiler in Tools/compiler was updated to support the new
2268   language features introduced in 2.0: extended print statement, list
2269   comprehensions, and augmented assignments.  The new compiler should
2270   also be backwards compatible with Python 1.5.2; the compiler will
2271   always generate code for the version of the interpreter it runs
2272   under.
2274 What's new in 2.0 release candidate 1 (since beta 2)?
2275 =====================================================
2277 What is release candidate 1?
2279 We believe that release candidate 1 will fix all known bugs that we
2280 intend to fix for the 2.0 final release.  This release should be a bit
2281 more stable than the previous betas.  We would like to see even more
2282 widespread testing before the final release, so we are producing this
2283 release candidate.  The final release will be exactly the same unless
2284 any show-stopping (or brown bag) bugs are found by testers of the
2285 release candidate.
2287 All the changes since the last beta release are bug fixes or changes
2288 to support building Python for specific platforms.
2290 Core language, builtins, and interpreter
2292 - A bug that caused crashes when __coerce__ was used with augmented
2293   assignment, e.g. +=, was fixed.
2295 - Raise ZeroDivisionError when raising zero to a negative number,
2296   e.g. 0.0 ** -2.0.  Note that math.pow is unrelated to the builtin
2297   power operator and the result of math.pow(0.0, -2.0) will vary by
2298   platform.  On Linux, it raises a ValueError.
2300 - A bug in Unicode string interpolation was fixed that occasionally
2301   caused errors with formats including "%%".  For example, the
2302   following expression "%% %s" % u"abc" no longer raises a TypeError.
2304 - Compilation of deeply nested expressions raises MemoryError instead
2305   of SyntaxError, e.g. eval("[" * 50 + "]" * 50).
2307 - In 2.0b2 on Windows, the interpreter wrote .pyc files in text mode,
2308   rendering them useless.  They are now written in binary mode again.
2310 Standard library
2312 - Keyword arguments are now accepted for most pattern and match object
2313   methods in SRE, the standard regular expression engine.
2315 - In SRE, fixed error with negative lookahead and lookbehind that
2316   manifested itself as a runtime error in patterns like "(?<!abc)(def)".
2318 - Several bugs in the Unicode handling and error handling in _tkinter
2319   were fixed.
2321 - Fix memory management errors in Merge() and Tkapp_Call() routines.
2323 - Several changes were made to cStringIO to make it compatible with
2324   the file-like object interface and with StringIO.  If operations are
2325   performed on a closed object, an exception is raised.  The truncate
2326   method now accepts a position argument and readline accepts a size
2327   argument.
2329 - There were many changes made to the linuxaudiodev module and its
2330   test suite; as a result, a short, unexpected audio sample should now
2331   play when the regression test is run.
2333   Note that this module is named poorly, because it should work
2334   correctly on any platform that supports the Open Sound System
2335   (OSS).
2337   The module now raises exceptions when errors occur instead of
2338   crashing.  It also defines the AFMT_A_LAW format (logarithmic A-law
2339   audio) and defines a getptr() method that calls the
2340   SNDCTL_DSP_GETxPTR ioctl defined in the OSS Programmer's Guide.
2342 - The library_version attribute, introduced in an earlier beta, was
2343   removed because it can not be supported with early versions of the C
2344   readline library, which provides no way to determine the version at
2345   compile-time.
2347 - The binascii module is now enabled on Win64.
2349 - tokenize.py no longer suffers "recursion depth" errors when parsing
2350   programs with very long string literals.
2352 Internals
2354 - Fixed several buffer overflow vulnerabilities in calculate_path(),
2355   which is called when the interpreter starts up to determine where
2356   the standard library is installed.  These vulnerabilities affect all
2357   previous versions of Python and can be exploited by setting very
2358   long values for PYTHONHOME or argv[0].  The risk is greatest for a
2359   setuid Python script, although use of the wrapper in
2360   Misc/setuid-prog.c will eliminate the vulnerability.
2362 - Fixed garbage collection bugs in instance creation that were
2363   triggered when errors occurred during initialization.  The solution,
2364   applied in cPickle and in PyInstance_New(), is to call
2365   PyObject_GC_Init() after the initialization of the object's
2366   container attributes is complete.
2368 - pyexpat adds definitions of PyModule_AddStringConstant and
2369   PyModule_AddObject if the Python version is less than 2.0, which
2370   provides compatibility with PyXML on Python 1.5.2.
2372 - If the platform has a bogus definition for LONG_BIT (the number of
2373   bits in a long), an error will be reported at compile time.
2375 - Fix bugs in _PyTuple_Resize() which caused hard-to-interpret garbage
2376   collection crashes and possibly other, unreported crashes.
2378 - Fixed a memory leak in _PyUnicode_Fini().
2380 Build issues
2382 - configure now accepts a --with-suffix option that specifies the
2383   executable suffix.  This is useful for builds on Cygwin and Mac OS
2384   X, for example.
2386 - The mmap.PAGESIZE constant is now initialized using sysconf when
2387   possible, which eliminates a dependency on -lucb for Reliant UNIX.
2389 - The md5 file should now compile on all platforms.
2391 - The select module now compiles on platforms that do not define
2392   POLLRDNORM and related constants.
2394 - Darwin (Mac OS X):  Initial support for static builds on this
2395   platform.
2397 - BeOS: A number of changes were made to the build and installation
2398   process.  ar-fake now operates on a directory of object files.
2399   dl_export.h is gone, and its macros now appear on the mwcc command
2400   line during build on PPC BeOS.
2402 - Platform directory in lib/python2.0 is "plat-beos5" (or
2403   "plat-beos4", if building on BeOS 4.5), rather than "plat-beos".
2405 - Cygwin: Support for shared libraries, Tkinter, and sockets.
2407 - SunOS 4.1.4_JL: Fix test for directory existence in configure.
2409 Tools and other miscellany
2411 - Removed debugging prints from main used with freeze.
2413 - IDLE auto-indent no longer crashes when it encounters Unicode
2414   characters.
2416 What's new in 2.0 beta 2 (since beta 1)?
2417 ========================================
2419 Core language, builtins, and interpreter
2421 - Add support for unbounded ints in %d,i,u,x,X,o formats; for example
2422   "%d" % 2L**64 == "18446744073709551616".
2424 - Add -h and -V command line options to print the usage message and
2425   Python version number and exit immediately.
2427 - eval() and exec accept Unicode objects as code parameters.
2429 - getattr() and setattr() now also accept Unicode objects for the
2430   attribute name, which are converted to strings using the default
2431   encoding before lookup.
2433 - Multiplication on string and Unicode now does proper bounds
2434   checking; e.g. 'a' * 65536 * 65536 will raise ValueError, "repeated
2435   string is too long."
2437 - Better error message when continue is found in try statement in a
2438   loop.
2441 Standard library and extensions
2443 - socket module: the OpenSSL code now adds support for RAND_status()
2444   and EGD (Entropy Gathering Device).
2446 - array: reverse() method of array now works.  buffer_info() now does
2447   argument checking; it still takes no arguments.
2449 - asyncore/asynchat: Included most recent version from Sam Rushing.
2451 - cgi: Accept '&' or ';' as separator characters when parsing form data.
2453 - CGIHTTPServer: Now works on Windows (and perhaps even Mac).
2455 - ConfigParser: When reading the file, options spelled in upper case
2456   letters are now correctly converted to lowercase.
2458 - copy: Copy Unicode objects atomically.
2460 - cPickle: Fail gracefully when copy_reg can't be imported.
2462 - cStringIO: Implemented readlines() method.
2464 - dbm: Add get() and setdefault() methods to dbm object.  Add constant
2465   `library' to module that names the library used.  Added doc strings
2466   and method names to error messages.  Uses configure to determine
2467   which ndbm.h file to include; Berkeley DB's nbdm and GDBM's ndbm is
2468   now available options.
2470 - distutils: Update to version 0.9.3.
2472 - dl: Add several dl.RTLD_ constants.
2474 - fpectl: Now supported on FreeBSD.
2476 - gc: Add DEBUG_SAVEALL option.  When enabled all garbage objects
2477   found by the collector will be saved in gc.garbage.  This is useful
2478   for debugging a program that creates reference cycles.
2480 - httplib: Three changes: Restore support for set_debuglevel feature
2481   of HTTP class.  Do not close socket on zero-length response.  Do not
2482   crash when server sends invalid content-length header.
2484 - mailbox: Mailbox class conforms better to qmail specifications.
2486 - marshal: When reading a short, sign-extend on platforms where shorts
2487   are bigger than 16 bits.  When reading a long, repair the unportable
2488   sign extension that was being done for 64-bit machines.  (It assumed
2489   that signed right shift sign-extends.)
2491 - operator: Add contains(), invert(), __invert__() as aliases for
2492   __contains__(), inv(), and __inv__() respectively.
2494 - os: Add support for popen2() and popen3() on all platforms where
2495   fork() exists.  (popen4() is still in the works.)
2497 - os: (Windows only:) Add startfile() function that acts like double-
2498   clicking on a file in Explorer (or passing the file name to the
2499   DOS "start" command).
2501 - os.path: (Windows, DOS:) Treat trailing colon correctly in
2502   os.path.join.  os.path.join("a:", "b") yields "a:b".
2504 - pickle: Now raises ValueError when an invalid pickle that contains
2505   a non-string repr where a string repr was expected.  This behavior
2506   matches cPickle.
2508 - posixfile: Remove broken __del__() method.
2510 - py_compile: support CR+LF line terminators in source file.
2512 - readline: Does not immediately exit when ^C is hit when readline and
2513   threads are configured.  Adds definition of rl_library_version.  (The
2514   latter addition requires GNU readline 2.2 or later.)
2516 - rfc822: Domain literals returned by AddrlistClass method
2517   getdomainliteral() are now properly wrapped in brackets.
2519 - site: sys.setdefaultencoding() should only be called in case the
2520   standard default encoding ("ascii") is changed. This saves quite a
2521   few cycles during startup since the first call to
2522   setdefaultencoding() will initialize the codec registry and the
2523   encodings package.
2525 - socket: Support for size hint in readlines() method of object returned
2526   by makefile().
2528 - sre: Added experimental expand() method to match objects.  Does not
2529   use buffer interface on Unicode strings.  Does not hang if group id
2530   is followed by whitespace.
2532 - StringIO: Size hint in readlines() is now supported as documented.
2534 - struct: Check ranges for bytes and shorts.
2536 - urllib: Improved handling of win32 proxy settings. Fixed quote and
2537   quote_plus functions so that the always encode a comma.
2539 - Tkinter: Image objects are now guaranteed to have unique ids.  Set
2540   event.delta to zero if Tk version doesn't support mousewheel.
2541   Removed some debugging prints.
2543 - UserList: now implements __contains__().
2545 - webbrowser: On Windows, use os.startfile() instead of os.popen(),
2546   which works around a bug in Norton AntiVirus 2000 that leads directly
2547   to a Blue Screen freeze.
2549 - xml: New version detection code allows PyXML to override standard
2550   XML package if PyXML version is greater than 0.6.1.
2552 - xml.dom: DOM level 1 support for basic XML.  Includes xml.dom.minidom
2553   (conventional DOM), and xml.dom.pulldom, which allows building the DOM
2554   tree only for nodes which are sufficiently interesting to a specific
2555   application.  Does not provide the HTML-specific extensions.  Still
2556   undocumented.
2558 - xml.sax: SAX 2 support for Python, including all the handler
2559   interfaces needed to process XML 1.0 compliant XML.  Some
2560   documentation is already available.
2562 - pyexpat: Renamed to xml.parsers.expat since this is part of the new,
2563   packagized XML support.
2566 C API
2568 - Add three new convenience functions for module initialization --
2569   PyModule_AddObject(), PyModule_AddIntConstant(), and
2570   PyModule_AddStringConstant().
2572 - Cleaned up definition of NULL in C source code; all definitions were
2573   removed and add #error to Python.h if NULL isn't defined after
2574   #include of stdio.h.
2576 - Py_PROTO() macros that were removed in 2.0b1 have been restored for
2577   backwards compatibility (at the source level) with old extensions.
2579 - A wrapper API was added for signal() and sigaction().  Instead of
2580   either function, always use PyOS_getsig() to get a signal handler
2581   and PyOS_setsig() to set one.  A new convenience typedef
2582   PyOS_sighandler_t is defined for the type of signal handlers.
2584 - Add PyString_AsStringAndSize() function that provides access to the
2585   internal data buffer and size of a string object -- or the default
2586   encoded version of a Unicode object.
2588 - PyString_Size() and PyString_AsString() accept Unicode objects.
2590 - The standard header <limits.h> is now included by Python.h (if it
2591   exists).  INT_MAX and LONG_MAX will always be defined, even if
2592   <limits.h> is not available.
2594 - PyFloat_FromString takes a second argument, pend, that was
2595   effectively useless.  It is now officially useless but preserved for
2596   backwards compatibility.  If the pend argument is not NULL, *pend is
2597   set to NULL.
2599 - PyObject_GetAttr() and PyObject_SetAttr() now accept Unicode objects
2600   for the attribute name.  See note on getattr() above.
2602 - A few bug fixes to argument processing for Unicode.
2603   PyArg_ParseTupleAndKeywords() now accepts "es#" and "es".
2604   PyArg_Parse() special cases "s#" for Unicode objects; it returns a
2605   pointer to the default encoded string data instead of to the raw
2606   UTF-16.
2608 - Py_BuildValue accepts B format (for bgen-generated code).
2611 Internals
2613 - On Unix, fix code for finding Python installation directory so that
2614   it works when argv[0] is a relative path.
2616 - Added a true unicode_internal_encode() function and fixed the
2617   unicode_internal_decode function() to support Unicode objects directly
2618   rather than by generating a copy of the object.
2620 - Several of the internal Unicode tables are much smaller now, and
2621   the source code should be much friendlier to weaker compilers.
2623 - In the garbage collector: Fixed bug in collection of tuples.  Fixed
2624   bug that caused some instances to be removed from the container set
2625   while they were still live.  Fixed parsing in gc.set_debug() for
2626   platforms where sizeof(long) > sizeof(int).
2628 - Fixed refcount problem in instance deallocation that only occurred
2629   when Py_REF_DEBUG was defined and Py_TRACE_REFS was not.
2631 - On Windows, getpythonregpath is now protected against null data in
2632   registry key.
2634 - On Unix, create .pyc/.pyo files with O_EXCL flag to avoid a race
2635   condition.
2638 Build and platform-specific issues
2640 - Better support of GNU Pth via --with-pth configure option.
2642 - Python/C API now properly exposed to dynamically-loaded extension
2643   modules on Reliant UNIX.
2645 - Changes for the benefit of SunOS 4.1.4 (really!).  mmapmodule.c:
2646   Don't define MS_SYNC to be zero when it is undefined.  Added missing
2647   prototypes in posixmodule.c.
2649 - Improved support for HP-UX build.  Threads should now be correctly
2650   configured (on HP-UX 10.20 and 11.00).
2652 - Fix largefile support on older NetBSD systems and OpenBSD by adding
2653   define for TELL64.
2656 Tools and other miscellany
2658 - ftpmirror: Call to main() is wrapped in if __name__ == "__main__".
2660 - freeze: The modulefinder now works with 2.0 opcodes.
2662 - IDLE:
2663   Move hackery of sys.argv until after the Tk instance has been
2664   created, which allows the application-specific Tkinter
2665   initialization to be executed if present; also pass an explicit
2666   className parameter to the Tk() constructor.
2669 What's new in 2.0 beta 1?
2670 =========================
2672 Source Incompatibilities
2673 ------------------------
2675 None.  Note that 1.6 introduced several incompatibilities with 1.5.2,
2676 such as single-argument append(), connect() and bind(), and changes to
2677 str(long) and repr(float).
2680 Binary Incompatibilities
2681 ------------------------
2683 - Third party extensions built for Python 1.5.x or 1.6 cannot be used
2684 with Python 2.0; these extensions will have to be rebuilt for Python
2685 2.0.
2687 - On Windows, attempting to import a third party extension built for
2688 Python 1.5.x or 1.6 results in an immediate crash; there's not much we
2689 can do about this.  Check your PYTHONPATH environment variable!
2691 - Python bytecode files (*.pyc and *.pyo) are not compatible between
2692 releases.
2695 Overview of Changes Since 1.6
2696 -----------------------------
2698 There are many new modules (including brand new XML support through
2699 the xml package, and i18n support through the gettext module); a list
2700 of all new modules is included below.  Lots of bugs have been fixed.
2702 The process for making major new changes to the language has changed
2703 since Python 1.6.  Enhancements must now be documented by a Python
2704 Enhancement Proposal (PEP) before they can be accepted.
2706 There are several important syntax enhancements, described in more
2707 detail below:
2709   - Augmented assignment, e.g. x += 1
2711   - List comprehensions, e.g. [x**2 for x in range(10)]
2713   - Extended import statement, e.g. import Module as Name
2715   - Extended print statement, e.g. print >> file, "Hello"
2717 Other important changes:
2719   - Optional collection of cyclical garbage
2721 Python Enhancement Proposal (PEP)
2722 ---------------------------------
2724 PEP stands for Python Enhancement Proposal.  A PEP is a design
2725 document providing information to the Python community, or describing
2726 a new feature for Python.  The PEP should provide a concise technical
2727 specification of the feature and a rationale for the feature.
2729 We intend PEPs to be the primary mechanisms for proposing new
2730 features, for collecting community input on an issue, and for
2731 documenting the design decisions that have gone into Python.  The PEP
2732 author is responsible for building consensus within the community and
2733 documenting dissenting opinions.
2735 The PEPs are available at http://python.sourceforge.net/peps/.
2737 Augmented Assignment
2738 --------------------
2740 This must have been the most-requested feature of the past years!
2741 Eleven new assignment operators were added:
2743     += -= *= /= %= **= <<= >>= &= ^= |=
2745 For example,
2747     A += B
2749 is similar to
2751     A = A + B
2753 except that A is evaluated only once (relevant when A is something
2754 like dict[index].attr).
2756 However, if A is a mutable object, A may be modified in place.  Thus,
2757 if A is a number or a string, A += B has the same effect as A = A+B
2758 (except A is only evaluated once); but if a is a list, A += B has the
2759 same effect as A.extend(B)!
2761 Classes and built-in object types can override the new operators in
2762 order to implement the in-place behavior; the not-in-place behavior is
2763 used automatically as a fallback when an object doesn't implement the
2764 in-place behavior.  For classes, the method name is derived from the
2765 method name for the corresponding not-in-place operator by inserting
2766 an 'i' in front of the name, e.g. __iadd__ implements in-place
2767 __add__.
2769 Augmented assignment was implemented by Thomas Wouters.
2772 List Comprehensions
2773 -------------------
2775 This is a flexible new notation for lists whose elements are computed
2776 from another list (or lists).  The simplest form is:
2778     [<expression> for <variable> in <sequence>]
2780 For example, [i**2 for i in range(4)] yields the list [0, 1, 4, 9].
2781 This is more efficient than a for loop with a list.append() call.
2783 You can also add a condition:
2785     [<expression> for <variable> in <sequence> if <condition>]
2787 For example, [w for w in words if w == w.lower()] would yield the list
2788 of words that contain no uppercase characters.  This is more efficient
2789 than a for loop with an if statement and a list.append() call.
2791 You can also have nested for loops and more than one 'if' clause.  For
2792 example, here's a function that flattens a sequence of sequences::
2794     def flatten(seq):
2795         return [x for subseq in seq for x in subseq]
2797     flatten([[0], [1,2,3], [4,5], [6,7,8,9], []])
2799 This prints
2801     [0, 1, 2, 3, 4, 5, 6, 7, 8, 9]
2803 List comprehensions originated as a patch set from Greg Ewing; Skip
2804 Montanaro and Thomas Wouters also contributed.  Described by PEP 202.
2807 Extended Import Statement
2808 -------------------------
2810 Many people have asked for a way to import a module under a different
2811 name.  This can be accomplished like this:
2813     import foo
2814     bar = foo
2815     del foo
2817 but this common idiom gets old quickly.  A simple extension of the
2818 import statement now allows this to be written as follows:
2820     import foo as bar
2822 There's also a variant for 'from ... import':
2824     from foo import bar as spam
2826 This also works with packages; e.g. you can write this:
2828     import test.regrtest as regrtest
2830 Note that 'as' is not a new keyword -- it is recognized only in this
2831 context (this is only possible because the syntax for the import
2832 statement doesn't involve expressions).
2834 Implemented by Thomas Wouters.  Described by PEP 221.
2837 Extended Print Statement
2838 ------------------------
2840 Easily the most controversial new feature, this extension to the print
2841 statement adds an option to make the output go to a different file
2842 than the default sys.stdout.
2844 For example, to write an error message to sys.stderr, you can now
2845 write:
2847     print >> sys.stderr, "Error: bad dog!"
2849 As a special feature, if the expression used to indicate the file
2850 evaluates to None, the current value of sys.stdout is used.  Thus:
2852     print >> None, "Hello world"
2854 is equivalent to
2856     print "Hello world"
2858 Design and implementation by Barry Warsaw.  Described by PEP 214.
2861 Optional Collection of Cyclical Garbage
2862 ---------------------------------------
2864 Python is now equipped with a garbage collector that can hunt down
2865 cyclical references between Python objects.  It's no replacement for
2866 reference counting; in fact, it depends on the reference counts being
2867 correct, and decides that a set of objects belong to a cycle if all
2868 their reference counts can be accounted for from their references to
2869 each other.  This devious scheme was first proposed by Eric Tiedemann,
2870 and brought to implementation by Neil Schemenauer.
2872 There's a module "gc" that lets you control some parameters of the
2873 garbage collection.  There's also an option to the configure script
2874 that lets you enable or disable the garbage collection.  In 2.0b1,
2875 it's on by default, so that we (hopefully) can collect decent user
2876 experience with this new feature.  There are some questions about its
2877 performance.  If it proves to be too much of a problem, we'll turn it
2878 off by default in the final 2.0 release.
2881 Smaller Changes
2882 ---------------
2884 A new function zip() was added.  zip(seq1, seq2, ...) is equivalent to
2885 map(None, seq1, seq2, ...) when the sequences have the same length;
2886 i.e. zip([1,2,3], [10,20,30]) returns [(1,10), (2,20), (3,30)].  When
2887 the lists are not all the same length, the shortest list wins:
2888 zip([1,2,3], [10,20]) returns [(1,10), (2,20)].  See PEP 201.
2890 sys.version_info is a tuple (major, minor, micro, level, serial).
2892 Dictionaries have an odd new method, setdefault(key, default).
2893 dict.setdefault(key, default) returns dict[key] if it exists; if not,
2894 it sets dict[key] to default and returns that value.  Thus:
2896     dict.setdefault(key, []).append(item)
2898 does the same work as this common idiom:
2900     if not dict.has_key(key):
2901         dict[key] = []
2902     dict[key].append(item)
2904 There are two new variants of SyntaxError that are raised for
2905 indentation-related errors: IndentationError and TabError.
2907 Changed \x to consume exactly two hex digits; see PEP 223.  Added \U
2908 escape that consumes exactly eight hex digits.
2910 The limits on the size of expressions and file in Python source code
2911 have been raised from 2**16 to 2**32.  Previous versions of Python
2912 were limited because the maximum argument size the Python VM accepted
2913 was 2**16.  This limited the size of object constructor expressions,
2914 e.g. [1,2,3] or {'a':1, 'b':2}, and the size of source files.  This
2915 limit was raised thanks to a patch by Charles Waldman that effectively
2916 fixes the problem.  It is now much more likely that you will be
2917 limited by available memory than by an arbitrary limit in Python.
2919 The interpreter's maximum recursion depth can be modified by Python
2920 programs using sys.getrecursionlimit and sys.setrecursionlimit.  This
2921 limit is the maximum number of recursive calls that can be made by
2922 Python code.  The limit exists to prevent infinite recursion from
2923 overflowing the C stack and causing a core dump.  The default value is
2924 1000.  The maximum safe value for a particular platform can be found
2925 by running Misc/find_recursionlimit.py.
2927 New Modules and Packages
2928 ------------------------
2930 atexit - for registering functions to be called when Python exits.
2932 imputil - Greg Stein's alternative API for writing custom import
2933 hooks.
2935 pyexpat - an interface to the Expat XML parser, contributed by Paul
2936 Prescod.
2938 xml - a new package with XML support code organized (so far) in three
2939 subpackages: xml.dom, xml.sax, and xml.parsers.  Describing these
2940 would fill a volume.  There's a special feature whereby a
2941 user-installed package named _xmlplus overrides the standard
2942 xmlpackage; this is intended to give the XML SIG a hook to distribute
2943 backwards-compatible updates to the standard xml package.
2945 webbrowser - a platform-independent API to launch a web browser.
2948 Changed Modules
2949 ---------------
2951 array -- new methods for array objects: count, extend, index, pop, and
2952 remove
2954 binascii -- new functions b2a_hex and a2b_hex that convert between
2955 binary data and its hex representation
2957 calendar -- Many new functions that support features including control
2958 over which day of the week is the first day, returning strings instead
2959 of printing them.  Also new symbolic constants for days of week,
2960 e.g. MONDAY, ..., SUNDAY.
2962 cgi -- FieldStorage objects have a getvalue method that works like a
2963 dictionary's get method and returns the value attribute of the object.
2965 ConfigParser -- The parser object has new methods has_option,
2966 remove_section, remove_option, set, and write.  They allow the module
2967 to be used for writing config files as well as reading them.
2969 ftplib -- ntransfercmd(), transfercmd(), and retrbinary() all now
2970 optionally support the RFC 959 REST command.
2972 gzip -- readline and readlines now accept optional size arguments
2974 httplib -- New interfaces and support for HTTP/1.1 by Greg Stein.  See
2975 the module doc strings for details.
2977 locale -- implement getdefaultlocale for Win32 and Macintosh
2979 marshal -- no longer dumps core when marshaling deeply nested or
2980 recursive data structures
2982 os -- new functions isatty, seteuid, setegid, setreuid, setregid
2984 os/popen2 -- popen2/popen3/popen4 support under Windows.  popen2/popen3
2985 support under Unix.
2987 os/pty -- support for openpty and forkpty
2989 os.path -- fix semantics of os.path.commonprefix
2991 smtplib -- support for sending very long messages
2993 socket -- new function getfqdn()
2995 readline -- new functions to read, write and truncate history files.
2996 The readline section of the library reference manual contains an
2997 example.
2999 select -- add interface to poll system call
3001 shutil -- new copyfileobj function
3003 SimpleHTTPServer, CGIHTTPServer -- Fix problems with buffering in the
3004 HTTP server.
3006 Tkinter -- optimization of function flatten
3008 urllib -- scans environment variables for proxy configuration,
3009 e.g. http_proxy.
3011 whichdb -- recognizes dumbdbm format
3014 Obsolete Modules
3015 ----------------
3017 None.  However note that 1.6 made a whole slew of modules obsolete:
3018 stdwin, soundex, cml, cmpcache, dircache, dump, find, grep, packmail,
3019 poly, zmod, strop, util, whatsound.
3022 Changed, New, Obsolete Tools
3023 ----------------------------
3025 None.
3028 C-level Changes
3029 ---------------
3031 Several cleanup jobs were carried out throughout the source code.
3033 All C code was converted to ANSI C; we got rid of all uses of the
3034 Py_PROTO() macro, which makes the header files a lot more readable.
3036 Most of the portability hacks were moved to a new header file,
3037 pyport.h; several other new header files were added and some old
3038 header files were removed, in an attempt to create a more rational set
3039 of header files.  (Few of these ever need to be included explicitly;
3040 they are all included by Python.h.)
3042 Trent Mick ensured portability to 64-bit platforms, under both Linux
3043 and Win64, especially for the new Intel Itanium processor.  Mick also
3044 added large file support for Linux64 and Win64.
3046 The C APIs to return an object's size have been update to consistently
3047 use the form PyXXX_Size, e.g. PySequence_Size and PyDict_Size.  In
3048 previous versions, the abstract interfaces used PyXXX_Length and the
3049 concrete interfaces used PyXXX_Size.  The old names,
3050 e.g. PyObject_Length, are still available for backwards compatibility
3051 at the API level, but are deprecated.
3053 The PyOS_CheckStack function has been implemented on Windows by
3054 Fredrik Lundh.  It prevents Python from failing with a stack overflow
3055 on Windows.
3057 The GC changes resulted in creation of two new slots on object,
3058 tp_traverse and tp_clear.  The augmented assignment changes result in
3059 the creation of a new slot for each in-place operator.
3061 The GC API creates new requirements for container types implemented in
3062 C extension modules.  See Include/objimpl.h for details.
3064 PyErr_Format has been updated to automatically calculate the size of
3065 the buffer needed to hold the formatted result string.  This change
3066 prevents crashes caused by programmer error.
3068 New C API calls: PyObject_AsFileDescriptor, PyErr_WriteUnraisable.
3070 PyRun_AnyFileEx, PyRun_SimpleFileEx, PyRun_FileEx -- New functions
3071 that are the same as their non-Ex counterparts except they take an
3072 extra flag argument that tells them to close the file when done.
3074 XXX There were other API changes that should be fleshed out here.
3077 Windows Changes
3078 ---------------
3080 New popen2/popen3/peopen4 in os module (see Changed Modules above).
3082 os.popen is much more usable on Windows 95 and 98.  See Microsoft
3083 Knowledge Base article Q150956.  The Win9x workaround described there
3084 is implemented by the new w9xpopen.exe helper in the root of your
3085 Python installation.  Note that Python uses this internally; it is not
3086 a standalone program.
3088 Administrator privileges are no longer required to install Python
3089 on Windows NT or Windows 2000.  If you have administrator privileges,
3090 Python's registry info will be written under HKEY_LOCAL_MACHINE.
3091 Otherwise the installer backs off to writing Python's registry info
3092 under HKEY_CURRENT_USER.  The latter is sufficient for all "normal"
3093 uses of Python, but will prevent some advanced uses from working
3094 (for example, running a Python script as an NT service, or possibly
3095 from CGI).
3097 [This was new in 1.6] The installer no longer runs a separate Tcl/Tk
3098 installer; instead, it installs the needed Tcl/Tk files directly in the
3099 Python directory.  If you already have a Tcl/Tk installation, this
3100 wastes some disk space (about 4 Megs) but avoids problems with
3101 conflicting Tcl/Tk installations, and makes it much easier for Python
3102 to ensure that Tcl/Tk can find all its files.
3104 [This was new in 1.6] The Windows installer now installs by default in
3105 \Python20\ on the default volume, instead of \Program Files\Python-2.0\.
3108 Updates to the changes between 1.5.2 and 1.6
3109 --------------------------------------------
3111 The 1.6 NEWS file can't be changed after the release is done, so here
3112 is some late-breaking news:
3114 New APIs in locale.py: normalize(), getdefaultlocale(), resetlocale(),
3115 and changes to getlocale() and setlocale().
3117 The new module is now enabled per default.
3119 It is not true that the encodings codecs cannot be used for normal
3120 strings: the string.encode() (which is also present on 8-bit strings
3121 !) allows using them for 8-bit strings too, e.g. to convert files from
3122 cp1252 (Windows) to latin-1 or vice-versa.
3124 Japanese codecs are available from Tamito KAJIYAMA:
3125 http://pseudo.grad.sccs.chukyo-u.ac.jp/~kajiyama/python/
3128 ======================================================================