This commit was manufactured by cvs2svn to create tag 'r22c1'.
[python/dscho.git] / Misc / NEWS
blob5c55d2c030e3bd5e968e3e929ced279995e334ec
1 What's New in Python 2.2c1?
2 Release date: 14-Dec-2001
3 ===========================
5 Type/class unification and new-style classes
7 - Guido's tutorial introduction to the new type/class features has
8   been extensively updated.  See
10       http://www.python.org/2.2/descrintro.html
12   That remains the primary documentation in this area.
14 - Fixed a leak: instance variables declared with __slots__ were never
15   deleted!
17 - The "delete attribute" method of descriptor objects is called
18   __delete__, not __del__.  In previous releases, it was mistakenly
19   called __del__, which created an unfortunate overloading condition
20   with finalizers.  (The "get attribute" and "set attribute" methods
21   are still called __get__ and __set__, respectively.)
23 - Some subtle issues with the super built-in were fixed:
25   (a) When super itself is subclassed, its __get__ method would still
26       return an instance of the base class (i.e., of super).
28   (b) super(C, C()).__class__ would return C rather than super.  This
29       is confusing.  To fix this, I decided to change the semantics of
30       super so that it only applies to code attributes, not to data
31       attributes.  After all, overriding data attributes is not
32       supported anyway.
34   (c) The __get__ method didn't check whether the argument was an
35       instance of the type used in creation of the super instance.
37 - Previously, hash() of an instance of a subclass of a mutable type
38   (list or dictionary) would return some value, rather than raising
39   TypeError.  This has been fixed.  Also, directly calling
40   dict.__hash__ and list.__hash__ now raises the same TypeError
41   (previously, these were the same as object.__hash__).
43 - New-style objects now support deleting their __dict__.  This is for
44   all intents and purposes equivalent to assigning a brand new empty
45   dictionary, but saves space if the object is not used further.
47 Core and builtins
49 - -Qnew now works as documented in PEP 238:  when -Qnew is passed on
50   the command line, all occurrences of "/" use true division instead
51   of classic division.  See the PEP for details.  Note that "all"
52   means all instances in library and 3rd-party modules, as well as in
53   your own code.  As the PEP says, -Qnew is intended for use only in
54   educational environments with control over the libraries in use.
55   Note that test_coercion.py in the standard Python test suite fails
56   under -Qnew; this is expected, and won't be repaired until true
57   division becomes the default (in the meantime, test_coercion is
58   testing the current rules).
60 - complex() now only allows the first argument to be a string
61   argument, and raises TypeError if either the second arg is a string
62   or if the second arg is specified when the first is a string.
64 Extension modules
66 - gc.get_referents was renamed to gc.get_referrers.
68 Library
70 - Functions in the os.spawn() family now release the global interpreter
71   lock around calling the platform spawn.  They should always have done
72   this, but did not before 2.2c1.  Multithreaded programs calling
73   an os.spawn function with P_WAIT will no longer block all Python threads
74   until the spawned program completes.  It's possible that some programs
75   relies on blocking, although more likely by accident than by design.
77 - webbrowser defaults to netscape.exe on OS/2 now.
79 - Tix.ResizeHandle exposes detach_widget, hide, and show.
81 - The charset alias windows_1252 has been added.
83 - types.StringTypes is a tuple containing the defined string types;
84   usually this will be (str, unicode), but if Python was compiled
85   without Unicode support it will be just (str,).
87 - The pulldom and minidom modules were synchronized to PyXML.
89 Tools/Demos
91 - A new script called Tools/scripts/google.py was added, which fires
92   off a search on Google.
94 Build
96 - Note that release builds of Python should arrange to define the
97   preprocessor symbol NDEBUG on the command line (or equivalent).
98   In the 2.2 pre-release series we tried to define this by magic in
99   Python.h instead, but it proved to cause problems for extension
100   authors.  The Unix, Windows and Mac builds now all define NDEBUG in
101   release builds via cmdline (or equivalent) instead.  Ports to
102   other platforms should do likewise.
104 - It is no longer necessary to use --with-suffix when building on a
105   case-insensitive file system (such as Mac OS X HFS+). In the build
106   directory an extension is used, but not in the installed python.
108 C API
110 - New function PyDict_MergeFromSeq2() exposes the builtin dict
111   constructor's logic for updating a dictionary from an iterable object
112   producing key-value pairs.
114 - PyArg_ParseTupleAndKeywords() requires that the number of entries in
115   the keyword list equal the number of argument specifiers.  This
116   wasn't checked correctly, and PyArg_ParseTupleAndKeywords could even
117   dump core in some bad cases.  This has been repaired.  As a result,
118   PyArg_ParseTupleAndKeywords may raise RuntimeError in bad cases that
119   previously went unchallenged.
121 New platforms
123 Tests
125 Windows
129 - In unix-Python on Mac OS X (and darwin) sys.platform is now "darwin",
130   without any trailing digits.
132 - Changed logic for finding python home in Mac OS X framework Pythons.
133   Now sys.executable points to the executable again, in stead of to
134   the shared library. The latter is used only for locating the python
135   home.
138 What's New in Python 2.2b2?
139 Release date: 16-Nov-2001
140 ===========================
142 Type/class unification and new-style classes
144 - Multiple inheritance mixing new-style and classic classes in the
145   list of base classes is now allowed, so this works now:
147       class Classic: pass
148       class Mixed(Classic, object): pass
150   The MRO (method resolution order) for each base class is respected
151   according to its kind, but the MRO for the derived class is computed
152   using new-style MRO rules if any base clase is a new-style class.
153   This needs to be documented.
155 - The new builtin dictionary() constructor, and dictionary type, have
156   been renamed to dict.  This reflects a decade of common usage.
158 - dict() now accepts an iterable object producing 2-sequences.  For
159   example, dict(d.items()) == d for any dictionary d.  The argument,
160   and the elements of the argument, can be any iterable objects.
162 - New-style classes can now have a __del__ method, which is called
163   when the instance is deleted (just like for classic classes).
165 - Assignment to object.__dict__ is now possible, for objects that are
166   instances of new-style classes that have a __dict__ (unless the base
167   class forbids it).
169 - Methods of built-in types now properly check for keyword arguments
170   (formerly these were silently ignored).  The only built-in methods
171   that take keyword arguments are __call__, __init__ and __new__.
173 - The socket function has been converted to a type; see below.
175 Core and builtins
177 - Assignment to __debug__ raises SyntaxError at compile-time.  This
178   was promised when 2.1c1 was released as "What's New in Python 2.1c1"
179   (see below) says.
181 - Clarified the error messages for unsupported operands to an operator
182   (like 1 + '').
184 Extension modules
186 - mmap has a new keyword argument, "access", allowing a uniform way for
187   both Windows and Unix users to create read-only, write-through and
188   copy-on-write memory mappings.  This was previously possible only on
189   Unix.  A new keyword argument was required to support this in a
190   uniform way because the mmap() signuatures had diverged across
191   platforms.  Thanks to Jay T Miller for repairing this!
193 - By default, the gc.garbage list now contains only those instances in
194   unreachable cycles that have __del__ methods; in 2.1 it contained all
195   instances in unreachable cycles.  "Instances" here has been generalized
196   to include instances of both new-style and old-style classes.
198 - The socket module defines a new method for socket objects,
199   sendall().  This is like send() but may make multiple calls to
200   send() until all data has been sent.  Also, the socket function has
201   been converted to a subclassable type, like list and tuple (etc.)
202   before it; socket and SocketType are now the same thing.
204 - Various bugfixes to the curses module.  There is now a test suite
205   for the curses module (you have to run it manually).
207 - binascii.b2a_base64 no longer places an arbitrary restriction of 57
208   bytes on its input.
210 Library
212 - tkFileDialog exposes a Directory class and askdirectory
213   convenience function.
215 - Symbolic group names in regular expressions must be unique.  For
216   example, the regexp r'(?P<abc>)(?P<abc>)' is not allowed, because a
217   single name can't mean both "group 1" and "group 2" simultaneously.
218   Python 2.2 detects this error at regexp compilation time;
219   previously, the error went undetected, and results were
220   unpredictable.  Also in sre, the pattern.split(), pattern.sub(), and
221   pattern.subn() methods have been rewritten in C.  Also, an
222   experimental function/method finditer() has been added, which works
223   like findall() but returns an iterator.
225 - Tix exposes more commands through the classes DirSelectBox,
226   DirSelectDialog, ListNoteBook, Meter, CheckList, and the
227   methods tix_addbitmapdir, tix_cget, tix_configure, tix_filedialog,
228   tix_getbitmap, tix_getimage, tix_option_get, and tix_resetoptions.
230 - Traceback objects are now scanned by cyclic garbage collection, so
231   cycles created by casual use of sys.exc_info() no longer cause
232   permanent memory leaks (provided garbage collection is enabled).
234 - os.extsep -- a new variable needed by the RISCOS support.  It is the
235   separator used by extensions, and is '.' on all platforms except
236   RISCOS, where it is '/'.  There is no need to use this variable
237   unless you have a masochistic desire to port your code to RISCOS.
239 - mimetypes.py has optional support for non-standard, but commonly
240   found types.  guess_type() and guess_extension() now accept an
241   optional `strict' flag, defaulting to true, which controls whether
242   recognize non-standard types or not.  A few non-standard types we
243   know about have been added.  Also, when run as a script, there are
244   new -l and -e options.
246 - statcache is now deprecated.
248 - email.Utils.formatdate() now produces the preferred RFC 2822 style
249   dates with numeric timezones (it used to produce obsolete dates
250   hard coded to "GMT" timezone).  An optional `localtime' flag is
251   added to produce dates in the local timezone, with daylight savings
252   time properly taken into account.
254 - In pickle and cPickle, instead of masking errors in load() by
255   transforming them into SystemError, we let the original exception
256   propagate out.  Also, implement support for __safe_for_unpickling__
257   in pickle, as it already was supported in cPickle.
259 Tools/Demos
261 Build
263 - The dbm module is built using libdb1 if available.  The bsddb module
264   is built with libdb3 if available.
266 - Misc/Makefile.pre.in has been removed by BDFL pronouncement.
268 C API
270 - New function PySequence_Fast_GET_SIZE() returns the size of a non-
271   NULL result from PySequence_Fast(), more quickly than calling
272   PySequence_Size().
274 - New argument unpacking function PyArg_UnpackTuple() added.
276 - New functions PyObject_CallFunctionObjArgs() and
277   PyObject_CallMethodObjArgs() have been added to make it more
278   convenient and efficient to call functions and methods from C.
280 - PyArg_ParseTupleAndKeywords() no longer masks errors, so it's
281   possible that this will propagate errors it didn't before.
283 - New function PyObject_CheckReadBuffer(), which returns true if its
284   argument supports the single-segment readable buffer interface.
286 New platforms
288 - We've finally confirmed that this release builds on HP-UX 11.00,
289   *with* threads, and passes the test suite.
291 - Thanks to a series of patches from Michael Muller, Python may build
292   again under OS/2 Visual Age C++.
294 - Updated RISCOS port by Dietmar Schwertberger.
296 Tests
298 - Added a test script for the curses module.  It isn't run automatically;
299   regrtest.py must be run with '-u curses' to enable it.
301 Windows
305 - PythonScript has been moved to unsupported and is slated to be
306   removed completely in the next release.
308 - It should now be possible to build applets that work on both OS9 and
309   OSX.
311 - The core is now linked with CoreServices not Carbon; as a side
312   result, default 8bit encoding on OSX is now ASCII.
314 - Python should now build on OSX 10.1.1
317 What's New in Python 2.2b1?
318 Release date: 19-Oct-2001
319 ===========================
321 Type/class unification and new-style classes
323 - New-style classes are now always dynamic (except for built-in and
324   extension types).  There is no longer a performance penalty, and I
325   no longer see another reason to keep this baggage around.  One relic
326   remains: the __dict__ of a new-style class is a read-only proxy; you
327   must set the class's attribute to modify it.  As a consequence, the
328   __defined__ attribute of new-style types no longer exists, for lack
329   of need: there is once again only one __dict__ (although in the
330   future a __cache__ may be resurrected with a similar function, if I
331   can prove that it actually speeds things up).
333 - C.__doc__ now works as expected for new-style classes (in 2.2a4 it
334   always returned None, even when there was a class docstring).
336 - doctest now finds and runs docstrings attached to new-style classes,
337   class methods, static methods, and properties.
339 Core and builtins
341 - A very subtle syntactical pitfall in list comprehensions was fixed.
342   For example: [a+b for a in 'abc', for b in 'def'].  The comma in
343   this example is a mistake.  Previously, this would silently let 'a'
344   iterate over the singleton tuple ('abc',), yielding ['abcd', 'abce',
345   'abcf'] rather than the intended ['ad', 'ae', 'af', 'bd', 'be',
346   'bf', 'cd', 'ce', 'cf'].  Now, this is flagged as a syntax error.
347   Note that [a for a in <singleton>] is a convoluted way to say
348   [<singleton>] anyway, so it's not like any expressiveness is lost.
350 - getattr(obj, name, default) now only catches AttributeError, as
351   documented, rather than returning the default value for all
352   exceptions (which could mask bugs in a __getattr__ hook, for
353   example).
355 - Weak reference objects are now part of the core and offer a C API.
356   A bug which could allow a core dump when binary operations involved
357   proxy reference has been fixed.  weakref.ReferenceError is now a
358   built-in exception.
360 - unicode(obj) now behaves more like str(obj), accepting arbitrary
361   objects, and calling a __unicode__ method if it exists.
362   unicode(obj, encoding) and unicode(obj, encoding, errors) still
363   require an 8-bit string or character buffer argument.
365 - isinstance() now allows any object as the first argument and a
366   class, a type or something with a __bases__ tuple attribute for the
367   second argument.  The second argument may also be a tuple of a
368   class, type, or something with __bases__, in which case isinstance()
369   will return true if the first argument is an instance of any of the
370   things contained in the second argument tuple.  E.g.
372   isinstance(x, (A, B))
374   returns true if x is an instance of A or B.
376 Extension modules
378 - thread.start_new_thread() now returns the thread ID (previously None).
380 - binascii has now two quopri support functions, a2b_qp and b2a_qp.
382 - readline now supports setting the startup_hook and the
383   pre_event_hook, and adds the add_history() function.
385 - os and posix supports chroot(), setgroups() and unsetenv() where
386   available.  The stat(), fstat(), statvfs() and fstatvfs() functions
387   now return "pseudo-sequences" -- the various fields can now be
388   accessed as attributes (e.g. os.stat("/").st_mtime) but for
389   backwards compatibility they also behave as a fixed-length sequence.
390   Some platform-specific fields (e.g. st_rdev) are only accessible as
391   attributes.
393 - time: localtime(), gmtime() and strptime() now return a
394   pseudo-sequence similar to the os.stat() return value, with
395   attributes like tm_year etc.
397 - Decompression objects in the zlib module now accept an optional
398   second parameter to decompress() that specifies the maximum amount
399   of memory to use for the uncompressed data.
401 - optional SSL support in the socket module now exports OpenSSL
402   functions RAND_add(), RAND_egd(), and RAND_status().  These calls
403   are useful on platforms like Solaris where OpenSSL does not
404   automatically seed its PRNG.  Also, the keyfile and certfile
405   arguments to socket.ssl() are now optional.
407 - posixmodule (and by extension, the os module on POSIX platforms) now
408   exports O_LARGEFILE, O_DIRECT, O_DIRECTORY, and O_NOFOLLOW.
410 Library
412 - doctest now excludes functions and classes not defined by the module
413   being tested, thanks to Tim Hochberg.
415 - HotShot, a new profiler implemented using a C-based callback, has
416   been added.  This substantially reduces the overhead of profiling,
417   but it is still quite preliminary.  Support modules and
418   documentation will be added in upcoming releases (before 2.2 final).
420 - profile now produces correct output in situations where an exception
421   raised in Python is cleared by C code (e.g. hasattr()).  This used
422   to cause wrong output, including spurious claims of recursive
423   functions and attribution of time spent to the wrong function.
425   The code and documentation for the derived OldProfile and HotProfile
426   profiling classes was removed.  The code hasn't worked for years (if
427   you tried to use them, they raised exceptions).  OldProfile
428   intended to reproduce the behavior of the profiler Python used more
429   than 7 years ago, and isn't interesting anymore.  HotProfile intended
430   to provide a faster profiler (but producing less information), and
431   that's a worthy goal we intend to meet via a different approach (but
432   without losing information).
434 - Profile.calibrate() has a new implementation that should deliver
435   a much better system-specific calibration constant.  The constant can
436   now be specified in an instance constructor, or as a Profile class or
437   instance variable, instead of by editing profile.py's source code.
438   Calibration must still be done manually (see the docs for the profile
439   module).
441   Note that Profile.calibrate() must be overriden by subclasses.
442   Improving the accuracy required exploiting detailed knowledge of
443   profiler internals; the earlier method abstracted away the details
444   and measured a simplified model instead, but consequently computed
445   a constant too small by a factor of 2 on some modern machines.
447 - quopri's encode and decode methods take an optional header parameter,
448   which indicates whether output is intended for the header 'Q'
449   encoding.
451 - The SocketServer.ThreadingMixIn class now closes the request after
452   finish_request() returns.  (Not when it errors out though.)
454 - The nntplib module's NNTP.body() method has grown a `file' argument
455   to allow saving the message body to a file.
457 - The email package has added a class email.Parser.HeaderParser which
458   only parses headers and does not recurse into the message's body.
459   Also, the module/class MIMEAudio has been added for representing
460   audio data (contributed by Anthony Baxter).
462 - ftplib should be able to handle files > 2GB.
464 - ConfigParser.getboolean() now also interprets TRUE, FALSE, YES, NO,
465   ON, and OFF.
467 - xml.dom.minidom NodeList objects now support the length attribute
468   and item() method as required by the DOM specifications.
470 Tools/Demos
472 - Demo/dns was removed.  It no longer serves any purpose; a package
473   derived from it is now maintained by Anthony Baxter, see
474   http://PyDNS.SourceForge.net.
476 - The freeze tool has been made more robust, and two new options have
477   been added: -X and -E.
479 Build
481 - configure will use CXX in LINKCC if CXX is used to build main() and
482   the system requires to link a C++ main using the C++ compiler.
484 C API
486 - The documentation for the tp_compare slot is updated to require that
487   the return value must be -1, 0, 1; an arbitrary number <0 or >0 is
488   not correct.  This is not yet enforced but will be enforced in
489   Python 2.3; even later, we may use -2 to indicate errors and +2 for
490   "NotImplemented".  Right now, -1 should be used for an error return.
492 - PyLong_AsLongLong() now accepts int (as well as long) arguments.
493   Consequently, PyArg_ParseTuple's 'L' code also accepts int (as well
494   as long) arguments.
496 - PyThread_start_new_thread() now returns a long int giving the thread
497   ID, if one can be calculated; it returns -1 for error, 0 if no
498   thread ID is calculated (this is an incompatible change, but only
499   the thread module used this API).  This code has only really been
500   tested on Linux and Windows; other platforms please beware (and
501   report any bugs or strange behavior).
503 - PyUnicode_FromEncodedObject() no longer accepts Unicode objects as
504   input.
506 New platforms
508 Tests
510 Windows
512 - Installer:  If you install IDLE, and don't disable file-extension
513   registration, a new "Edit with IDLE" context (right-click) menu entry
514   is created for .py and .pyw files.
516 - The signal module now supports SIGBREAK on Windows, thanks to Steven
517   Scott.  Note that SIGBREAK is unique to Windows.  The default SIGBREAK
518   action remains to call Win32 ExitProcess().  This can be changed via
519   signal.signal().  For example:
521   # Make Ctrl+Break raise KeyboardInterrupt, like Python's default Ctrl+C
522   # (SIGINT) behavior.
523   import signal
524   signal.signal(signal.SIGBREAK,
525                 signal.default_int_handler)
527   try:
528       while 1:
529           pass
530   except KeyboardInterrupt:
531       # We get here on Ctrl+C or Ctrl+Break now; if we had not changed
532       # SIGBREAK, only on Ctrl+C (and Ctrl+Break would terminate the
533       # program without the possibility for any Python-level cleanup).
534       print "Clean exit"
537 What's New in Python 2.2a4?
538 Release date: 28-Sep-2001
539 ===========================
541 Type/class unification and new-style classes
543 - pydoc and inspect are now aware of new-style classes;
544   e.g. help(list) at the interactive prompt now shows proper
545   documentation for all operations on list objects.
547 - Applications using Jim Fulton's ExtensionClass module can now safely
548   be used with Python 2.2.  In particular, Zope 2.4.1 now works with
549   Python 2.2 (as well as with Python 2.1.1).  The Demo/metaclass
550   examples also work again.  It is hoped that Gtk and Boost also work
551   with 2.2a4 and beyond.  (If you can confirm this, please write
552   webmaster@python.org; if there are still problems, please open a bug
553   report on SourceForge.)
555 - property() now takes 4 keyword arguments:  fget, fset, fdel and doc.
556   These map to readonly attributes 'fget', 'fset', 'fdel', and '__doc__'
557   in the constructed property object.  fget, fset and fdel weren't
558   discoverable from Python in 2.2a3.  __doc__ is new, and allows to
559   associate a docstring with a property.
561 - Comparison overloading is now more completely implemented.  For
562   example, a str subclass instance can properly be compared to a str
563   instance, and it can properly overload comparison.  Ditto for most
564   other built-in object types.
566 - The repr() of new-style classes has changed; instead of <type
567   'M.Foo'> a new-style class is now rendered as <class 'M.Foo'>,
568   *except* for built-in types, which are still rendered as <type
569   'Foo'> (to avoid upsetting existing code that might parse or
570   otherwise rely on repr() of certain type objects).
572 - The repr() of new-style objects is now always <Foo object at XXX>;
573   previously, it was sometimes <Foo instance at XXX>.
575 - For new-style classes, what was previously called __getattr__ is now
576   called __getattribute__.  This method, if defined, is called for
577   *every* attribute access.  A new __getattr__ hook more similar to the
578   one in classic classes is defined which is called only if regular
579   attribute access raises AttributeError; to catch *all* attribute
580   access, you can use __getattribute__ (for new-style classes).  If
581   both are defined, __getattribute__ is called first, and if it raises
582   AttributeError, __getattr__ is called.
584 - The __class__ attribute of new-style objects can be assigned to.
585   The new class must have the same C-level object layout as the old
586   class.
588 - The builtin file type can be subclassed now.  In the usual pattern,
589   "file" is the name of the builtin type, and file() is a new builtin
590   constructor, with the same signature as the builtin open() function.
591   file() is now the preferred way to open a file.
593 - Previously, __new__ would only see sequential arguments passed to
594   the type in a constructor call; __init__ would see both sequential
595   and keyword arguments.  This made no sense whatsoever any more, so
596   now both __new__ and __init__ see all arguments.
598 - Previously, hash() applied to an instance of a subclass of str or
599   unicode always returned 0.  This has been repaired.
601 - Previously, an operation on an instance of a subclass of an
602   immutable type (int, long, float, complex, tuple, str, unicode),
603   where the subtype didn't override the operation (and so the
604   operation was handled by the builtin type), could return that
605   instance instead a value of the base type.  For example, if s was of
606   a str sublass type, s[:] returned s as-is.  Now it returns a str
607   with the same value as s.
609 - Provisional support for pickling new-style objects has been added.
611 Core
613 - file.writelines() now accepts any iterable object producing strings.
615 - PyUnicode_FromEncodedObject() now works very much like
616   PyObject_Str(obj) in that it tries to use __str__/tp_str
617   on the object if the object is not a string or buffer. This
618   makes unicode() behave like str() when applied to non-string/buffer
619   objects.
621 - PyFile_WriteObject now passes Unicode objects to the file's write
622   method. As a result, all file-like objects which may be the target
623   of a print statement must support Unicode objects, i.e. they must
624   at least convert them into ASCII strings.
626 - Thread scheduling on Solaris should be improved; it is no longer
627   necessary to insert a small sleep at the start of a thread in order
628   to let other runnable threads be scheduled.
630 Library
632 - StringIO.StringIO instances and cStringIO.StringIO instances support
633   read character buffer compatible objects for their .write() methods.
634   These objects are converted to strings and then handled as such
635   by the instances.
637 - The "email" package has been added.  This is basically a port of the
638   mimelib package <http://sf.net/projects/mimelib> with API changes
639   and some implementations updated to use iterators and generators.
641 - difflib.ndiff() and difflib.Differ.compare() are generators now.  This
642   restores the ability of Tools/scripts/ndiff.py to start producing output
643   before the entire comparison is complete.
645 - StringIO.StringIO instances and cStringIO.StringIO instances support
646   iteration just like file objects (i.e. their .readline() method is
647   called for each iteration until it returns an empty string).
649 - The codecs module has grown four new helper APIs to access
650   builtin codecs: getencoder(), getdecoder(), getreader(),
651   getwriter().
653 - SimpleXMLRPCServer: a new module (based upon SimpleHTMLServer)
654   simplifies writing XML RPC servers.
656 - os.path.realpath(): a new function that returns the absolute pathname
657   after interpretation of symbolic links.  On non-Unix systems, this
658   is an alias for os.path.abspath().
660 - operator.indexOf() (PySequence_Index() in the C API) now works with any
661   iterable object.
663 - smtplib now supports various authentication and security features of
664   the SMTP protocol through the new login() and starttls() methods.
666 - hmac: a new module implementing keyed hashing for message
667   authentication.
669 - mimetypes now recognizes more extensions and file types.  At the
670   same time, some mappings not sanctioned by IANA were removed.
672 - The "compiler" package has been brought up to date to the state of
673   Python 2.2 bytecode generation.  It has also been promoted from a
674   Tool to a standard library package.  (Tools/compiler still exists as
675   a sample driver.)
677 Tools
679 Build
681 - Large file support (LFS) is now automatic when the platform supports
682   it; no more manual configuration tweaks are needed.  On Linux, at
683   least, it's possible to have a system whose C library supports large
684   files but whose kernel doesn't; in this case, large file support is
685   still enabled but doesn't do you any good unless you upgrade your
686   kernel or share your Python executable with another system whose
687   kernel has large file support.
689 - The configure script now supplies plausible defaults in a
690   cross-compilation environment.  This doesn't mean that the supplied
691   values are always correct, or that cross-compilation now works
692   flawlessly -- but it's a first step (and it shuts up most of
693   autoconf's warnings about AC_TRY_RUN).
695 - The Unix build is now a bit less chatty, courtesy of the parser
696   generator.  The build is completely silent (except for errors) when
697   using "make -s", thanks to a -q option to setup.py.
699 C API
701 - The "structmember" API now supports some new flag bits to deny read
702   and/or write access to attributes in restricted execution mode.
704 New platforms
706 - Compaq's iPAQ handheld, running the "familiar" Linux distribution
707   (http://familiar.handhelds.org).
709 Tests
711 - The "classic" standard tests, which work by comparing stdout to
712   an expected-output file under Lib/test/output/, no longer stop at
713   the first mismatch.  Instead the test is run to completion, and a
714   variant of ndiff-style comparison is used to report all differences.
715   This is much easier to understand than the previous style of reporting.
717 - The unittest-based standard tests now use regrtest's test_main()
718   convention, instead of running as a side-effect of merely being
719   imported.  This allows these tests to be run in more natural and
720   flexible ways as unittests, outside the regrtest framework.
722 - regrtest.py is much better integrated with unittest and doctest now,
723   especially in regard to reporting errors.
725 Windows
727 - Large file support now also works for files > 4GB, on filesystems
728   that support it (NTFS under Windows 2000).  See "What's New in
729   Python 2.2a3" for more detail.
732 What's New in Python 2.2a3?
733 Release Date: 07-Sep-2001
734 ===========================
736 Core
738 - Conversion of long to float now raises OverflowError if the long is too
739   big to represent as a C double.
741 - The 3-argument builtin pow() no longer allows a third non-None argument
742   if either of the first two arguments is a float, or if both are of
743   integer types and the second argument is negative (in which latter case
744   the arguments are converted to float, so this is really the same
745   restriction).
747 - The builtin dir() now returns more information, and sometimes much
748   more, generally naming all attributes of an object, and all attributes
749   reachable from the object via its class, and from its class's base
750   classes, and so on from them too.  Example:  in 2.2a2, dir([]) returned
751   an empty list.  In 2.2a3,
753   >>> dir([])
754   ['__add__', '__class__', '__contains__', '__delattr__', '__delitem__',
755    '__eq__', '__ge__', '__getattr__', '__getitem__', '__getslice__',
756    '__gt__', '__hash__', '__iadd__', '__imul__', '__init__', '__le__',
757    '__len__', '__lt__', '__mul__', '__ne__', '__new__', '__repr__',
758    '__rmul__', '__setattr__', '__setitem__', '__setslice__', '__str__',
759    'append', 'count', 'extend', 'index', 'insert', 'pop', 'remove',
760    'reverse', 'sort']
762   dir(module) continues to return only the module's attributes, though.
764 - Overflowing operations on plain ints now return a long int rather
765   than raising OverflowError.  This is a partial implementation of PEP
766   237.  You can use -Wdefault::OverflowWarning to enable a warning for
767   this situation, and -Werror::OverflowWarning to revert to the old
768   OverflowError exception.
770 - A new command line option, -Q<arg>, is added to control run-time
771   warnings for the use of classic division.  (See PEP 238.)  Possible
772   values are -Qold, -Qwarn, -Qwarnall, and -Qnew.  The default is
773   -Qold, meaning the / operator has its classic meaning and no
774   warnings are issued.  Using -Qwarn issues a run-time warning about
775   all uses of classic division for int and long arguments; -Qwarnall
776   also warns about classic division for float and complex arguments
777   (for use with fixdiv.py).
778   [Note:  the remainder of this paragraph (preserved below) became
779    obsolete in 2.2c1 -- -Qnew has global effect in 2.2]
780   <obsolete>
781   Using -Qnew is questionable; it turns on new division by default, but
782   only in the __main__ module.  You can usefully combine -Qwarn or
783   -Qwarnall and -Qnew: this gives the __main__ module new division, and
784   warns about classic division everywhere else.
785   </obsolete>
787 - Many built-in types can now be subclassed.  This applies to int,
788   long, float, str, unicode, and tuple.  (The types complex, list and
789   dictionary can also be subclassed; this was introduced earlier.)
790   Note that restrictions apply when subclassing immutable built-in
791   types: you can only affect the value of the instance by overloading
792   __new__.  You can add mutable attributes, and the subclass instances
793   will have a __dict__ attribute, but you cannot change the "value"
794   (as implemented by the base class) of an immutable subclass instance
795   once it is created.
797 - The dictionary constructor now takes an optional argument, a
798   mapping-like object, and initializes the dictionary from its
799   (key, value) pairs.
801 - A new built-in type, super, has been added.  This facilitates making
802   "cooperative super calls" in a multiple inheritance setting.  For an
803   explanation, see http://www.python.org/2.2/descrintro.html#cooperation
805 - A new built-in type, property, has been added.  This enables the
806   creation of "properties".  These are attributes implemented by
807   getter and setter functions (or only one of these for read-only or
808   write-only attributes), without the need to override __getattr__.
809   See http://www.python.org/2.2/descrintro.html#property
811 - The syntax of floating-point and imaginary literals has been
812   liberalized, to allow leading zeroes.  Examples of literals now
813   legal that were SyntaxErrors before:
815       00.0    0e3   0100j   07.5   00000000000000000008.
817 - An old tokenizer bug allowed floating point literals with an incomplete
818   exponent, such as 1e and 3.1e-.  Such literals now raise SyntaxError.
820 Library
822 - telnetlib includes symbolic names for the options, and support for
823   setting an option negotiation callback.
825 - The new C standard no longer requires that math libraries set errno to
826   ERANGE on overflow.  For platform libraries that exploit this new
827   freedom, Python's overflow-checking was wholly broken.  A new overflow-
828   checking scheme attempts to repair that, but may not be reliable on all
829   platforms (C doesn't seem to provide anything both useful and portable
830   in this area anymore).
832 - Asynchronous timeout actions are available through the new class
833   threading.Timer.
835 - math.log and math.log10 now return sensible results for even huge
836   long arguments.  For example, math.log10(10 ** 10000) ~= 10000.0.
838 - A new function, imp.lock_held(), returns 1 when the import lock is
839   currently held.  See the docs for the imp module.
841 - pickle, cPickle and marshal on 32-bit platforms can now correctly read
842   dumps containing ints written on platforms where Python ints are 8 bytes.
843   When read on a box where Python ints are 4 bytes, such values are
844   converted to Python longs.
846 - In restricted execution mode (using the rexec module), unmarshalling
847   code objects is no longer allowed.  This plugs a security hole.
849 - unittest.TestResult instances no longer store references to tracebacks
850   generated by test failures. This prevents unexpected dangling references
851   to objects that should be garbage collected between tests.
853 Tools
855 - Tools/scripts/fixdiv.py has been added which can be used to fix
856   division operators as per PEP 238.
858 Build
860 - If you are an adventurous person using Mac OS X you may want to look at
861   Mac/OSX. There is a Makefile there that will build Python as a real Mac
862   application, which can be used for experimenting with Carbon or Cocoa.
863   Discussion of this on pythonmac-sig, please.
865 C API
867 - New function PyObject_Dir(obj), like Python __builtin__.dir(obj).
869 - Note that PyLong_AsDouble can fail!  This has always been true, but no
870   callers checked for it.  It's more likely to fail now, because overflow
871   errors are properly detected now.  The proper way to check:
873   double x = PyLong_AsDouble(some_long_object);
874   if (x == -1.0 && PyErr_Occurred()) {
875           /* The conversion failed. */
876   }
878 - The GC API has been changed.  Extensions that use the old API will still
879   compile but will not participate in GC.  To upgrade an extension
880   module:
882     - rename Py_TPFLAGS_GC to PyTPFLAGS_HAVE_GC
884     - use PyObject_GC_New or PyObject_GC_NewVar to allocate objects and
885       PyObject_GC_Del to deallocate them
887     - rename PyObject_GC_Init to PyObject_GC_Track and PyObject_GC_Fini
888       to PyObject_GC_UnTrack
890     - remove PyGC_HEAD_SIZE from object size calculations
892     - remove calls to PyObject_AS_GC and PyObject_FROM_GC
894 - Two new functions: PyString_FromFormat() and PyString_FromFormatV().
895   These can be used safely to construct string objects from a
896   sprintf-style format string (similar to the format string supported
897   by PyErr_Format()).
899 New platforms
901 - Stephen Hansen contributed patches sufficient to get a clean compile
902   under Borland C (Windows), but he reports problems running it and ran
903   out of time to complete the port.  Volunteers?  Expect a MemoryError
904   when importing the types module; this is probably shallow, and
905   causing later failures too.
907 Tests
909 Windows
911 - Large file support is now enabled on Win32 platforms as well as on
912   Win64.  This means that, for example, you can use f.tell() and f.seek()
913   to manipulate files larger than 2 gigabytes (provided you have enough
914   disk space, and are using a Windows filesystem that supports large
915   partitions).  Windows filesystem limits:  FAT has a 2GB (gigabyte)
916   filesize limit, and large file support makes no difference there.
917   FAT32's limit is 4GB, and files >= 2GB are easier to use from Python now.
918   NTFS has no practical limit on file size, and files of any size can be
919   used from Python now.
921 - The w9xpopen hack is now used on Windows NT and 2000 too when COMPSPEC
922   points to command.com (patch from Brian Quinlan).
925 What's New in Python 2.2a2?
926 Release Date: 22-Aug-2001
927 ===========================
929 Build
931 - Tim Peters developed a brand new Windows installer using Wise 8.1,
932   generously donated to us by Wise Solutions.
934 - configure supports a new option --enable-unicode, with the values
935   ucs2 and ucs4 (new in 2.2a1). With --disable-unicode, the Unicode
936   type and supporting code is completely removed from the interpreter.
938 - A new configure option --enable-framework builds a Mac OS X framework,
939   which "make frameworkinstall" will install. This provides a starting
940   point for more mac-like functionality, join pythonmac-sig@python.org
941   if you are interested in helping.
943 - The NeXT platform is no longer supported.
945 - The `new' module is now statically linked.
947 Tools
949 - The new Tools/scripts/cleanfuture.py can be used to automatically
950   edit out obsolete future statements from Python source code.  See
951   the module docstring for details.
953 Tests
955 - regrtest.py now knows which tests are expected to be skipped on some
956   platforms, allowing to give clearer test result output.  regrtest
957   also has optional --use/-u switch to run normally disabled tests
958   which require network access or consume significant disk resources.
960 - Several new tests in the standard test suite, with special thanks to
961   Nick Mathewson.
963 Core
965 - The floor division operator // has been added as outlined in PEP
966   238.  The / operator still provides classic division (and will until
967   Python 3.0) unless "from __future__ import division" is included, in
968   which case the / operator will provide true division.  The operator
969   module provides truediv() and floordiv() functions.  Augmented
970   assignment variants are included, as are the equivalent overloadable
971   methods and C API methods.  See the PEP for a full discussion:
972   <http://python.sf.net/peps/pep-0238.html>
974 - Future statements are now effective in simulated interactive shells
975   (like IDLE).  This should "just work" by magic, but read Michael
976   Hudson's "Future statements in simulated shells" PEP 264 for full
977   details:  <http://python.sf.net/peps/pep-0264.html>.
979 - The type/class unification (PEP 252-253) was integrated into the
980   trunk and is not so tentative any more (the exact specification of
981   some features is still tentative).  A lot of work has done on fixing
982   bugs and adding robustness and features (performance still has to
983   come a long way).
985 - Warnings about a mismatch in the Python API during extension import
986   now use the Python warning framework (which makes it possible to
987   write filters for these warnings).
989 - A function's __dict__ (aka func_dict) will now always be a
990   dictionary.  It used to be possible to delete it or set it to None,
991   but now both actions raise TypeErrors.  It is still legal to set it
992   to a dictionary object.  Getting func.__dict__ before any attributes
993   have been assigned now returns an empty dictionary instead of None.
995 - A new command line option, -E, was added which disables the use of
996   all environment variables, or at least those that are specifically
997   significant to Python.  Usually those have a name starting with
998   "PYTHON".  This was used to fix a problem where the tests fail if
999   the user happens to have PYTHONHOME or PYTHONPATH pointing to an
1000   older distribution.
1002 Library
1004 - New class Differ and new functions ndiff() and restore() in difflib.py.
1005   These package the algorithms used by the popular Tools/scripts/ndiff.py,
1006   for programmatic reuse.
1008 - New function xml.sax.saxutils.quoteattr():  Quote an XML attribute
1009   value using the minimal quoting required for the value; more
1010   reliable than using xml.sax.saxutils.escape() for attribute values.
1012 - Readline completion support for cmd.Cmd was added.
1014 - Calling os.tempnam() or os.tmpnam() generate RuntimeWarnings.
1016 - Added function threading.BoundedSemaphore()
1018 - Added Ka-Ping Yee's cgitb.py module.
1020 - The `new' module now exposes the CO_xxx flags.
1022 - The gc module offers the get_referents function.
1024 New platforms
1026 C API
1028 - Two new APIs PyOS_snprintf() and PyOS_vsnprintf() were added
1029   which provide a cross-platform implementations for the
1030   relatively new snprintf()/vsnprintf() C lib APIs. In contrast to
1031   the standard sprintf() and vsprintf() C lib APIs, these versions
1032   apply bounds checking on the used buffer which enhances protection
1033   against buffer overruns.
1035 - Unicode APIs now use name mangling to assure that mixing interpreters
1036   and extensions using different Unicode widths is rendered next to
1037   impossible. Trying to import an incompatible Unicode-aware extension
1038   will result in an ImportError.  Unicode extensions writers must make
1039   sure to check the Unicode width compatibility in their extensions by
1040   using at least one of the mangled Unicode APIs in the extension.
1042 - Two new flags METH_NOARGS and METH_O are available in method definition
1043   tables to simplify implementation of methods with no arguments and a
1044   single untyped argument. Calling such methods is more efficient than
1045   calling corresponding METH_VARARGS methods. METH_OLDARGS is now
1046   deprecated.
1048 Windows
1050 - "import module" now compiles module.pyw if it exists and nothing else
1051   relevant is found.
1054 What's New in Python 2.2a1?
1055 Release date: 18-Jul-2001
1056 ===========================
1058 Core
1060 - TENTATIVELY, a large amount of code implementing much of what's
1061   described in PEP 252 (Making Types Look More Like Classes) and PEP
1062   253 (Subtyping Built-in Types) was added.  This will be released
1063   with Python 2.2a1.  Documentation will be provided separately
1064   through http://www.python.org/2.2/.  The purpose of releasing this
1065   with Python 2.2a1 is to test backwards compatibility.  It is
1066   possible, though not likely, that a decision is made not to release
1067   this code as part of 2.2 final, if any serious backwards
1068   incompapatibilities are found during alpha testing that cannot be
1069   repaired.
1071 - Generators were added; this is a new way to create an iterator (see
1072   below) using what looks like a simple function containing one or
1073   more 'yield' statements.  See PEP 255.  Since this adds a new
1074   keyword to the language, this feature must be enabled by including a
1075   future statement: "from __future__ import generators" (see PEP 236).
1076   Generators will become a standard feature in a future release
1077   (probably 2.3).  Without this future statement, 'yield' remains an
1078   ordinary identifier, but a warning is issued each time it is used.
1079   (These warnings currently don't conform to the warnings framework of
1080   PEP 230; we intend to fix this in 2.2a2.)
1082 - The UTF-16 codec was modified to be more RFC compliant. It will now
1083   only remove BOM characters at the start of the string and then
1084   only if running in native mode (UTF-16-LE and -BE won't remove a
1085   leading BMO character).
1087 - Strings now have a new method .decode() to complement the already
1088   existing .encode() method. These two methods provide direct access
1089   to the corresponding decoders and encoders of the registered codecs.
1091   To enhance the usability of the .encode() method, the special
1092   casing of Unicode object return values was dropped (Unicode objects
1093   were auto-magically converted to string using the default encoding).
1095   Both methods will now return whatever the codec in charge of the
1096   requested encoding returns as object, e.g. Unicode codecs will
1097   return Unicode objects when decoding is requested ("äöü".decode("latin-1")
1098   will return u"äöü"). This enables codec writer to create codecs
1099   for various simple to use conversions.
1101   New codecs were added to demonstrate these new features (the .encode()
1102   and .decode() columns indicate the type of the returned objects):
1104   Name     | .encode() | .decode() | Description
1105   ----------------------------------------------------------------------
1106   uu       | string    | string    | UU codec (e.g. for email)
1107   base64   | string    | string    | base64 codec
1108   quopri   | string    | string    | quoted-printable codec
1109   zlib     | string    | string    | zlib compression
1110   hex      | string    | string    | 2-byte hex codec
1111   rot-13   | string    | Unicode   | ROT-13 Unicode charmap codec
1113 - Some operating systems now support the concept of a default Unicode
1114   encoding for file system operations.  Notably, Windows supports 'mbcs'
1115   as the default.  The Macintosh will also adopt this concept in the medium
1116   term, although the default encoding for that platform will be other than
1117   'mbcs'.
1119   On operating system that support non-ASCII filenames, it is common for
1120   functions that return filenames (such as os.listdir()) to return Python
1121   string objects pre-encoded using the default file system encoding for
1122   the platform.  As this encoding is likely to be different from Python's
1123   default encoding, converting this name to a Unicode object before passing
1124   it back to the Operating System would result in a Unicode error, as Python
1125   would attempt to use its default encoding (generally ASCII) rather than
1126   the default encoding for the file system.
1128   In general, this change simply removes surprises when working with
1129   Unicode and the file system, making these operations work as you expect,
1130   increasing the transparency of Unicode objects in this context.
1131   See [????] for more details, including examples.
1133 - Float (and complex) literals in source code were evaluated to full
1134   precision only when running from a .py file; the same code loaded from a
1135   .pyc (or .pyo) file could suffer numeric differences starting at about the
1136   12th significant decimal digit.  For example, on a machine with IEEE-754
1137   floating arithmetic,
1139       x = 9007199254740992.0
1140       print long(x)
1142   printed 9007199254740992 if run directly from .py, but 9007199254740000
1143   if from a compiled (.pyc or .pyo) file.  This was due to marshal using
1144   str(float) instead of repr(float) when building code objects.  marshal
1145   now uses repr(float) instead, which should reproduce floats to full
1146   machine precision (assuming the platform C float<->string I/O conversion
1147   functions are of good quality).
1149   This may cause floating-point results to change in some cases, and
1150   usually for the better, but may also cause numerically unstable
1151   algorithms to break.
1153 - The implementation of dicts suffers fewer collisions, which has speed
1154   benefits.  However, the order in which dict entries appear in dict.keys(),
1155   dict.values() and dict.items() may differ from previous releases for a
1156   given dict.  Nothing is defined about this order, so no program should
1157   rely on it.  Nevertheless, it's easy to write test cases that rely on the
1158   order by accident, typically because of printing the str() or repr() of a
1159   dict to an "expected results" file.  See Lib/test/test_support.py's new
1160   sortdict(dict) function for a simple way to display a dict in sorted
1161   order.
1163 - Many other small changes to dicts were made, resulting in faster
1164   operation along the most common code paths.
1166 - Dictionary objects now support the "in" operator: "x in dict" means
1167   the same as dict.has_key(x).
1169 - The update() method of dictionaries now accepts generic mapping
1170   objects.  Specifically the argument object must support the .keys()
1171   and __getitem__() methods.  This allows you to say, for example,
1172   {}.update(UserDict())
1174 - Iterators were added; this is a generalized way of providing values
1175   to a for loop.  See PEP 234.  There's a new built-in function iter()
1176   to return an iterator.  There's a new protocol to get the next value
1177   from an iterator using the next() method (in Python) or the
1178   tp_iternext slot (in C).  There's a new protocol to get iterators
1179   using the __iter__() method (in Python) or the tp_iter slot (in C).
1180   Iterating (i.e. a for loop) over a dictionary generates its keys.
1181   Iterating over a file generates its lines.
1183 - The following functions were generalized to work nicely with iterator
1184   arguments:
1185     map(), filter(), reduce(), zip()
1186     list(), tuple() (PySequence_Tuple() and PySequence_Fast() in C API)
1187     max(), min()
1188     join() method of strings
1189     extend() method of lists
1190     'x in y' and 'x not in y' (PySequence_Contains() in C API)
1191     operator.countOf() (PySequence_Count() in C API)
1192     right-hand side of assignment statements with multiple targets, such as
1193         x, y, z = some_iterable_object_returning_exactly_3_values
1195 - Accessing module attributes is significantly faster (for example,
1196   random.random or os.path or yourPythonModule.yourAttribute).
1198 - Comparing dictionary objects via == and != is faster, and now works even
1199   if the keys and values don't support comparisons other than ==.
1201 - Comparing dictionaries in ways other than == and != is slower:  there were
1202   insecurities in the dict comparison implementation that could cause Python
1203   to crash if the element comparison routines for the dict keys and/or
1204   values mutated the dicts.  Making the code bulletproof slowed it down.
1206 - Collisions in dicts are resolved via a new approach, which can help
1207   dramatically in bad cases.  For example, looking up every key in a dict
1208   d with d.keys() == [i << 16 for i in range(20000)] is approximately 500x
1209   faster now.  Thanks to Christian Tismer for pointing out the cause and
1210   the nature of an effective cure (last December! better late than never).
1212 - repr() is much faster for large containers (dict, list, tuple).
1215 Library
1217 - The constants ascii_letters, ascii_lowercase. and ascii_uppercase
1218   were added to the string module.  These a locale-indenpendent
1219   constants, unlike letters, lowercase, and uppercase.  These are now
1220   use in appropriate locations in the standard library.
1222 - The flags used in dlopen calls can now be configured using
1223   sys.setdlopenflags and queried using sys.getdlopenflags.
1225 - Fredrik Lundh's xmlrpclib is now a standard library module.  This
1226   provides full client-side XML-RPC support.  In addition,
1227   Demo/xmlrpc/ contains two server frameworks (one SocketServer-based,
1228   one asyncore-based).  Thanks to Eric Raymond for the documentation.
1230 - The xrange() object is simplified: it no longer supports slicing,
1231   repetition, comparisons, efficient 'in' checking, the tolist()
1232   method, or the start, stop and step attributes.  See PEP 260.
1234 - A new function fnmatch.filter to filter lists of file names was added.
1236 - calendar.py uses month and day names based on the current locale.
1238 - strop is now *really* obsolete (this was announced before with 1.6),
1239   and issues DeprecationWarning when used (except for the four items
1240   that are still imported into string.py).
1242 - Cookie.py now sorts key+value pairs by key in output strings.
1244 - pprint.isrecursive(object) didn't correctly identify recursive objects.
1245   Now it does.
1247 - pprint functions now much faster for large containers (tuple, list, dict).
1249 - New 'q' and 'Q' format codes in the struct module, corresponding to C
1250   types "long long" and "unsigned long long" (on Windows, __int64).  In
1251   native mode, these can be used only when the platform C compiler supports
1252   these types (when HAVE_LONG_LONG is #define'd by the Python config
1253   process), and then they inherit the sizes and alignments of the C types.
1254   In standard mode, 'q' and 'Q' are supported on all platforms, and are
1255   8-byte integral types.
1257 - The site module installs a new built-in function 'help' that invokes
1258   pydoc.help.  It must be invoked as 'help()'; when invoked as 'help',
1259   it displays a message reminding the user to use 'help()' or
1260   'help(object)'.
1262 Tests
1264 - New test_mutants.py runs dict comparisons where the key and value
1265   comparison operators mutute the dicts randomly during comparison.  This
1266   rapidly causes Python to crash under earlier releases (not for the faint
1267   of heart:  it can also cause Win9x to freeze or reboot!).
1269 - New test_pprint.py verfies that pprint.isrecursive() and
1270   pprint.isreadable() return sensible results.  Also verifies that simple
1271   cases produce correct output.
1273 C API
1275 - Removed the unused last_is_sticky argument from the internal
1276   _PyTuple_Resize().  If this affects you, you were cheating.
1279 ======================================================================
1282 What's New in Python 2.1 (final)?
1283 =================================
1285 We only changed a few things since the last release candidate, all in
1286 Python library code:
1288 - A bug in the locale module was fixed that affected locales which
1289   define no grouping for numeric formatting.
1291 - A few bugs in the weakref module's implementations of weak
1292   dictionaries (WeakValueDictionary and WeakKeyDictionary) were fixed,
1293   and the test suite was updated to check for these bugs.
1295 - An old bug in the os.path.walk() function (introduced in Python
1296   2.0!) was fixed: a non-existent file would cause an exception
1297   instead of being ignored.
1299 - Fixed a few bugs in the new symtable module found by Neil Norwitz's
1300   PyChecker.
1303 What's New in Python 2.1c2?
1304 ===========================
1306 A flurry of small changes, and one showstopper fixed in the nick of
1307 time made it necessary to release another release candidate.  The list
1308 here is the *complete* list of patches (except version updates):
1310 Core
1312 - Tim discovered a nasty bug in the dictionary code, caused by
1313   PyDict_Next() calling dict_resize(), and the GC code's use of
1314   PyDict_Next() violating an assumption in dict_items().  This was
1315   fixed with considerable amounts of band-aid, but the net effect is a
1316   saner and more robust implementation.
1318 - Made a bunch of symbols static that were accidentally global.
1320 Build and Ports
1322 - The setup.py script didn't check for a new enough version of zlib
1323   (1.1.3 is needed).  Now it does.
1325 - Changed "make clean" target to also remove shared libraries.
1327 - Added a more general warning about the SGI Irix optimizer to README.
1329 Library
1331 - Fix a bug in urllib.basejoin("http://host", "../file.html") which
1332   omitted the slash between host and file.html.
1334 - The mailbox module's _Mailbox class contained a completely broken
1335   and undocumented seek() method.  Ripped it out.
1337 - Fixed a bunch of typos in various library modules (urllib2, smtpd,
1338   sgmllib, netrc, chunk) found by Neil Norwitz's PyChecker.
1340 - Fixed a few last-minute bugs in unittest.
1342 Extensions
1344 - Reverted the patch to the OpenSSL code in socketmodule.c to support
1345   RAND_status() and the EGD, and the subsequent patch that tried to
1346   fix it for pre-0.9.5 versions; the problem with the patch is that on
1347   some systems it issues a warning whenever socket is imported, and
1348   that's unacceptable.
1350 Tests
1352 - Fixed the pickle tests to work with "import test.test_pickle".
1354 - Tweaked test_locale.py to actually run the test Windows.
1356 - In distutils/archive_util.py, call zipfile.ZipFile() with mode "w",
1357   not "wb" (which is not a valid mode at all).
1359 - Fix pstats browser crashes.  Import readline if it exists to make
1360   the user interface nicer.
1362 - Add "import thread" to the top of test modules that import the
1363   threading module (test_asynchat and test_threadedtempfile).  This
1364   prevents test failures caused by a broken threading module resulting
1365   from a previously caught failed import.
1367 - Changed test_asynchat.py to set the SO_REUSEADDR option; this was
1368   needed on some platforms (e.g. Solaris 8) when the tests are run
1369   twice in succession.
1371 - Skip rather than fail test_sunaudiodev if no audio device is found.
1374 What's New in Python 2.1c1?
1375 ===========================
1377 This list was significantly updated when 2.1c2 was released; the 2.1c1
1378 release didn't mention most changes that were actually part of 2.1c1:
1380 Legal
1382 - Copyright was assigned to the Python Software Foundation (PSF) and a
1383   PSF license (very similar to the CNRI license) was added.
1385 - The CNRI copyright notice was updated to include 2001.
1387 Core
1389 - After a public outcry, assignment to __debug__ is no longer illegal;
1390   instead, a warning is issued.  It will become illegal in 2.2.
1392 - Fixed a core dump with "%#x" % 0, and changed the semantics so that
1393   "%#x" now always prepends "0x", even if the value is zero.
1395 - Fixed some nits in the bytecode compiler.
1397 - Fixed core dumps when calling certain kinds of non-functions.
1399 - Fixed various core dumps caused by reference count bugs.
1401 Build and Ports
1403 - Use INSTALL_SCRIPT to install script files.
1405 - New port: SCO Unixware 7, by Billy G. Allie.
1407 - Updated RISCOS port.
1409 - Updated BeOS port and notes.
1411 - Various other porting problems resolved.
1413 Library
1415 - The TERMIOS and SOCKET modules are now truly obsolete and
1416   unnecessary.  Their symbols are incorporated in the termios and
1417   socket modules.
1419 - Fixed some 64-bit bugs in pickle, cPickle, and struct, and added
1420   better tests for pickling.
1422 - threading: make Condition.wait() robust against KeyboardInterrupt.
1424 - zipfile: add support to zipfile to support opening an archive
1425   represented by an open file rather than a file name.  Fix bug where
1426   the archive was not properly closed.  Fixed a bug in this bugfix
1427   where flush() was called for a read-only file.
1429 - imputil: added an uninstall() method to the ImportManager.
1431 - Canvas: fixed bugs in lower() and tkraise() methods.
1433 - SocketServer: API change (added overridable close_request() method)
1434   so that the TCP server can explicitly close the request.
1436 - pstats: Eric Raymond added a simple interactive statistics browser,
1437   invoked when the module is run as a script.
1439 - locale: fixed a problem in format().
1441 - webbrowser: made it work when the BROWSER environment variable has a
1442   value like "/usr/bin/netscape".  Made it auto-detect Konqueror for
1443   KDE 2.  Fixed some other nits.
1445 - unittest: changes to allow using a different exception than
1446   AssertionError, and added a few more function aliases.  Some other
1447   small changes.
1449 - urllib, urllib2: fixed redirect problems and a coupleof other nits.
1451 - asynchat: fixed a critical bug in asynchat that slipped through the
1452   2.1b2 release.  Fixed another rare bug.
1454 - Fix some unqualified except: clauses (always a bad code example).
1458 - pyexpat: new API get_version_string().
1460 - Fixed some minidom bugs.
1462 Extensions
1464 - Fixed a core dump in _weakref.  Removed the weakref.mapping()
1465   function (it adds nothing to the API).
1467 - Rationalized the use of header files in the readline module, to make
1468   it compile (albeit with some warnings) with the very recent readline
1469   4.2, without breaking for earlier versions.
1471 - Hopefully fixed a buffering problem in linuxaudiodev.
1473 - Attempted a fix to make the OpenSSL support in the socket module
1474   work again with pre-0.9.5 versions of OpenSSL.
1476 Tests
1478 - Added a test case for asynchat and asyncore.
1480 - Removed coupling between tests where one test failing could break
1481   another.
1483 Tools
1485 - Ping added an interactive help browser to pydoc, fixed some nits
1486   in the rest of the pydoc code, and added some features to his
1487   inspect module.
1489 - An updated python-mode.el version 4.1 which integrates Ken
1490   Manheimer's pdbtrack.el.  This makes debugging Python code via pdb
1491   much nicer in XEmacs and Emacs.  When stepping through your program
1492   with pdb, in either the shell window or the *Python* window, the
1493   source file and line will be tracked by an arrow.  Very cool!
1495 - IDLE: syntax warnings in interactive mode are changed into errors.
1497 - Some improvements to Tools/webchecker (ignore some more URL types,
1498   follow some more links).
1500 - Brought the Tools/compiler package up to date.
1503 What's New in Python 2.1 beta 2?
1504 ================================
1506 (Unlisted are many fixed bugs, more documentation, etc.)
1508 Core language, builtins, and interpreter
1510 - The nested scopes work (enabled by "from __future__ import
1511   nested_scopes") is completed; in particular, the future now extends
1512   into code executed through exec, eval() and execfile(), and into the
1513   interactive interpreter.
1515 - When calling a base class method (e.g. BaseClass.__init__(self)),
1516   this is now allowed even if self is not strictly spoken a class
1517   instance (e.g. when using metaclasses or the Don Beaudry hook).
1519 - Slice objects are now comparable but not hashable; this prevents
1520   dict[:] from being accepted but meaningless.
1522 - Complex division is now calculated using less braindead algorithms.
1523   This doesn't change semantics except it's more likely to give useful
1524   results in extreme cases.  Complex repr() now uses full precision
1525   like float repr().
1527 - sgmllib.py now calls handle_decl() for simple <!...> declarations.
1529 - It is illegal to assign to the name __debug__, which is set when the
1530   interpreter starts.  It is effectively a compile-time constant.
1532 - A warning will be issued if a global statement for a variable
1533   follows a use or assignment of that variable.
1535 Standard library
1537 - unittest.py, a unit testing framework by Steve Purcell (PyUNIT,
1538   inspired by JUnit), is now part of the standard library.  You now
1539   have a choice of two testing frameworks: unittest requires you to
1540   write testcases as separate code, doctest gathers them from
1541   docstrings.  Both approaches have their advantages and
1542   disadvantages.
1544 - A new module Tix was added, which wraps the Tix extension library
1545   for Tk.  With that module, it is not necessary to statically link
1546   Tix with _tkinter, since Tix will be loaded with Tcl's "package
1547   require" command.  See Demo/tix/.
1549 - tzparse.py is now obsolete.
1551 - In gzip.py, the seek() and tell() methods are removed -- they were
1552   non-functional anyway, and it's better if callers can test for their
1553   existence with hasattr().
1555 Python/C API
1557 - PyDict_Next(): it is now safe to call PyDict_SetItem() with a key
1558   that's already in the dictionary during a PyDict_Next() iteration.
1559   This used to fail occasionally when a dictionary resize operation
1560   could be triggered that would rehash all the keys.  All other
1561   modifications to the dictionary are still off-limits during a
1562   PyDict_Next() iteration!
1564 - New extended APIs related to passing compiler variables around.
1566 - New abstract APIs PyObject_IsInstance(), PyObject_IsSubclass()
1567   implement isinstance() and issubclass().
1569 - Py_BuildValue() now has a "D" conversion to create a Python complex
1570   number from a Py_complex C value.
1572 - Extensions types which support weak references must now set the
1573   field allocated for the weak reference machinery to NULL themselves;
1574   this is done to avoid the cost of checking each object for having a
1575   weakly referencable type in PyObject_INIT(), since most types are
1576   not weakly referencable.
1578 - PyFrame_FastToLocals() and PyFrame_LocalsToFast() copy bindings for
1579   free variables and cell variables to and from the frame's f_locals.
1581 - Variants of several functions defined in pythonrun.h have been added
1582   to support the nested_scopes future statement.  The variants all end
1583   in Flags and take an extra argument, a PyCompilerFlags *; examples:
1584   PyRun_AnyFileExFlags(), PyRun_InteractiveLoopFlags().  These
1585   variants may be removed in Python 2.2, when nested scopes are
1586   mandatory.
1588 Distutils
1590 - the sdist command now writes a PKG-INFO file, as described in PEP 241,
1591   into the release tree.
1593 - several enhancements to the bdist_wininst command from Thomas Heller
1594   (an uninstaller, more customization of the installer's display)
1596 - from Jack Jansen: added Mac-specific code to generate a dialog for
1597   users to specify the command-line (because providing a command-line with
1598   MacPython is awkward).  Jack also made various fixes for the Mac
1599   and the Metrowerks compiler.
1601 - added 'platforms' and 'keywords' to the set of metadata that can be
1602   specified for a distribution.
1604 - applied patches from Jason Tishler to make the compiler class work with
1605   Cygwin.
1608 What's New in Python 2.1 beta 1?
1609 ================================
1611 Core language, builtins, and interpreter
1613 - Following an outcry from the community about the amount of code
1614   broken by the nested scopes feature introduced in 2.1a2, we decided
1615   to make this feature optional, and to wait until Python 2.2 (or at
1616   least 6 months) to make it standard.  The option can be enabled on a
1617   per-module basis by adding "from __future__ import nested_scopes" at
1618   the beginning of a module (before any other statements, but after
1619   comments and an optional docstring).  See PEP 236 (Back to the
1620   __future__) for a description of the __future__ statement.  PEP 227
1621   (Statically Nested Scopes) has been updated to reflect this change,
1622   and to clarify the semantics in a number of endcases.
1624 - The nested scopes code, when enabled, has been hardened, and most
1625   bugs and memory leaks in it have been fixed.
1627 - Compile-time warnings are now generated for a number of conditions
1628   that will break or change in meaning when nested scopes are enabled:
1630   - Using "from...import *" or "exec" without in-clause in a function
1631     scope that also defines a lambda or nested function with one or
1632     more free (non-local) variables.  The presence of the import* or
1633     bare exec makes it impossible for the compiler to determine the
1634     exact set of local variables in the outer scope, which makes it
1635     impossible to determine the bindings for free variables in the
1636     inner scope.  To avoid the warning about import *, change it into
1637     an import of explicitly name object, or move the import* statement
1638     to the global scope; to avoid the warning about bare exec, use
1639     exec...in... (a good idea anyway -- there's a possibility that
1640     bare exec will be deprecated in the future).
1642   - Use of a global variable in a nested scope with the same name as a
1643     local variable in a surrounding scope.  This will change in
1644     meaning with nested scopes: the name in the inner scope will
1645     reference the variable in the outer scope rather than the global
1646     of the same name.  To avoid the warning, either rename the outer
1647     variable, or use a global statement in the inner function.
1649 - An optional object allocator has been included.  This allocator is
1650   optimized for Python objects and should be faster and use less memory
1651   than the standard system allocator.  It is not enabled by default
1652   because of possible thread safety problems.  The allocator is only
1653   protected by the Python interpreter lock and it is possible that some
1654   extension modules require a thread safe allocator.  The object
1655   allocator can be enabled by providing the "--with-pymalloc" option to
1656   configure.
1658 Standard library
1660 - pyexpat now detects the expat version if expat.h defines it. A
1661   number of additional handlers are provided, which are only available
1662   since expat 1.95. In addition, the methods SetParamEntityParsing and
1663   GetInputContext of Parser objects are available with 1.95.x
1664   only. Parser objects now provide the ordered_attributes and
1665   specified_attributes attributes. A new module expat.model was added,
1666   which offers a number of additional constants if 1.95.x is used.
1668 - xml.dom offers the new functions registerDOMImplementation and
1669   getDOMImplementation.
1671 - xml.dom.minidom offers a toprettyxml method. A number of DOM
1672   conformance issues have been resolved. In particular, Element now
1673   has an hasAttributes method, and the handling of namespaces was
1674   improved.
1676 - Ka-Ping Yee contributed two new modules: inspect.py, a module for
1677   getting information about live Python code, and pydoc.py, a module
1678   for interactively converting docstrings to HTML or text.
1679   Tools/scripts/pydoc, which is now automatically installed into
1680   <prefix>/bin, uses pydoc.py to display documentation; try running
1681   "pydoc -h" for instructions.  "pydoc -g" pops up a small GUI that
1682   lets you browse the module docstrings using a web browser.
1684 - New library module difflib.py, primarily packaging the SequenceMatcher
1685   class at the heart of the popular ndiff.py file-comparison tool.
1687 - doctest.py (a framework for verifying Python code examples in docstrings)
1688   is now part of the std library.
1690 Windows changes
1692 - A new entry in the Start menu, "Module Docs", runs "pydoc -g" -- a
1693   small GUI that lets you browse the module docstrings using your
1694   default web browser.
1696 - Import is now case-sensitive.  PEP 235 (Import on Case-Insensitive
1697   Platforms) is implemented.  See
1699       http://python.sourceforge.net/peps/pep-0235.html
1701   for full details, especially the "Current Lower-Left Semantics" section.
1702   The new Windows import rules are simpler than before:
1704   A. If the PYTHONCASEOK environment variable exists, same as
1705      before:  silently accept the first case-insensitive match of any
1706      kind; raise ImportError if none found.
1708   B. Else search sys.path for the first case-sensitive match; raise
1709      ImportError if none found.
1711   The same rules have been implented on other platforms with case-
1712   insensitive but case-preserving filesystems too (including Cygwin, and
1713   several flavors of Macintosh operating systems).
1715 - winsound module:  Under Win9x, winsound.Beep() now attempts to simulate
1716   what it's supposed to do (and does do under NT and 2000) via direct
1717   port manipulation.  It's unknown whether this will work on all systems,
1718   but it does work on my Win98SE systems now and was known to be useless on
1719   all Win9x systems before.
1721 - Build:  Subproject _test (effectively) renamed to _testcapi.
1723 New platforms
1725 - 2.1 should compile and run out of the box under MacOS X, even using HFS+.
1726   Thanks to Steven Majewski!
1728 - 2.1 should compile and run out of the box on Cygwin.  Thanks to Jason
1729   Tishler!
1731 - 2.1 contains new files and patches for RISCOS, thanks to Dietmar
1732   Schwertberger!  See RISCOS/README for more information -- it seems
1733   that because of the bizarre filename conventions on RISCOS, no port
1734   to that platform is easy.
1737 What's New in Python 2.1 alpha 2?
1738 =================================
1740 Core language, builtins, and interpreter
1742 - Scopes nest.  If a name is used in a function or class, but is not
1743   local, the definition in the nearest enclosing function scope will
1744   be used.  One consequence of this change is that lambda statements
1745   could reference variables in the namespaces where the lambda is
1746   defined.  In some unusual cases, this change will break code.
1748   In all previous version of Python, names were resolved in exactly
1749   three namespaces -- the local namespace, the global namespace, and
1750   the builtin namespace.  According to this old definition, if a
1751   function A is defined within a function B, the names bound in B are
1752   not visible in A.  The new rules make names bound in B visible in A,
1753   unless A contains a name binding that hides the binding in B.
1755   Section 4.1 of the reference manual describes the new scoping rules
1756   in detail.  The test script in Lib/test/test_scope.py demonstrates
1757   some of the effects of the change.
1759   The new rules will cause existing code to break if it defines nested
1760   functions where an outer function has local variables with the same
1761   name as globals or builtins used by the inner function.  Example:
1763     def munge(str):
1764         def helper(x):
1765             return str(x)
1766         if type(str) != type(''):
1767             str = helper(str)
1768         return str.strip()
1770   Under the old rules, the name str in helper() is bound to the
1771   builtin function str().  Under the new rules, it will be bound to
1772   the argument named str and an error will occur when helper() is
1773   called.
1775 - The compiler will report a SyntaxError if "from ... import *" occurs
1776   in a function or class scope.  The language reference has documented
1777   that this case is illegal, but the compiler never checked for it.
1778   The recent introduction of nested scope makes the meaning of this
1779   form of name binding ambiguous.  In a future release, the compiler
1780   may allow this form when there is no possibility of ambiguity.
1782 - repr(string) is easier to read, now using hex escapes instead of octal,
1783   and using \t, \n and \r instead of \011, \012 and \015 (respectively):
1785   >>> "\texample \r\n" + chr(0) + chr(255)
1786   '\texample \r\n\x00\xff'         # in 2.1
1787   '\011example \015\012\000\377'   # in 2.0
1789 - Functions are now compared and hashed by identity, not by value, since
1790   the func_code attribute is writable.
1792 - Weak references (PEP 205) have been added.  This involves a few
1793   changes in the core, an extension module (_weakref), and a Python
1794   module (weakref).  The weakref module is the public interface.  It
1795   includes support for "explicit" weak references, proxy objects, and
1796   mappings with weakly held values.
1798 - A 'continue' statement can now appear in a try block within the body
1799   of a loop.  It is still not possible to use continue in a finally
1800   clause.
1802 Standard library
1804 - mailbox.py now has a new class, PortableUnixMailbox which is
1805   identical to UnixMailbox but uses a more portable scheme for
1806   determining From_ separators.  Also, the constructors for all the
1807   classes in this module have a new optional `factory' argument, which
1808   is a callable used when new message classes must be instantiated by
1809   the next() method.
1811 - random.py is now self-contained, and offers all the functionality of
1812   the now-deprecated whrandom.py.  See the docs for details.  random.py
1813   also supports new functions getstate() and setstate(), for saving
1814   and restoring the internal state of the generator; and jumpahead(n),
1815   for quickly forcing the internal state to be the same as if n calls to
1816   random() had been made.  The latter is particularly useful for multi-
1817   threaded programs, creating one instance of the random.Random() class for
1818   each thread, then using .jumpahead() to force each instance to use a
1819   non-overlapping segment of the full period.
1821 - random.py's seed() function is new.  For bit-for-bit compatibility with
1822   prior releases, use the whseed function instead.  The new seed function
1823   addresses two problems:  (1) The old function couldn't produce more than
1824   about 2**24 distinct internal states; the new one about 2**45 (the best
1825   that can be done in the Wichmann-Hill generator).  (2) The old function
1826   sometimes produced identical internal states when passed distinct
1827   integers, and there was no simple way to predict when that would happen;
1828   the new one guarantees to produce distinct internal states for all
1829   arguments in [0, 27814431486576L).
1831 - The socket module now supports raw packets on Linux.  The socket
1832   family is AF_PACKET.
1834 - test_capi.py is a start at running tests of the Python C API.  The tests
1835   are implemented by the new Modules/_testmodule.c.
1837 - A new extension module, _symtable, provides provisional access to the
1838   internal symbol table used by the Python compiler.  A higher-level
1839   interface will be added on top of _symtable in a future release.
1841 - Removed the obsolete soundex module.
1843 - xml.dom.minidom now uses the standard DOM exceptions. Node supports
1844   the isSameNode method; NamedNodeMap the get method.
1846 - xml.sax.expatreader supports the lexical handler property; it
1847   generates comment, startCDATA, and endCDATA events.
1849 Windows changes
1851 - Build procedure:  the zlib project is built in a different way that
1852   ensures the zlib header files used can no longer get out of synch with
1853   the zlib binary used.  See PCbuild\readme.txt for details.  Your old
1854   zlib-related directories can be deleted; you'll need to download fresh
1855   source for zlib and unpack it into a new directory.
1857 - Build:  New subproject _test for the benefit of test_capi.py (see above).
1859 - Build:  New subproject _symtable, for new DLL _symtable.pyd (a nascent
1860   interface to some Python compiler internals).
1862 - Build:  Subproject ucnhash is gone, since the code was folded into the
1863   unicodedata subproject.
1865 What's New in Python 2.1 alpha 1?
1866 =================================
1868 Core language, builtins, and interpreter
1870 - There is a new Unicode companion to the PyObject_Str() API
1871   called PyObject_Unicode(). It behaves in the same way as the
1872   former, but assures that the returned value is an Unicode object
1873   (applying the usual coercion if necessary).
1875 - The comparison operators support "rich comparison overloading" (PEP
1876   207).  C extension types can provide a rich comparison function in
1877   the new tp_richcompare slot in the type object.  The cmp() function
1878   and the C function PyObject_Compare() first try the new rich
1879   comparison operators before trying the old 3-way comparison.  There
1880   is also a new C API PyObject_RichCompare() (which also falls back on
1881   the old 3-way comparison, but does not constrain the outcome of the
1882   rich comparison to a Boolean result).
1884   The rich comparison function takes two objects (at least one of
1885   which is guaranteed to have the type that provided the function) and
1886   an integer indicating the opcode, which can be Py_LT, Py_LE, Py_EQ,
1887   Py_NE, Py_GT, Py_GE (for <, <=, ==, !=, >, >=), and returns a Python
1888   object, which may be NotImplemented (in which case the tp_compare
1889   slot function is used as a fallback, if defined).
1891   Classes can overload individual comparison operators by defining one
1892   or more of the methods__lt__, __le__, __eq__, __ne__, __gt__,
1893   __ge__.  There are no explicit "reflected argument" versions of
1894   these; instead, __lt__ and __gt__ are each other's reflection,
1895   likewise for__le__ and __ge__; __eq__ and __ne__ are their own
1896   reflection (similar at the C level).  No other implications are
1897   made; in particular, Python does not assume that == is the Boolean
1898   inverse of !=, or that < is the Boolean inverse of >=.  This makes
1899   it possible to define types with partial orderings.
1901   Classes or types that want to implement (in)equality tests but not
1902   the ordering operators (i.e. unordered types) should implement ==
1903   and !=, and raise an error for the ordering operators.
1905   It is possible to define types whose rich comparison results are not
1906   Boolean; e.g. a matrix type might want to return a matrix of bits
1907   for A < B, giving elementwise comparisons.  Such types should ensure
1908   that any interpretation of their value in a Boolean context raises
1909   an exception, e.g. by defining __nonzero__ (or the tp_nonzero slot
1910   at the C level) to always raise an exception.
1912 - Complex numbers use rich comparisons to define == and != but raise
1913   an exception for <, <=, > and >=.  Unfortunately, this also means
1914   that cmp() of two complex numbers raises an exception when the two
1915   numbers differ.  Since it is not mathematically meaningful to compare
1916   complex numbers except for equality, I hope that this doesn't break
1917   too much code.
1919 - The outcome of comparing non-numeric objects of different types is
1920   not defined by the language, other than that it's arbitrary but
1921   consistent (see the Reference Manual).  An implementation detail changed
1922   in 2.1a1 such that None now compares less than any other object.  Code
1923   relying on this new behavior (like code that relied on the previous
1924   behavior) does so at its own risk.
1926 - Functions and methods now support getting and setting arbitrarily
1927   named attributes (PEP 232).  Functions have a new __dict__
1928   (a.k.a. func_dict) which hold the function attributes.  Methods get
1929   and set attributes on their underlying im_func.  It is a TypeError
1930   to set an attribute on a bound method.
1932 - The xrange() object implementation has been improved so that
1933   xrange(sys.maxint) can be used on 64-bit platforms.  There's still a
1934   limitation that in this case len(xrange(sys.maxint)) can't be
1935   calculated, but the common idiom "for i in xrange(sys.maxint)" will
1936   work fine as long as the index i doesn't actually reach 2**31.
1937   (Python uses regular ints for sequence and string indices; fixing
1938   that is much more work.)
1940 - Two changes to from...import:
1942   1) "from M import X" now works even if (after loading module M)
1943      sys.modules['M'] is not a real module; it's basically a getattr()
1944      operation with AttributeError exceptions changed into ImportError.
1946   2) "from M import *" now looks for M.__all__ to decide which names to
1947      import; if M.__all__ doesn't exist, it uses M.__dict__.keys() but
1948      filters out names starting with '_' as before.  Whether or not
1949      __all__ exists, there's no restriction on the type of M.
1951 - File objects have a new method, xreadlines().  This is the fastest
1952   way to iterate over all lines in a file:
1954   for line in file.xreadlines():
1955       ...do something to line...
1957   See the xreadlines module (mentioned below) for how to do this for
1958   other file-like objects.
1960 - Even if you don't use file.xreadlines(), you may expect a speedup on
1961   line-by-line input.  The file.readline() method has been optimized
1962   quite a bit in platform-specific ways:  on systems (like Linux) that
1963   support flockfile(), getc_unlocked(), and funlockfile(), those are
1964   used by default.  On systems (like Windows) without getc_unlocked(),
1965   a complicated (but still thread-safe) method using fgets() is used by
1966   default.
1968   You can force use of the fgets() method by #define'ing
1969   USE_FGETS_IN_GETLINE at build time (it may be faster than
1970   getc_unlocked()).
1972   You can force fgets() not to be used by #define'ing
1973   DONT_USE_FGETS_IN_GETLINE (this is the first thing to try if std test
1974   test_bufio.py fails -- and let us know if it does!).
1976 - In addition, the fileinput module, while still slower than the other
1977   methods on most platforms, has been sped up too, by using
1978   file.readlines(sizehint).
1980 - Support for run-time warnings has been added, including a new
1981   command line option (-W) to specify the disposition of warnings.
1982   See the description of the warnings module below.
1984 - Extensive changes have been made to the coercion code.  This mostly
1985   affects extension modules (which can now implement mixed-type
1986   numerical operators without having to use coercion), but
1987   occasionally, in boundary cases the coercion semantics have changed
1988   subtly.  Since this was a terrible gray area of the language, this
1989   is considered an improvement.  Also note that __rcmp__ is no longer
1990   supported -- instead of calling __rcmp__, __cmp__ is called with
1991   reflected arguments.
1993 - In connection with the coercion changes, a new built-in singleton
1994   object, NotImplemented is defined.  This can be returned for
1995   operations that wish to indicate they are not implemented for a
1996   particular combination of arguments.  From C, this is
1997   Py_NotImplemented.
1999 - The interpreter accepts now bytecode files on the command line even
2000   if they do not have a .pyc or .pyo extension. On Linux, after executing
2002 import imp,sys,string
2003 magic = string.join(["\\x%.2x" % ord(c) for c in imp.get_magic()],"")
2004 reg = ':pyc:M::%s::%s:' % (magic, sys.executable)
2005 open("/proc/sys/fs/binfmt_misc/register","wb").write(reg)
2007   any byte code file can be used as an executable (i.e. as an argument
2008   to execve(2)).
2010 - %[xXo] formats of negative Python longs now produce a sign
2011   character.  In 1.6 and earlier, they never produced a sign,
2012   and raised an error if the value of the long was too large
2013   to fit in a Python int.  In 2.0, they produced a sign if and
2014   only if too large to fit in an int.  This was inconsistent
2015   across platforms (because the size of an int varies across
2016   platforms), and inconsistent with hex() and oct().  Example:
2018   >>> "%x" % -0x42L
2019   '-42'      # in 2.1
2020   'ffffffbe' # in 2.0 and before, on 32-bit machines
2021   >>> hex(-0x42L)
2022   '-0x42L'   # in all versions of Python
2024   The behavior of %d formats for negative Python longs remains
2025   the same as in 2.0 (although in 1.6 and before, they raised
2026   an error if the long didn't fit in a Python int).
2028   %u formats don't make sense for Python longs, but are allowed
2029   and treated the same as %d in 2.1.  In 2.0, a negative long
2030   formatted via %u produced a sign if and only if too large to
2031   fit in an int.  In 1.6 and earlier, a negative long formatted
2032   via %u raised an error if it was too big to fit in an int.
2034 - Dictionary objects have an odd new method, popitem().  This removes
2035   an arbitrary item from the dictionary and returns it (in the form of
2036   a (key, value) pair).  This can be useful for algorithms that use a
2037   dictionary as a bag of "to do" items and repeatedly need to pick one
2038   item.  Such algorithms normally end up running in quadratic time;
2039   using popitem() they can usually be made to run in linear time.
2041 Standard library
2043 - In the time module, the time argument to the functions strftime,
2044   localtime, gmtime, asctime and ctime is now optional, defaulting to
2045   the current time (in the local timezone).
2047 - The ftplib module now defaults to passive mode, which is deemed a
2048   more useful default given that clients are often inside firewalls
2049   these days.  Note that this could break if ftplib is used to connect
2050   to a *server* that is inside a firewall, from outside; this is
2051   expected to be a very rare situation.  To fix that, you can call
2052   ftp.set_pasv(0).
2054 - The module site now treats .pth files not only for path configuration,
2055   but also supports extensions to the initialization code: Lines starting
2056   with import are executed.
2058 - There's a new module, warnings, which implements a mechanism for
2059   issuing and filtering warnings.  There are some new built-in
2060   exceptions that serve as warning categories, and a new command line
2061   option, -W, to control warnings (e.g. -Wi ignores all warnings, -We
2062   turns warnings into errors).  warnings.warn(message[, category])
2063   issues a warning message; this can also be called from C as
2064   PyErr_Warn(category, message).
2066 - A new module xreadlines was added.  This exports a single factory
2067   function, xreadlines().  The intention is that this code is the
2068   absolutely fastest way to iterate over all lines in an open
2069   file(-like) object:
2071   import xreadlines
2072   for line in xreadlines.xreadlines(file):
2073       ...do something to line...
2075   This is equivalent to the previous the speed record holder using
2076   file.readlines(sizehint).  Note that if file is a real file object
2077   (as opposed to a file-like object), this is equivalent:
2079   for line in file.xreadlines():
2080       ...do something to line...
2082 - The bisect module has new functions bisect_left, insort_left,
2083   bisect_right and insort_right.  The old names bisect and insort
2084   are now aliases for bisect_right and insort_right.  XXX_right
2085   and XXX_left methods differ in what happens when the new element
2086   compares equal to one or more elements already in the list:  the
2087   XXX_left methods insert to the left, the XXX_right methods to the
2088   right.  Code that doesn't care where equal elements end up should
2089   continue to use the old, short names ("bisect" and "insort").
2091 - The new curses.panel module wraps the panel library that forms part
2092   of SYSV curses and ncurses.  Contributed by Thomas Gellekum.
2094 - The SocketServer module now sets the allow_reuse_address flag by
2095   default in the TCPServer class.
2097 - A new function, sys._getframe(), returns the stack frame pointer of
2098   the caller.  This is intended only as a building block for
2099   higher-level mechanisms such as string interpolation.
2101 - The pyexpat module supports a number of new handlers, which are
2102   available only in expat 1.2. If invocation of a callback fails, it
2103   will report an additional frame in the traceback. Parser objects
2104   participate now in garbage collection. If expat reports an unknown
2105   encoding, pyexpat will try to use a Python codec; that works only
2106   for single-byte charsets. The parser type objects is exposed as
2107   XMLParserObject.
2109 - xml.dom now offers standard definitions for symbolic node type and
2110   exception code constants, and a hierarchy of DOM exceptions. minidom
2111   was adjusted to use them.
2113 - The conformance of xml.dom.minidom to the DOM specification was
2114   improved. It detects a number of additional error cases; the
2115   previous/next relationship works even when the tree is modified;
2116   Node supports the normalize() method; NamedNodeMap, DocumentType and
2117   DOMImplementation classes were added; Element supports the
2118   hasAttribute and hasAttributeNS methods; and Text supports the splitText
2119   method.
2121 Build issues
2123 - For Unix (and Unix-compatible) builds, configuration and building of
2124   extension modules is now greatly automated.  Rather than having to
2125   edit the Modules/Setup file to indicate which modules should be
2126   built and where their include files and libraries are, a
2127   distutils-based setup.py script now takes care of building most
2128   extension modules.  All extension modules built this way are built
2129   as shared libraries.  Only a few modules that must be linked
2130   statically are still listed in the Setup file; you won't need to
2131   edit their configuration.
2133 - Python should now build out of the box on Cygwin.  If it doesn't,
2134   mail to Jason Tishler (jlt63 at users.sourceforge.net).
2136 - Python now always uses its own (renamed) implementation of getopt()
2137   -- there's too much variation among C library getopt()
2138   implementations.
2140 - C++ compilers are better supported; the CXX macro is always set to a
2141   C++ compiler if one is found.
2143 Windows changes
2145 - select module:  By default under Windows, a select() call
2146   can specify no more than 64 sockets.  Python now boosts
2147   this Microsoft default to 512.  If you need even more than
2148   that, see the MS docs (you'll need to #define FD_SETSIZE
2149   and recompile Python from source).
2151 - Support for Windows 3.1, DOS and OS/2 is gone.  The Lib/dos-8x3
2152   subdirectory is no more!
2155 What's New in Python 2.0?
2156 =========================
2158 Below is a list of all relevant changes since release 1.6.  Older
2159 changes are in the file HISTORY.  If you are making the jump directly
2160 from Python 1.5.2 to 2.0, make sure to read the section for 1.6 in the
2161 HISTORY file!  Many important changes listed there.
2163 Alternatively, a good overview of the changes between 1.5.2 and 2.0 is
2164 the document "What's New in Python 2.0" by Kuchling and Moshe Zadka:
2165 http://starship.python.net/crew/amk/python/writing/new-python/.
2167 --Guido van Rossum (home page: http://www.pythonlabs.com/~guido/)
2169 ======================================================================
2171 What's new in 2.0 (since release candidate 1)?
2172 ==============================================
2174 Standard library
2176 - The copy_reg module was modified to clarify its intended use: to
2177   register pickle support for extension types, not for classes.
2178   pickle() will raise a TypeError if it is passed a class.
2180 - Fixed a bug in gettext's "normalize and expand" code that prevented
2181   it from finding an existing .mo file.
2183 - Restored support for HTTP/0.9 servers in httplib.
2185 - The math module was changed to stop raising OverflowError in case of
2186   underflow, and return 0 instead in underflow cases.  Whether Python
2187   used to raise OverflowError in case of underflow was platform-
2188   dependent (it did when the platform math library set errno to ERANGE
2189   on underflow).
2191 - Fixed a bug in StringIO that occurred when the file position was not
2192   at the end of the file and write() was called with enough data to
2193   extend past the end of the file.
2195 - Fixed a bug that caused Tkinter error messages to get lost on
2196   Windows.  The bug was fixed by replacing direct use of
2197   interp->result with Tcl_GetStringResult(interp).
2199 - Fixed bug in urllib2 that caused it to fail when it received an HTTP
2200   redirect response.
2202 - Several changes were made to distutils: Some debugging code was
2203   removed from util.  Fixed the installer used when an external zip
2204   program (like WinZip) is not found; the source code for this
2205   installer is in Misc/distutils.  check_lib() was modified to behave
2206   more like AC_CHECK_LIB by add other_libraries() as a parameter.  The
2207   test for whether installed modules are on sys.path was changed to
2208   use both normcase() and normpath().
2210 - Several minor bugs were fixed in the xml package (the minidom,
2211   pulldom, expatreader, and saxutils modules).
2213 - The regression test driver (regrtest.py) behavior when invoked with
2214   -l changed: It now reports a count of objects that are recognized as
2215   garbage but not freed by the garbage collector.
2217 - The regression test for the math module was changed to test
2218   exceptional behavior when the test is run in verbose mode.  Python
2219   cannot yet guarantee consistent exception behavior across platforms,
2220   so the exception part of test_math is run only in verbose mode, and
2221   may fail on your platform.
2223 Internals
2225 - PyOS_CheckStack() has been disabled on Win64, where it caused
2226   test_sre to fail.
2228 Build issues
2230 - Changed compiler flags, so that gcc is always invoked with -Wall and
2231   -Wstrict-prototypes.  Users compiling Python with GCC should see
2232   exactly one warning, except if they have passed configure the
2233   --with-pydebug flag.  The expected warning is for getopt() in
2234   Modules/main.c.  This warning will be fixed for Python 2.1.
2236 - Fixed configure to add -threads argument during linking on OSF1.
2238 Tools and other miscellany
2240 - The compiler in Tools/compiler was updated to support the new
2241   language features introduced in 2.0: extended print statement, list
2242   comprehensions, and augmented assignments.  The new compiler should
2243   also be backwards compatible with Python 1.5.2; the compiler will
2244   always generate code for the version of the interpreter it runs
2245   under.
2247 What's new in 2.0 release candidate 1 (since beta 2)?
2248 =====================================================
2250 What is release candidate 1?
2252 We believe that release candidate 1 will fix all known bugs that we
2253 intend to fix for the 2.0 final release.  This release should be a bit
2254 more stable than the previous betas.  We would like to see even more
2255 widespread testing before the final release, so we are producing this
2256 release candidate.  The final release will be exactly the same unless
2257 any show-stopping (or brown bag) bugs are found by testers of the
2258 release candidate.
2260 All the changes since the last beta release are bug fixes or changes
2261 to support building Python for specific platforms.
2263 Core language, builtins, and interpreter
2265 - A bug that caused crashes when __coerce__ was used with augmented
2266   assignment, e.g. +=, was fixed.
2268 - Raise ZeroDivisionError when raising zero to a negative number,
2269   e.g. 0.0 ** -2.0.  Note that math.pow is unrelated to the builtin
2270   power operator and the result of math.pow(0.0, -2.0) will vary by
2271   platform.  On Linux, it raises a ValueError.
2273 - A bug in Unicode string interpolation was fixed that occasionally
2274   caused errors with formats including "%%".  For example, the
2275   following expression "%% %s" % u"abc" no longer raises a TypeError.
2277 - Compilation of deeply nested expressions raises MemoryError instead
2278   of SyntaxError, e.g. eval("[" * 50 + "]" * 50).
2280 - In 2.0b2 on Windows, the interpreter wrote .pyc files in text mode,
2281   rendering them useless.  They are now written in binary mode again.
2283 Standard library
2285 - Keyword arguments are now accepted for most pattern and match object
2286   methods in SRE, the standard regular expression engine.
2288 - In SRE, fixed error with negative lookahead and lookbehind that
2289   manifested itself as a runtime error in patterns like "(?<!abc)(def)".
2291 - Several bugs in the Unicode handling and error handling in _tkinter
2292   were fixed.
2294 - Fix memory management errors in Merge() and Tkapp_Call() routines.
2296 - Several changes were made to cStringIO to make it compatible with
2297   the file-like object interface and with StringIO.  If operations are
2298   performed on a closed object, an exception is raised.  The truncate
2299   method now accepts a position argument and readline accepts a size
2300   argument.
2302 - There were many changes made to the linuxaudiodev module and its
2303   test suite; as a result, a short, unexpected audio sample should now
2304   play when the regression test is run.
2306   Note that this module is named poorly, because it should work
2307   correctly on any platform that supports the Open Sound System
2308   (OSS).
2310   The module now raises exceptions when errors occur instead of
2311   crashing.  It also defines the AFMT_A_LAW format (logarithmic A-law
2312   audio) and defines a getptr() method that calls the
2313   SNDCTL_DSP_GETxPTR ioctl defined in the OSS Programmer's Guide.
2315 - The library_version attribute, introduced in an earlier beta, was
2316   removed because it can not be supported with early versions of the C
2317   readline library, which provides no way to determine the version at
2318   compile-time.
2320 - The binascii module is now enabled on Win64.
2322 - tokenize.py no longer suffers "recursion depth" errors when parsing
2323   programs with very long string literals.
2325 Internals
2327 - Fixed several buffer overflow vulnerabilities in calculate_path(),
2328   which is called when the interpreter starts up to determine where
2329   the standard library is installed.  These vulnerabilities affect all
2330   previous versions of Python and can be exploited by setting very
2331   long values for PYTHONHOME or argv[0].  The risk is greatest for a
2332   setuid Python script, although use of the wrapper in
2333   Misc/setuid-prog.c will eliminate the vulnerability.
2335 - Fixed garbage collection bugs in instance creation that were
2336   triggered when errors occurred during initialization.  The solution,
2337   applied in cPickle and in PyInstance_New(), is to call
2338   PyObject_GC_Init() after the initialization of the object's
2339   container attributes is complete.
2341 - pyexpat adds definitions of PyModule_AddStringConstant and
2342   PyModule_AddObject if the Python version is less than 2.0, which
2343   provides compatibility with PyXML on Python 1.5.2.
2345 - If the platform has a bogus definition for LONG_BIT (the number of
2346   bits in a long), an error will be reported at compile time.
2348 - Fix bugs in _PyTuple_Resize() which caused hard-to-interpret garbage
2349   collection crashes and possibly other, unreported crashes.
2351 - Fixed a memory leak in _PyUnicode_Fini().
2353 Build issues
2355 - configure now accepts a --with-suffix option that specifies the
2356   executable suffix.  This is useful for builds on Cygwin and Mac OS
2357   X, for example.
2359 - The mmap.PAGESIZE constant is now initialized using sysconf when
2360   possible, which eliminates a dependency on -lucb for Reliant UNIX.
2362 - The md5 file should now compile on all platforms.
2364 - The select module now compiles on platforms that do not define
2365   POLLRDNORM and related constants.
2367 - Darwin (Mac OS X):  Initial support for static builds on this
2368   platform.
2370 - BeOS: A number of changes were made to the build and installation
2371   process.  ar-fake now operates on a directory of object files.
2372   dl_export.h is gone, and its macros now appear on the mwcc command
2373   line during build on PPC BeOS.
2375 - Platform directory in lib/python2.0 is "plat-beos5" (or
2376   "plat-beos4", if building on BeOS 4.5), rather than "plat-beos".
2378 - Cygwin: Support for shared libraries, Tkinter, and sockets.
2380 - SunOS 4.1.4_JL: Fix test for directory existence in configure.
2382 Tools and other miscellany
2384 - Removed debugging prints from main used with freeze.
2386 - IDLE auto-indent no longer crashes when it encounters Unicode
2387   characters.
2389 What's new in 2.0 beta 2 (since beta 1)?
2390 ========================================
2392 Core language, builtins, and interpreter
2394 - Add support for unbounded ints in %d,i,u,x,X,o formats; for example
2395   "%d" % 2L**64 == "18446744073709551616".
2397 - Add -h and -V command line options to print the usage message and
2398   Python version number and exit immediately.
2400 - eval() and exec accept Unicode objects as code parameters.
2402 - getattr() and setattr() now also accept Unicode objects for the
2403   attribute name, which are converted to strings using the default
2404   encoding before lookup.
2406 - Multiplication on string and Unicode now does proper bounds
2407   checking; e.g. 'a' * 65536 * 65536 will raise ValueError, "repeated
2408   string is too long."
2410 - Better error message when continue is found in try statement in a
2411   loop.
2414 Standard library and extensions
2416 - socket module: the OpenSSL code now adds support for RAND_status()
2417   and EGD (Entropy Gathering Device).
2419 - array: reverse() method of array now works.  buffer_info() now does
2420   argument checking; it still takes no arguments.
2422 - asyncore/asynchat: Included most recent version from Sam Rushing.
2424 - cgi: Accept '&' or ';' as separator characters when parsing form data.
2426 - CGIHTTPServer: Now works on Windows (and perhaps even Mac).
2428 - ConfigParser: When reading the file, options spelled in upper case
2429   letters are now correctly converted to lowercase.
2431 - copy: Copy Unicode objects atomically.
2433 - cPickle: Fail gracefully when copy_reg can't be imported.
2435 - cStringIO: Implemented readlines() method.
2437 - dbm: Add get() and setdefault() methods to dbm object.  Add constant
2438   `library' to module that names the library used.  Added doc strings
2439   and method names to error messages.  Uses configure to determine
2440   which ndbm.h file to include; Berkeley DB's nbdm and GDBM's ndbm is
2441   now available options.
2443 - distutils: Update to version 0.9.3.
2445 - dl: Add several dl.RTLD_ constants.
2447 - fpectl: Now supported on FreeBSD.
2449 - gc: Add DEBUG_SAVEALL option.  When enabled all garbage objects
2450   found by the collector will be saved in gc.garbage.  This is useful
2451   for debugging a program that creates reference cycles.
2453 - httplib: Three changes: Restore support for set_debuglevel feature
2454   of HTTP class.  Do not close socket on zero-length response.  Do not
2455   crash when server sends invalid content-length header.
2457 - mailbox: Mailbox class conforms better to qmail specifications.
2459 - marshal: When reading a short, sign-extend on platforms where shorts
2460   are bigger than 16 bits.  When reading a long, repair the unportable
2461   sign extension that was being done for 64-bit machines.  (It assumed
2462   that signed right shift sign-extends.)
2464 - operator: Add contains(), invert(), __invert__() as aliases for
2465   __contains__(), inv(), and __inv__() respectively.
2467 - os: Add support for popen2() and popen3() on all platforms where
2468   fork() exists.  (popen4() is still in the works.)
2470 - os: (Windows only:) Add startfile() function that acts like double-
2471   clicking on a file in Explorer (or passing the file name to the
2472   DOS "start" command).
2474 - os.path: (Windows, DOS:) Treat trailing colon correctly in
2475   os.path.join.  os.path.join("a:", "b") yields "a:b".
2477 - pickle: Now raises ValueError when an invalid pickle that contains
2478   a non-string repr where a string repr was expected.  This behavior
2479   matches cPickle.
2481 - posixfile: Remove broken __del__() method.
2483 - py_compile: support CR+LF line terminators in source file.
2485 - readline: Does not immediately exit when ^C is hit when readline and
2486   threads are configured.  Adds definition of rl_library_version.  (The
2487   latter addition requires GNU readline 2.2 or later.)
2489 - rfc822: Domain literals returned by AddrlistClass method
2490   getdomainliteral() are now properly wrapped in brackets.
2492 - site: sys.setdefaultencoding() should only be called in case the
2493   standard default encoding ("ascii") is changed. This saves quite a
2494   few cycles during startup since the first call to
2495   setdefaultencoding() will initialize the codec registry and the
2496   encodings package.
2498 - socket: Support for size hint in readlines() method of object returned
2499   by makefile().
2501 - sre: Added experimental expand() method to match objects.  Does not
2502   use buffer interface on Unicode strings.  Does not hang if group id
2503   is followed by whitespace.
2505 - StringIO: Size hint in readlines() is now supported as documented.
2507 - struct: Check ranges for bytes and shorts.
2509 - urllib: Improved handling of win32 proxy settings. Fixed quote and
2510   quote_plus functions so that the always encode a comma.
2512 - Tkinter: Image objects are now guaranteed to have unique ids.  Set
2513   event.delta to zero if Tk version doesn't support mousewheel.
2514   Removed some debugging prints.
2516 - UserList: now implements __contains__().
2518 - webbrowser: On Windows, use os.startfile() instead of os.popen(),
2519   which works around a bug in Norton AntiVirus 2000 that leads directly
2520   to a Blue Screen freeze.
2522 - xml: New version detection code allows PyXML to override standard
2523   XML package if PyXML version is greater than 0.6.1.
2525 - xml.dom: DOM level 1 support for basic XML.  Includes xml.dom.minidom
2526   (conventional DOM), and xml.dom.pulldom, which allows building the DOM
2527   tree only for nodes which are sufficiently interesting to a specific
2528   application.  Does not provide the HTML-specific extensions.  Still
2529   undocumented.
2531 - xml.sax: SAX 2 support for Python, including all the handler
2532   interfaces needed to process XML 1.0 compliant XML.  Some
2533   documentation is already available.
2535 - pyexpat: Renamed to xml.parsers.expat since this is part of the new,
2536   packagized XML support.
2539 C API
2541 - Add three new convenience functions for module initialization --
2542   PyModule_AddObject(), PyModule_AddIntConstant(), and
2543   PyModule_AddStringConstant().
2545 - Cleaned up definition of NULL in C source code; all definitions were
2546   removed and add #error to Python.h if NULL isn't defined after
2547   #include of stdio.h.
2549 - Py_PROTO() macros that were removed in 2.0b1 have been restored for
2550   backwards compatibility (at the source level) with old extensions.
2552 - A wrapper API was added for signal() and sigaction().  Instead of
2553   either function, always use PyOS_getsig() to get a signal handler
2554   and PyOS_setsig() to set one.  A new convenience typedef
2555   PyOS_sighandler_t is defined for the type of signal handlers.
2557 - Add PyString_AsStringAndSize() function that provides access to the
2558   internal data buffer and size of a string object -- or the default
2559   encoded version of a Unicode object.
2561 - PyString_Size() and PyString_AsString() accept Unicode objects.
2563 - The standard header <limits.h> is now included by Python.h (if it
2564   exists).  INT_MAX and LONG_MAX will always be defined, even if
2565   <limits.h> is not available.
2567 - PyFloat_FromString takes a second argument, pend, that was
2568   effectively useless.  It is now officially useless but preserved for
2569   backwards compatibility.  If the pend argument is not NULL, *pend is
2570   set to NULL.
2572 - PyObject_GetAttr() and PyObject_SetAttr() now accept Unicode objects
2573   for the attribute name.  See note on getattr() above.
2575 - A few bug fixes to argument processing for Unicode.
2576   PyArg_ParseTupleAndKeywords() now accepts "es#" and "es".
2577   PyArg_Parse() special cases "s#" for Unicode objects; it returns a
2578   pointer to the default encoded string data instead of to the raw
2579   UTF-16.
2581 - Py_BuildValue accepts B format (for bgen-generated code).
2584 Internals
2586 - On Unix, fix code for finding Python installation directory so that
2587   it works when argv[0] is a relative path.
2589 - Added a true unicode_internal_encode() function and fixed the
2590   unicode_internal_decode function() to support Unicode objects directly
2591   rather than by generating a copy of the object.
2593 - Several of the internal Unicode tables are much smaller now, and
2594   the source code should be much friendlier to weaker compilers.
2596 - In the garbage collector: Fixed bug in collection of tuples.  Fixed
2597   bug that caused some instances to be removed from the container set
2598   while they were still live.  Fixed parsing in gc.set_debug() for
2599   platforms where sizeof(long) > sizeof(int).
2601 - Fixed refcount problem in instance deallocation that only occurred
2602   when Py_REF_DEBUG was defined and Py_TRACE_REFS was not.
2604 - On Windows, getpythonregpath is now protected against null data in
2605   registry key.
2607 - On Unix, create .pyc/.pyo files with O_EXCL flag to avoid a race
2608   condition.
2611 Build and platform-specific issues
2613 - Better support of GNU Pth via --with-pth configure option.
2615 - Python/C API now properly exposed to dynamically-loaded extension
2616   modules on Reliant UNIX.
2618 - Changes for the benefit of SunOS 4.1.4 (really!).  mmapmodule.c:
2619   Don't define MS_SYNC to be zero when it is undefined.  Added missing
2620   prototypes in posixmodule.c.
2622 - Improved support for HP-UX build.  Threads should now be correctly
2623   configured (on HP-UX 10.20 and 11.00).
2625 - Fix largefile support on older NetBSD systems and OpenBSD by adding
2626   define for TELL64.
2629 Tools and other miscellany
2631 - ftpmirror: Call to main() is wrapped in if __name__ == "__main__".
2633 - freeze: The modulefinder now works with 2.0 opcodes.
2635 - IDLE:
2636   Move hackery of sys.argv until after the Tk instance has been
2637   created, which allows the application-specific Tkinter
2638   initialization to be executed if present; also pass an explicit
2639   className parameter to the Tk() constructor.
2642 What's new in 2.0 beta 1?
2643 =========================
2645 Source Incompatibilities
2646 ------------------------
2648 None.  Note that 1.6 introduced several incompatibilities with 1.5.2,
2649 such as single-argument append(), connect() and bind(), and changes to
2650 str(long) and repr(float).
2653 Binary Incompatibilities
2654 ------------------------
2656 - Third party extensions built for Python 1.5.x or 1.6 cannot be used
2657 with Python 2.0; these extensions will have to be rebuilt for Python
2658 2.0.
2660 - On Windows, attempting to import a third party extension built for
2661 Python 1.5.x or 1.6 results in an immediate crash; there's not much we
2662 can do about this.  Check your PYTHONPATH environment variable!
2664 - Python bytecode files (*.pyc and *.pyo) are not compatible between
2665 releases.
2668 Overview of Changes Since 1.6
2669 -----------------------------
2671 There are many new modules (including brand new XML support through
2672 the xml package, and i18n support through the gettext module); a list
2673 of all new modules is included below.  Lots of bugs have been fixed.
2675 The process for making major new changes to the language has changed
2676 since Python 1.6.  Enhancements must now be documented by a Python
2677 Enhancement Proposal (PEP) before they can be accepted.
2679 There are several important syntax enhancements, described in more
2680 detail below:
2682   - Augmented assignment, e.g. x += 1
2684   - List comprehensions, e.g. [x**2 for x in range(10)]
2686   - Extended import statement, e.g. import Module as Name
2688   - Extended print statement, e.g. print >> file, "Hello"
2690 Other important changes:
2692   - Optional collection of cyclical garbage
2694 Python Enhancement Proposal (PEP)
2695 ---------------------------------
2697 PEP stands for Python Enhancement Proposal.  A PEP is a design
2698 document providing information to the Python community, or describing
2699 a new feature for Python.  The PEP should provide a concise technical
2700 specification of the feature and a rationale for the feature.
2702 We intend PEPs to be the primary mechanisms for proposing new
2703 features, for collecting community input on an issue, and for
2704 documenting the design decisions that have gone into Python.  The PEP
2705 author is responsible for building consensus within the community and
2706 documenting dissenting opinions.
2708 The PEPs are available at http://python.sourceforge.net/peps/.
2710 Augmented Assignment
2711 --------------------
2713 This must have been the most-requested feature of the past years!
2714 Eleven new assignment operators were added:
2716     += -= *= /= %= **= <<= >>= &= ^= |=
2718 For example,
2720     A += B
2722 is similar to
2724     A = A + B
2726 except that A is evaluated only once (relevant when A is something
2727 like dict[index].attr).
2729 However, if A is a mutable object, A may be modified in place.  Thus,
2730 if A is a number or a string, A += B has the same effect as A = A+B
2731 (except A is only evaluated once); but if a is a list, A += B has the
2732 same effect as A.extend(B)!
2734 Classes and built-in object types can override the new operators in
2735 order to implement the in-place behavior; the not-in-place behavior is
2736 used automatically as a fallback when an object doesn't implement the
2737 in-place behavior.  For classes, the method name is derived from the
2738 method name for the corresponding not-in-place operator by inserting
2739 an 'i' in front of the name, e.g. __iadd__ implements in-place
2740 __add__.
2742 Augmented assignment was implemented by Thomas Wouters.
2745 List Comprehensions
2746 -------------------
2748 This is a flexible new notation for lists whose elements are computed
2749 from another list (or lists).  The simplest form is:
2751     [<expression> for <variable> in <sequence>]
2753 For example, [i**2 for i in range(4)] yields the list [0, 1, 4, 9].
2754 This is more efficient than a for loop with a list.append() call.
2756 You can also add a condition:
2758     [<expression> for <variable> in <sequence> if <condition>]
2760 For example, [w for w in words if w == w.lower()] would yield the list
2761 of words that contain no uppercase characters.  This is more efficient
2762 than a for loop with an if statement and a list.append() call.
2764 You can also have nested for loops and more than one 'if' clause.  For
2765 example, here's a function that flattens a sequence of sequences::
2767     def flatten(seq):
2768         return [x for subseq in seq for x in subseq]
2770     flatten([[0], [1,2,3], [4,5], [6,7,8,9], []])
2772 This prints
2774     [0, 1, 2, 3, 4, 5, 6, 7, 8, 9]
2776 List comprehensions originated as a patch set from Greg Ewing; Skip
2777 Montanaro and Thomas Wouters also contributed.  Described by PEP 202.
2780 Extended Import Statement
2781 -------------------------
2783 Many people have asked for a way to import a module under a different
2784 name.  This can be accomplished like this:
2786     import foo
2787     bar = foo
2788     del foo
2790 but this common idiom gets old quickly.  A simple extension of the
2791 import statement now allows this to be written as follows:
2793     import foo as bar
2795 There's also a variant for 'from ... import':
2797     from foo import bar as spam
2799 This also works with packages; e.g. you can write this:
2801     import test.regrtest as regrtest
2803 Note that 'as' is not a new keyword -- it is recognized only in this
2804 context (this is only possible because the syntax for the import
2805 statement doesn't involve expressions).
2807 Implemented by Thomas Wouters.  Described by PEP 221.
2810 Extended Print Statement
2811 ------------------------
2813 Easily the most controversial new feature, this extension to the print
2814 statement adds an option to make the output go to a different file
2815 than the default sys.stdout.
2817 For example, to write an error message to sys.stderr, you can now
2818 write:
2820     print >> sys.stderr, "Error: bad dog!"
2822 As a special feature, if the expression used to indicate the file
2823 evaluates to None, the current value of sys.stdout is used.  Thus:
2825     print >> None, "Hello world"
2827 is equivalent to
2829     print "Hello world"
2831 Design and implementation by Barry Warsaw.  Described by PEP 214.
2834 Optional Collection of Cyclical Garbage
2835 ---------------------------------------
2837 Python is now equipped with a garbage collector that can hunt down
2838 cyclical references between Python objects.  It's no replacement for
2839 reference counting; in fact, it depends on the reference counts being
2840 correct, and decides that a set of objects belong to a cycle if all
2841 their reference counts can be accounted for from their references to
2842 each other.  This devious scheme was first proposed by Eric Tiedemann,
2843 and brought to implementation by Neil Schemenauer.
2845 There's a module "gc" that lets you control some parameters of the
2846 garbage collection.  There's also an option to the configure script
2847 that lets you enable or disable the garbage collection.  In 2.0b1,
2848 it's on by default, so that we (hopefully) can collect decent user
2849 experience with this new feature.  There are some questions about its
2850 performance.  If it proves to be too much of a problem, we'll turn it
2851 off by default in the final 2.0 release.
2854 Smaller Changes
2855 ---------------
2857 A new function zip() was added.  zip(seq1, seq2, ...) is equivalent to
2858 map(None, seq1, seq2, ...) when the sequences have the same length;
2859 i.e. zip([1,2,3], [10,20,30]) returns [(1,10), (2,20), (3,30)].  When
2860 the lists are not all the same length, the shortest list wins:
2861 zip([1,2,3], [10,20]) returns [(1,10), (2,20)].  See PEP 201.
2863 sys.version_info is a tuple (major, minor, micro, level, serial).
2865 Dictionaries have an odd new method, setdefault(key, default).
2866 dict.setdefault(key, default) returns dict[key] if it exists; if not,
2867 it sets dict[key] to default and returns that value.  Thus:
2869     dict.setdefault(key, []).append(item)
2871 does the same work as this common idiom:
2873     if not dict.has_key(key):
2874         dict[key] = []
2875     dict[key].append(item)
2877 There are two new variants of SyntaxError that are raised for
2878 indentation-related errors: IndentationError and TabError.
2880 Changed \x to consume exactly two hex digits; see PEP 223.  Added \U
2881 escape that consumes exactly eight hex digits.
2883 The limits on the size of expressions and file in Python source code
2884 have been raised from 2**16 to 2**32.  Previous versions of Python
2885 were limited because the maximum argument size the Python VM accepted
2886 was 2**16.  This limited the size of object constructor expressions,
2887 e.g. [1,2,3] or {'a':1, 'b':2}, and the size of source files.  This
2888 limit was raised thanks to a patch by Charles Waldman that effectively
2889 fixes the problem.  It is now much more likely that you will be
2890 limited by available memory than by an arbitrary limit in Python.
2892 The interpreter's maximum recursion depth can be modified by Python
2893 programs using sys.getrecursionlimit and sys.setrecursionlimit.  This
2894 limit is the maximum number of recursive calls that can be made by
2895 Python code.  The limit exists to prevent infinite recursion from
2896 overflowing the C stack and causing a core dump.  The default value is
2897 1000.  The maximum safe value for a particular platform can be found
2898 by running Misc/find_recursionlimit.py.
2900 New Modules and Packages
2901 ------------------------
2903 atexit - for registering functions to be called when Python exits.
2905 imputil - Greg Stein's alternative API for writing custom import
2906 hooks.
2908 pyexpat - an interface to the Expat XML parser, contributed by Paul
2909 Prescod.
2911 xml - a new package with XML support code organized (so far) in three
2912 subpackages: xml.dom, xml.sax, and xml.parsers.  Describing these
2913 would fill a volume.  There's a special feature whereby a
2914 user-installed package named _xmlplus overrides the standard
2915 xmlpackage; this is intended to give the XML SIG a hook to distribute
2916 backwards-compatible updates to the standard xml package.
2918 webbrowser - a platform-independent API to launch a web browser.
2921 Changed Modules
2922 ---------------
2924 array -- new methods for array objects: count, extend, index, pop, and
2925 remove
2927 binascii -- new functions b2a_hex and a2b_hex that convert between
2928 binary data and its hex representation
2930 calendar -- Many new functions that support features including control
2931 over which day of the week is the first day, returning strings instead
2932 of printing them.  Also new symbolic constants for days of week,
2933 e.g. MONDAY, ..., SUNDAY.
2935 cgi -- FieldStorage objects have a getvalue method that works like a
2936 dictionary's get method and returns the value attribute of the object.
2938 ConfigParser -- The parser object has new methods has_option,
2939 remove_section, remove_option, set, and write.  They allow the module
2940 to be used for writing config files as well as reading them.
2942 ftplib -- ntransfercmd(), transfercmd(), and retrbinary() all now
2943 optionally support the RFC 959 REST command.
2945 gzip -- readline and readlines now accept optional size arguments
2947 httplib -- New interfaces and support for HTTP/1.1 by Greg Stein.  See
2948 the module doc strings for details.
2950 locale -- implement getdefaultlocale for Win32 and Macintosh
2952 marshal -- no longer dumps core when marshaling deeply nested or
2953 recursive data structures
2955 os -- new functions isatty, seteuid, setegid, setreuid, setregid
2957 os/popen2 -- popen2/popen3/popen4 support under Windows.  popen2/popen3
2958 support under Unix.
2960 os/pty -- support for openpty and forkpty
2962 os.path -- fix semantics of os.path.commonprefix
2964 smtplib -- support for sending very long messages
2966 socket -- new function getfqdn()
2968 readline -- new functions to read, write and truncate history files.
2969 The readline section of the library reference manual contains an
2970 example.
2972 select -- add interface to poll system call
2974 shutil -- new copyfileobj function
2976 SimpleHTTPServer, CGIHTTPServer -- Fix problems with buffering in the
2977 HTTP server.
2979 Tkinter -- optimization of function flatten
2981 urllib -- scans environment variables for proxy configuration,
2982 e.g. http_proxy.
2984 whichdb -- recognizes dumbdbm format
2987 Obsolete Modules
2988 ----------------
2990 None.  However note that 1.6 made a whole slew of modules obsolete:
2991 stdwin, soundex, cml, cmpcache, dircache, dump, find, grep, packmail,
2992 poly, zmod, strop, util, whatsound.
2995 Changed, New, Obsolete Tools
2996 ----------------------------
2998 None.
3001 C-level Changes
3002 ---------------
3004 Several cleanup jobs were carried out throughout the source code.
3006 All C code was converted to ANSI C; we got rid of all uses of the
3007 Py_PROTO() macro, which makes the header files a lot more readable.
3009 Most of the portability hacks were moved to a new header file,
3010 pyport.h; several other new header files were added and some old
3011 header files were removed, in an attempt to create a more rational set
3012 of header files.  (Few of these ever need to be included explicitly;
3013 they are all included by Python.h.)
3015 Trent Mick ensured portability to 64-bit platforms, under both Linux
3016 and Win64, especially for the new Intel Itanium processor.  Mick also
3017 added large file support for Linux64 and Win64.
3019 The C APIs to return an object's size have been update to consistently
3020 use the form PyXXX_Size, e.g. PySequence_Size and PyDict_Size.  In
3021 previous versions, the abstract interfaces used PyXXX_Length and the
3022 concrete interfaces used PyXXX_Size.  The old names,
3023 e.g. PyObject_Length, are still available for backwards compatibility
3024 at the API level, but are deprecated.
3026 The PyOS_CheckStack function has been implemented on Windows by
3027 Fredrik Lundh.  It prevents Python from failing with a stack overflow
3028 on Windows.
3030 The GC changes resulted in creation of two new slots on object,
3031 tp_traverse and tp_clear.  The augmented assignment changes result in
3032 the creation of a new slot for each in-place operator.
3034 The GC API creates new requirements for container types implemented in
3035 C extension modules.  See Include/objimpl.h for details.
3037 PyErr_Format has been updated to automatically calculate the size of
3038 the buffer needed to hold the formatted result string.  This change
3039 prevents crashes caused by programmer error.
3041 New C API calls: PyObject_AsFileDescriptor, PyErr_WriteUnraisable.
3043 PyRun_AnyFileEx, PyRun_SimpleFileEx, PyRun_FileEx -- New functions
3044 that are the same as their non-Ex counterparts except they take an
3045 extra flag argument that tells them to close the file when done.
3047 XXX There were other API changes that should be fleshed out here.
3050 Windows Changes
3051 ---------------
3053 New popen2/popen3/peopen4 in os module (see Changed Modules above).
3055 os.popen is much more usable on Windows 95 and 98.  See Microsoft
3056 Knowledge Base article Q150956.  The Win9x workaround described there
3057 is implemented by the new w9xpopen.exe helper in the root of your
3058 Python installation.  Note that Python uses this internally; it is not
3059 a standalone program.
3061 Administrator privileges are no longer required to install Python
3062 on Windows NT or Windows 2000.  If you have administrator privileges,
3063 Python's registry info will be written under HKEY_LOCAL_MACHINE.
3064 Otherwise the installer backs off to writing Python's registry info
3065 under HKEY_CURRENT_USER.  The latter is sufficient for all "normal"
3066 uses of Python, but will prevent some advanced uses from working
3067 (for example, running a Python script as an NT service, or possibly
3068 from CGI).
3070 [This was new in 1.6] The installer no longer runs a separate Tcl/Tk
3071 installer; instead, it installs the needed Tcl/Tk files directly in the
3072 Python directory.  If you already have a Tcl/Tk installation, this
3073 wastes some disk space (about 4 Megs) but avoids problems with
3074 conflicting Tcl/Tk installations, and makes it much easier for Python
3075 to ensure that Tcl/Tk can find all its files.
3077 [This was new in 1.6] The Windows installer now installs by default in
3078 \Python20\ on the default volume, instead of \Program Files\Python-2.0\.
3081 Updates to the changes between 1.5.2 and 1.6
3082 --------------------------------------------
3084 The 1.6 NEWS file can't be changed after the release is done, so here
3085 is some late-breaking news:
3087 New APIs in locale.py: normalize(), getdefaultlocale(), resetlocale(),
3088 and changes to getlocale() and setlocale().
3090 The new module is now enabled per default.
3092 It is not true that the encodings codecs cannot be used for normal
3093 strings: the string.encode() (which is also present on 8-bit strings
3094 !) allows using them for 8-bit strings too, e.g. to convert files from
3095 cp1252 (Windows) to latin-1 or vice-versa.
3097 Japanese codecs are available from Tamito KAJIYAMA:
3098 http://pseudo.grad.sccs.chukyo-u.ac.jp/~kajiyama/python/
3101 ======================================================================