cache: Optmise cache handling by more quickly detecting an invalid cache, only saving...
[bitbake.git] / ChangeLog
1 Changes in Bitbake 1.9.x:
2         - Add PE (Package Epoch) support from Philipp Zabel (pH5)
3         - Treat python functions the same as shell functions for logging
4         - Use TMPDIR/anonfunc as a __anonfunc temp directory (T)
5         - Catch truncated cache file errors
6         - Allow operations other than assignment on flag variables
7         - Add code to handle inter-task dependencies
8         - Fix cache errors when generation dotGraphs
9         - Make sure __inherit_cache is updated before calling include() (from Michael Krelin)
10         - Fix bug when target was in ASSUME_PROVIDED (#2236)
11         - Raise ParseError for filenames with multiple underscores instead of infinitely looping (#2062)
12         - Fix invalid regexp in BBMASK error handling (missing import) (#1124)
13         - Promote certain warnings from debug to note 2 level
14         - Update manual
15         - Correctly redirect stdin when forking
16         - If parsing errors are found, exit, too many users miss the errors
17         - Remove supriours PREFERRED_PROVIDER warnings
18         - svn fetcher: Add _buildsvncommand function
19         - Improve certain error messages
20         - Rewrite svn fetcher to make adding extra operations easier 
21           as part of future SRCDATE="now" fixes
22           (requires new FETCHCMD_svn definition in bitbake.conf)
23         - Change SVNDIR layout to be more unique (fixes #2644 and #2624)
24         - Add ConfigParsed Event after configuration parsing is complete
25         - Add SRCREV support for svn fetcher
26         - data.emit_var() - only call getVar if we need the variable
27         - Stop generating the A variable (seems to be legacy code)
28         - Make sure intertask depends get processed correcting in recursive depends
29         - Add pn-PN to overrides when evaluating PREFERRED_VERSION
30         - Improve the progress indicator by skipping tasks that have 
31           already run before starting the build rather than during it
32         - Add profiling option (-P)
33         - Add BB_SRCREV_POLICY variable (clear or cache) to control SRCREV cache
34         - Add SRCREV_FORMAT support
35         - Fix local fetcher's localpath return values
36         - Apply OVERRIDES before performing immediate expansions
37         - Allow the -b -e option combination to take regular expressions
38         - Fix handling of variables with expansion in the name using _append/_prepend
39           e.g. RRECOMMENDS_${PN}_append_xyz = "abc"
40         - Add plain message function to bb.msg
41         - Sort the list of providers before processing so dependency problems are 
42           reproducible rather than effectively random
43         - Fix/improve bitbake -s output
44         - Add locking for fetchers so only one tries to fetch a given file at a given time
45         - Fix int(0)/None confusion in runqueue.py which causes random gaps in dependency chains          
46         - Expand data in addtasks
47         - Print the list of missing DEPENDS,RDEPENDS for the "No buildable providers available for required...."
48           error message.
49         - Rework add_task to be more efficient (6% speedup, 7% number of function calls reduction)
50         - Sort digraph output to make builds more reproducible
51         - Split expandKeys into two for loops to benefit from the expand_cache (12% speedup)
52         - runqueue.py: Fix idepends handling to avoid dependency errors
53         - Clear the terminal TOSTOP flag if set (and warn the user)
54         - Fix regression from r653 and make SRCDATE/CVSDATE work for packages again
55         - Fix a bug in bb.decodeurl where http://some.where.com/somefile.tgz decoded to host="" (#1530)
56         - Warn about malformed PREFERRED_PROVIDERS (#1072)
57         - Add support for BB_NICE_LEVEL option (#1627)
58         - Psyco is used only on x86 as there is no support for other architectures.
59         - Sort initial providers list by default preference (#1145, #2024)
60         - Improve provider sorting so prefered versions have preference over latest versions (#768)
61         - Detect builds of tasks with overlapping providers and warn (will become a fatal error) (#1359)
62         - Add MULTI_PROVIDER_WHITELIST variable to allow known safe multiple providers to be listed
63         - Handle paths in svn fetcher module parameter
64         - Support the syntax "export VARIABLE"
65         - Add bzr fetcher
66         - Add support for cleaning directories before a task in the form:
67           do_taskname[cleandirs] = "dir"
68         - bzr fetcher tweaks from Robert Schuster (#2913)
69         - Add mercurial (hg) fetcher from Robert Schuster (#2913)
70         - Don't add duplicates to BBPATH
71         - Fix preferred_version return values (providers.py)
72         - Fix 'depends' flag splitting
73         - Fix unexport handling (#3135)
74         - Add bb.copyfile function similar to bb.movefile (and improve movefile error reporting)
75         - Allow multiple options for deptask flag
76         - Use git-fetch instead of git-pull removing any need for merges when 
77           fetching (we don't care about the index). Fixes fetch errors.
78         - Add BB_GENERATE_MIRROR_TARBALLS option, set to 0 to make git fetches 
79           faster at the expense of not creating mirror tarballs.
80         - SRCREV handling updates, improvements and fixes from Poky
81         - Add bb.utils.lockfile() and bb.utils.unlockfile() from Poky
82         - Add support for task selfstamp and lockfiles flags
83         - Disable task number acceleration since it can allow the tasks to run 
84           out of sequence
85         - Improve runqueue code comments
86         - Add task scheduler abstraction and some example schedulers
87         - Improve circular dependency chain debugging code and user feedback
88         - Don't give a stacktrace for invalid tasks, have a user friendly message (#3431)
89         - Add support for "-e target" (#3432)
90         - Fix shell showdata command (#3259)
91         - Fix shell data updating problems (#1880)
92         - Properly raise errors for invalid source URI protocols
93         - Change the wget fetcher failure handling to avoid lockfile problems
94         - Add support for branches in git fetcher (Otavio Salvador, Michael Lauer)
95         - Make taskdata and runqueue errors more user friendly
96         - Add norecurse and fullpath options to cvs fetcher
97         - Fix exit code for build failures in --continue mode
98         - Fix git branch tags fetching
99         - Change parseConfigurationFile so it works on real data, not a copy
100         - Handle 'base' inherit and all other INHERITs from parseConfigurationFile 
101           instead of BBHandler
102         - Fix getVarFlags bug in data_smart
103         - Optmise cache handling by more quickly detecting an invalid cache, only 
104           saving the cache when its changed, moving the cache validity check into
105           the parsing loop and factoring some getVar calls outside a for loop.
106
107 Changes in Bitbake 1.8.0:
108         - Release 1.7.x as a stable series
109
110 Changes in BitBake 1.7.x:
111         - Major updates of the dependency handling and execution
112           of tasks. Code from bin/bitbake replaced with runqueue.py
113           and taskdata.py
114         - New task execution code supports multithreading with a simplistic
115           threading algorithm controlled by BB_NUMBER_THREADS
116         - Change of the SVN Fetcher to keep the checkout around
117           courtsey of Paul Sokolovsky (#1367)
118         - PATH fix to bbimage (#1108)
119         - Allow debug domains to be specified on the commandline (-l)
120         - Allow 'interactive' tasks
121         - Logging message improvements
122         - Drop now uneeded BUILD_ALL_DEPS variable
123         - Add support for wildcards to -b option
124         - Major overhaul of the fetchers making a large amount of code common
125           including mirroring code
126         - Fetchers now touch md5 stamps upon access (to show activity)
127         - Fix -f force option when used without -b (long standing bug)
128         - Add expand_cache to data_cache.py, caching expanded data (speedup)
129         - Allow version field in DEPENDS (ignored for now)
130         - Add abort flag support to the shell
131         - Make inherit fail if the class doesn't exist (#1478)
132         - Fix data.emit_env() to expand keynames as well as values
133         - Add ssh fetcher
134         - Add perforce fetcher
135         - Make PREFERRED_PROVIDER_foobar defaults to foobar if available
136         - Share the parser's mtime_cache, reducing the number of stat syscalls
137         - Compile all anonfuncs at once! 
138           *** Anonfuncs must now use common spacing format ***
139         - Memorise the list of handlers in __BBHANDLERS and tasks in __BBTASKS
140           This removes 2 million function calls resulting in a 5-10% speedup
141         - Add manpage
142         - Update generateDotGraph to use taskData/runQueue improving accuracy
143           and also adding a task dependency graph
144         - Fix/standardise on GPLv2 licence
145         - Move most functionality from bin/bitbake to cooker.py and split into
146           separate funcitons
147         - CVS fetcher: Added support for non-default port
148         - Add BBINCLUDELOGS_LINES, the number of lines to read from any logfile
149         - Drop shebangs from lib/bb scripts
150
151 Changes in Bitbake 1.6.0:
152         - Better msg handling
153         - COW dict implementation from Tim Ansell (mithro) leading
154           to better performance
155         - Speed up of -s
156
157 Changes in Bitbake 1.4.4:
158         - SRCDATE now handling courtsey Justin Patrin
159         - #1017 fix to work with rm_work
160
161 Changes in BitBake 1.4.2:
162         - Send logs to oe.pastebin.com instead of pastebin.com
163           fixes #856
164         - Copy the internal bitbake data before building the
165           dependency graph. This fixes nano not having a
166           virtual/libc dependency
167         - Allow multiple TARBALL_STASH entries
168         - Cache, check if the directory exists before changing
169           into it
170         - git speedup cloning by not doing a checkout
171         - allow to have spaces in filenames (.conf, .bb, .bbclass)
172
173 Changes in BitBake 1.4.0:
174         - Fix to check both RDEPENDS and RDEPENDS_${PN}
175         - Fix a RDEPENDS parsing bug in utils:explode_deps()
176         - Update git fetcher behaviour to match git changes
177         - ASSUME_PROVIDED allowed to include runtime packages
178         - git fetcher cleanup and efficency improvements
179         - Change the format of the cache
180         - Update usermanual to document the Fetchers
181         - Major changes to caching with a new strategy
182           giving a major performance increase when reparsing
183           with few data changes
184
185 Changes in BitBake 1.3.3:
186         - Create a new Fetcher module to ease the
187           development of new Fetchers.
188           Issue #438 fixed by rpurdie@openedhand.com
189         - Make the Subversion fetcher honor the SRC Date
190           (CVSDATE).
191           Issue #555 fixed by chris@openedhand.com
192         - Expand PREFERRED_PROVIDER properly
193           Issue #436 fixed by rprudie@openedhand.com
194         - Typo fix for Issue #531 by Philipp Zabel for the
195           BitBake Shell
196         - Introduce a new special variable SRCDATE as
197           a generic naming to replace CVSDATE.
198         - Introduce a new keyword 'required'. In contrast
199           to 'include' parsing will fail if a to be included
200           file can not be found.
201         - Remove hardcoding of the STAMP directory. Patch
202           courtsey pHilipp Zabel
203         - Track the RDEPENDS of each package (rpurdie@openedhand.com)
204         - Introduce BUILD_ALL_DEPS to build all RDEPENDS. E.g
205           this is used by the OpenEmbedded Meta Packages.
206           (rpurdie@openedhand.com).
207
208 Changes in BitBake 1.3.2:
209         - reintegration of make.py into BitBake
210         - bbread is gone, use bitbake -e
211         - lots of shell updates and bugfixes
212         - Introduction of the .= and =. operator
213         - Sort variables, keys and groups in bitdoc
214         - Fix regression in the handling of BBCOLLECTIONS
215         - Update the bitbake usermanual
216
217 Changes in BitBake 1.3.0:
218         - add bitbake interactive shell (bitbake -i)
219         - refactor bitbake utility in OO style
220         - kill default arguments in methods in the bb.data module
221         - kill default arguments in methods in the bb.fetch module
222         - the http/https/ftp fetcher will fail if the to be 
223           downloaded file was not found in DL_DIR (this is needed
224           to avoid unpacking the sourceforge mirror page)
225         - Switch to a cow like data instance for persistent and non
226           persisting mode (called data_smart.py)
227         - Changed the callback of bb.make.collect_bbfiles to carry
228           additional parameters
229         - Drastically reduced the amount of needed RAM by not holding
230           each data instance in memory when using a cache/persistent
231           storage
232
233 Changes in BitBake 1.2.1:
234         The 1.2.1 release is meant as a intermediate release to lay the
235         ground for more radical changes. The most notable changes are:
236
237         - Do not hardcode {}, use bb.data.init() instead if you want to
238           get a instance of a data class
239         - bb.data.init() is a factory and the old bb.data methods are delegates
240         - Do not use deepcopy use bb.data.createCopy() instead.
241         - Removed default arguments in bb.fetch
242