runqueue/taskdata.py: Make sure recrdeps tasks include all inter-task dependencies...
[bitbake.git] / ChangeLog
1 Changes in BitBake 1.8.x:
2         - Fix -f (force) in conjunction with -b
3         - Fix exit code for build failures in --continue mode
4         - Fix git branch tags fetching
5         - Change parseConfigurationFile so it works on real data, not a copy
6         - Handle 'base' inherit and all other INHERITs from parseConfigurationFile 
7           instead of BBHandler
8         - Fix getVarFlags bug in data_smart
9         - Optmise cache handling by more quickly detecting an invalid cache, only 
10           saving the cache when its changed, moving the cache validity check into
11           the parsing loop and factoring some getVar calls outside a for loop
12         - Cooker: Remove a debug message from the parsing loop to lower overhead
13         - Convert build.py exec_task to use getVarFlags
14         - Update shell to use cooker.buildFile
15         - Add StampUpdate event
16         - Convert -b option to use taskdata/runqueue
17         - Remove digraph and switch to new stamp checking code. exec_task no longer
18           honours dependencies
19         - Make fetcher timestamp updating non-fatal when permissions don't allow 
20           updates
21         - Add BB_SCHEDULER variable/option ("completion" or "speed") controlling
22           the way bitbake schedules tasks
23         - Add BB_STAMP_POLICY variable/option ("perfile" or "full") controlling
24           how extensively stamps are looked at for validity
25         - When handling build target failures make sure idepends are checked and
26           failed where needed. Fixes --continue mode crashes.
27         - Fix problems with recrdeptask handling where some idepends weren't handled
28           correctly.
29         - Work around refs/HEAD issues with git over http (#3410)
30         - Add proxy support to the CVS fetcher (from Cyril Chemparathy)
31         - Improve runfetchcmd so errors are seen and various GIT variables are exported
32         - Add ability to fetchers to check URL validity without downloading
33         - Improve runtime PREFERRED_PROVIDERS warning message
34         - Add BB_STAMP_WHITELIST option which contains a list of stamps to ignore when
35           checking stamp dependencies and using a BB_STAMP_POLICY of "whitelist"
36         - No longer weight providers on the basis of a package being "already staged". This
37           leads to builds being non-deterministic.
38         - Flush stdout/stderr before forking to fix duplicate console output
39         - Make sure recrdeps tasks include all inter-task dependencies of a given fn
40
41 Changes in BitBake 1.8.10:
42         - Psyco is available only for x86 - do not use it on other architectures.
43         - Fix a bug in bb.decodeurl where http://some.where.com/somefile.tgz decoded to host="" (#1530)
44         - Warn about malformed PREFERRED_PROVIDERS (#1072)
45         - Add support for BB_NICE_LEVEL option (#1627)
46         - Sort initial providers list by default preference (#1145, #2024)
47         - Improve provider sorting so prefered versions have preference over latest versions (#768)
48         - Detect builds of tasks with overlapping providers and warn (will become a fatal error) (#1359)
49         - Add MULTI_PROVIDER_WHITELIST variable to allow known safe multiple providers to be listed
50         - Handle paths in svn fetcher module parameter
51         - Support the syntax "export VARIABLE"
52         - Add bzr fetcher
53         - Add support for cleaning directories before a task in the form:
54           do_taskname[cleandirs] = "dir"
55         - bzr fetcher tweaks from Robert Schuster (#2913)
56         - Add mercurial (hg) fetcher from Robert Schuster (#2913)
57         - Fix bogus preferred_version return values
58         - Fix 'depends' flag splitting
59         - Fix unexport handling (#3135)
60         - Add bb.copyfile function similar to bb.movefile (and improve movefile error reporting)
61         - Allow multiple options for deptask flag
62         - Use git-fetch instead of git-pull removing any need for merges when 
63           fetching (we don't care about the index). Fixes fetch errors.
64         - Add BB_GENERATE_MIRROR_TARBALLS option, set to 0 to make git fetches 
65           faster at the expense of not creating mirror tarballs.
66         - SRCREV handling updates, improvements and fixes from Poky
67         - Add bb.utils.lockfile() and bb.utils.unlockfile() from Poky
68         - Add support for task selfstamp and lockfiles flags
69         - Disable task number acceleration since it can allow the tasks to run 
70           out of sequence
71         - Improve runqueue code comments
72         - Add task scheduler abstraction and some example schedulers
73         - Improve circular dependency chain debugging code and user feedback
74         - Don't give a stacktrace for invalid tasks, have a user friendly message (#3431)
75         - Add support for "-e target" (#3432)
76         - Fix shell showdata command (#3259)
77         - Fix shell data updating problems (#1880)
78         - Properly raise errors for invalid source URI protocols
79         - Change the wget fetcher failure handling to avoid lockfile problems
80         - Add git branch support
81         - Add support for branches in git fetcher (Otavio Salvador, Michael Lauer)
82         - Make taskdata and runqueue errors more user friendly
83         - Add norecurse and fullpath options to cvs fetcher
84
85 Changes in Bitbake 1.8.8:
86         - Rewrite svn fetcher to make adding extra operations easier 
87           as part of future SRCDATE="now" fixes
88           (requires new FETCHCMD_svn definition in bitbake.conf)
89         - Change SVNDIR layout to be more unique (fixes #2644 and #2624)
90         - Import persistent data store from trunk
91         - Sync fetcher code with that in trunk, adding SRCREV support for svn
92         - Add ConfigParsed Event after configuration parsing is complete
93         - data.emit_var() - only call getVar if we need the variable
94         - Stop generating the A variable (seems to be legacy code)
95         - Make sure intertask depends get processed correcting in recursive depends
96         - Add pn-PN to overrides when evaluating PREFERRED_VERSION
97         - Improve the progress indicator by skipping tasks that have 
98           already run before starting the build rather than during it
99         - Add profiling option (-P)
100         - Add BB_SRCREV_POLICY variable (clear or cache) to control SRCREV cache
101         - Add SRCREV_FORMAT support
102         - Fix local fetcher's localpath return values
103         - Apply OVERRIDES before performing immediate expansions
104         - Allow the -b -e option combination to take regular expressions
105         - Add plain message function to bb.msg
106         - Sort the list of providers before processing so dependency problems are 
107           reproducible rather than effectively random
108         - Add locking for fetchers so only one tries to fetch a given file at a given time
109         - Fix int(0)/None confusion in runqueue.py which causes random gaps in dependency chains
110         - Fix handling of variables with expansion in the name using _append/_prepend
111           e.g. RRECOMMENDS_${PN}_append_xyz = "abc"
112         - Expand data in addtasks
113         - Print the list of missing DEPENDS,RDEPENDS for the "No buildable providers available for required...."
114           error message.
115         - Rework add_task to be more efficient (6% speedup, 7% number of function calls reduction)
116         - Sort digraph output to make builds more reproducible
117         - Split expandKeys into two for loops to benefit from the expand_cache (12% speedup)
118         - runqueue.py: Fix idepends handling to avoid dependency errors
119         - Clear the terminal TOSTOP flag if set (and warn the user)
120         - Fix regression from r653 and make SRCDATE/CVSDATE work for packages again
121
122 Changes in Bitbake 1.8.6:
123         - Correctly redirect stdin when forking
124         - If parsing errors are found, exit, too many users miss the errors
125         - Remove supriours PREFERRED_PROVIDER warnings
126
127 Changes in Bitbake 1.8.4:
128         - Make sure __inherit_cache is updated before calling include() (from Michael Krelin)
129         - Fix bug when target was in ASSUME_PROVIDED (#2236)
130         - Raise ParseError for filenames with multiple underscores instead of infinitely looping (#2062)
131         - Fix invalid regexp in BBMASK error handling (missing import) (#1124)
132         - Don't run build sanity checks on incomplete builds
133         - Promote certain warnings from debug to note 2 level
134         - Update manual
135
136 Changes in Bitbake 1.8.2:
137         - Catch truncated cache file errors
138         - Add PE (Package Epoch) support from Philipp Zabel (pH5)
139         - Add code to handle inter-task dependencies
140         - Allow operations other than assignment on flag variables
141         - Fix cache errors when generation dotGraphs
142
143 Changes in Bitbake 1.8.0:
144         - Release 1.7.x as a stable series
145
146 Changes in BitBake 1.7.x:
147         - Major updates of the dependency handling and execution
148           of tasks. Code from bin/bitbake replaced with runqueue.py
149           and taskdata.py
150         - New task execution code supports multithreading with a simplistic
151           threading algorithm controlled by BB_NUMBER_THREADS
152         - Change of the SVN Fetcher to keep the checkout around
153           courtsey of Paul Sokolovsky (#1367)
154         - PATH fix to bbimage (#1108)
155         - Allow debug domains to be specified on the commandline (-l)
156         - Allow 'interactive' tasks
157         - Logging message improvements
158         - Drop now uneeded BUILD_ALL_DEPS variable
159         - Add support for wildcards to -b option
160         - Major overhaul of the fetchers making a large amount of code common
161           including mirroring code
162         - Fetchers now touch md5 stamps upon access (to show activity)
163         - Fix -f force option when used without -b (long standing bug)
164         - Add expand_cache to data_cache.py, caching expanded data (speedup)
165         - Allow version field in DEPENDS (ignored for now)
166         - Add abort flag support to the shell
167         - Make inherit fail if the class doesn't exist (#1478)
168         - Fix data.emit_env() to expand keynames as well as values
169         - Add ssh fetcher
170         - Add perforce fetcher
171         - Make PREFERRED_PROVIDER_foobar defaults to foobar if available
172         - Share the parser's mtime_cache, reducing the number of stat syscalls
173         - Compile all anonfuncs at once! 
174           *** Anonfuncs must now use common spacing format ***
175         - Memorise the list of handlers in __BBHANDLERS and tasks in __BBTASKS
176           This removes 2 million function calls resulting in a 5-10% speedup
177         - Add manpage
178         - Update generateDotGraph to use taskData/runQueue improving accuracy
179           and also adding a task dependency graph
180         - Fix/standardise on GPLv2 licence
181         - Move most functionality from bin/bitbake to cooker.py and split into
182           separate funcitons
183         - CVS fetcher: Added support for non-default port
184         - Add BBINCLUDELOGS_LINES, the number of lines to read from any logfile
185         - Drop shebangs from lib/bb scripts
186
187 Changes in Bitbake 1.6.0:
188         - Better msg handling
189         - COW dict implementation from Tim Ansell (mithro) leading
190           to better performance
191         - Speed up of -s
192
193 Changes in Bitbake 1.4.4:
194         - SRCDATE now handling courtsey Justin Patrin
195         - #1017 fix to work with rm_work
196
197 Changes in BitBake 1.4.2:
198         - Send logs to oe.pastebin.com instead of pastebin.com
199           fixes #856
200         - Copy the internal bitbake data before building the
201           dependency graph. This fixes nano not having a
202           virtual/libc dependency
203         - Allow multiple TARBALL_STASH entries
204         - Cache, check if the directory exists before changing
205           into it
206         - git speedup cloning by not doing a checkout
207         - allow to have spaces in filenames (.conf, .bb, .bbclass)
208
209 Changes in BitBake 1.4.0:
210         - Fix to check both RDEPENDS and RDEPENDS_${PN}
211         - Fix a RDEPENDS parsing bug in utils:explode_deps()
212         - Update git fetcher behaviour to match git changes
213         - ASSUME_PROVIDED allowed to include runtime packages
214         - git fetcher cleanup and efficency improvements
215         - Change the format of the cache
216         - Update usermanual to document the Fetchers
217         - Major changes to caching with a new strategy
218           giving a major performance increase when reparsing
219           with few data changes
220
221 Changes in BitBake 1.3.3:
222         - Create a new Fetcher module to ease the
223           development of new Fetchers.
224           Issue #438 fixed by rpurdie@openedhand.com
225         - Make the Subversion fetcher honor the SRC Date
226           (CVSDATE).
227           Issue #555 fixed by chris@openedhand.com
228         - Expand PREFERRED_PROVIDER properly
229           Issue #436 fixed by rprudie@openedhand.com
230         - Typo fix for Issue #531 by Philipp Zabel for the
231           BitBake Shell
232         - Introduce a new special variable SRCDATE as
233           a generic naming to replace CVSDATE.
234         - Introduce a new keyword 'required'. In contrast
235           to 'include' parsing will fail if a to be included
236           file can not be found.
237         - Remove hardcoding of the STAMP directory. Patch
238           courtsey pHilipp Zabel
239         - Track the RDEPENDS of each package (rpurdie@openedhand.com)
240         - Introduce BUILD_ALL_DEPS to build all RDEPENDS. E.g
241           this is used by the OpenEmbedded Meta Packages.
242           (rpurdie@openedhand.com).
243
244 Changes in BitBake 1.3.2:
245         - reintegration of make.py into BitBake
246         - bbread is gone, use bitbake -e
247         - lots of shell updates and bugfixes
248         - Introduction of the .= and =. operator
249         - Sort variables, keys and groups in bitdoc
250         - Fix regression in the handling of BBCOLLECTIONS
251         - Update the bitbake usermanual
252
253 Changes in BitBake 1.3.0:
254         - add bitbake interactive shell (bitbake -i)
255         - refactor bitbake utility in OO style
256         - kill default arguments in methods in the bb.data module
257         - kill default arguments in methods in the bb.fetch module
258         - the http/https/ftp fetcher will fail if the to be 
259           downloaded file was not found in DL_DIR (this is needed
260           to avoid unpacking the sourceforge mirror page)
261         - Switch to a cow like data instance for persistent and non
262           persisting mode (called data_smart.py)
263         - Changed the callback of bb.make.collect_bbfiles to carry
264           additional parameters
265         - Drastically reduced the amount of needed RAM by not holding
266           each data instance in memory when using a cache/persistent
267           storage
268
269 Changes in BitBake 1.2.1:
270         The 1.2.1 release is meant as a intermediate release to lay the
271         ground for more radical changes. The most notable changes are:
272
273         - Do not hardcode {}, use bb.data.init() instead if you want to
274           get a instance of a data class
275         - bb.data.init() is a factory and the old bb.data methods are delegates
276         - Do not use deepcopy use bb.data.createCopy() instead.
277         - Removed default arguments in bb.fetch
278