Prepare for 1.8.19
[bitbake.git] / ChangeLog
1 Changes in BitBake 1.8.19:
2         lib/bb/fetch/hg: fix fetching from a mercurial repository
3         Fix bb.plain and bb.warn function
4
5 Changes in BitBake 1.8.x:
6         - Add bb.utils.prune_suffix function
7         - Fix hg checkouts of specific revisions (from Poky)
8         - Fix wget fetching of urls with parameters specified (from Poky)
9         - Add username handling to git fetcher (from Poky)
10         - Set HOME environmental variable when running fetcher commands (from Poky)
11         - Make sure allowed variables inherited from the environment are exported again (from Poky)
12         - When running a stage task in bbshell, run populate_staging, not the stage task (from Poky)
13         - Fix + character escaping from PACKAGES_DYNAMIC (thanks Otavio Salvador)
14
15 Changes in BitBake 1.8.12:
16         - Fix -f (force) in conjunction with -b
17         - Fix exit code for build failures in --continue mode
18         - Fix git branch tags fetching
19         - Change parseConfigurationFile so it works on real data, not a copy
20         - Handle 'base' inherit and all other INHERITs from parseConfigurationFile
21           instead of BBHandler
22         - Fix getVarFlags bug in data_smart
23         - Optmise cache handling by more quickly detecting an invalid cache, only
24           saving the cache when its changed, moving the cache validity check into
25           the parsing loop and factoring some getVar calls outside a for loop
26         - Cooker: Remove a debug message from the parsing loop to lower overhead
27         - Convert build.py exec_task to use getVarFlags
28         - Update shell to use cooker.buildFile
29         - Add StampUpdate event
30         - Convert -b option to use taskdata/runqueue
31         - Remove digraph and switch to new stamp checking code. exec_task no longer
32           honours dependencies
33         - Make fetcher timestamp updating non-fatal when permissions don't allow
34           updates
35         - Add BB_SCHEDULER variable/option ("completion" or "speed") controlling
36           the way bitbake schedules tasks
37         - Add BB_STAMP_POLICY variable/option ("perfile" or "full") controlling
38           how extensively stamps are looked at for validity
39         - When handling build target failures make sure idepends are checked and
40           failed where needed. Fixes --continue mode crashes.
41         - Fix problems with recrdeptask handling where some idepends weren't handled
42           correctly.
43         - Work around refs/HEAD issues with git over http (#3410)
44         - Add proxy support to the CVS fetcher (from Cyril Chemparathy)
45         - Improve runfetchcmd so errors are seen and various GIT variables are exported
46         - Add ability to fetchers to check URL validity without downloading
47         - Improve runtime PREFERRED_PROVIDERS warning message
48         - Add BB_STAMP_WHITELIST option which contains a list of stamps to ignore when
49           checking stamp dependencies and using a BB_STAMP_POLICY of "whitelist"
50         - No longer weight providers on the basis of a package being "already staged". This
51           leads to builds being non-deterministic.
52         - Flush stdout/stderr before forking to fix duplicate console output
53         - Make sure recrdeps tasks include all inter-task dependencies of a given fn
54         - Add bb.runqueue.check_stamp_fn() for use by packaged-staging
55         - Add PERSISTENT_DIR to store the PersistData in a persistent
56           directory != the cache dir.
57         - Add md5 and sha256 checksum generation functions to utils.py
58         - Make sure Build Completed events are generated even when tasks fail
59         - Correctly handle '-' characters in class names (#2958)
60         - Make sure expandKeys has been called on the data dictonary before running tasks
61         - Correctly add a task override in the form task-TASKNAME.
62         - Revert the '-' character fix in class names since it breaks things
63         - When a regexp fails to compile for PACKAGES_DYNAMIC, print a more useful error (#4444)
64         - Allow to checkout CVS by Date and Time. Just add HHmm to the SRCDATE.
65         - Move prunedir function to utils.py and add explode_dep_versions function
66         - Raise an exception if SRCREV == 'INVALID'
67         - Fix hg fetcher username/password handling and fix crash
68         - Fix PACKAGES_DYNAMIC handling of packages with '++' in the name
69         - Rename __depends to __base_depends after configuration parsing so we don't
70           recheck the validity of the config files time after time
71         - Add better environmental variable handling. By default it will now only pass certain
72           whitelisted variables into the data store. If BB_PRESERVE_ENV is set bitbake will use
73           all variable from the environment. If BB_ENV_WHITELIST is set, that whitelist will be
74           used instead of the internal bitbake one. Alternatively, BB_ENV_EXTRAWHITE can be used
75           to extend the internal whitelist.
76         - Perforce fetcher fix to use commandline options instead of being overriden by the environment
77         - use @rev when doing a svn checkout
78         - Add osc fetcher (from Joshua Lock in Poky)
79         - When SRCREV autorevisioning for a recipe is in use, don't cache the recipe
80         - Add tryaltconfigs option to control whether bitbake trys using alternative providers
81           to fulfil failed dependencies. It defaults to off, changing the default since this
82           behaviour confuses many users and isn't often useful.
83         - Improve lock file function error handling
84         - Add username handling to the git fetcher (Robert Bragg)
85         - Add support for HTTP_PROXY and HTTP_PROXY_IGNORE variables to the wget fetcher
86         - Export more variables to the fetcher commands to allow ssh checkouts and checkouts through
87           proxies to work better. (from Poky)
88         - Also allow user and pswd options in SRC_URIs globally (from Poky)
89         - Improve proxy handling when using mirrors (from Poky)
90         - Addition of BBCLASSEXTEND support for allowing one recipe to provide multiple targets (from Poky)
91
92 Changes in BitBake 1.8.10:
93         - Psyco is available only for x86 - do not use it on other architectures.
94         - Fix a bug in bb.decodeurl where http://some.where.com/somefile.tgz decoded to host="" (#1530)
95         - Warn about malformed PREFERRED_PROVIDERS (#1072)
96         - Add support for BB_NICE_LEVEL option (#1627)
97         - Sort initial providers list by default preference (#1145, #2024)
98         - Improve provider sorting so prefered versions have preference over latest versions (#768)
99         - Detect builds of tasks with overlapping providers and warn (will become a fatal error) (#1359)
100         - Add MULTI_PROVIDER_WHITELIST variable to allow known safe multiple providers to be listed
101         - Handle paths in svn fetcher module parameter
102         - Support the syntax "export VARIABLE"
103         - Add bzr fetcher
104         - Add support for cleaning directories before a task in the form:
105           do_taskname[cleandirs] = "dir"
106         - bzr fetcher tweaks from Robert Schuster (#2913)
107         - Add mercurial (hg) fetcher from Robert Schuster (#2913)
108         - Fix bogus preferred_version return values
109         - Fix 'depends' flag splitting
110         - Fix unexport handling (#3135)
111         - Add bb.copyfile function similar to bb.movefile (and improve movefile error reporting)
112         - Allow multiple options for deptask flag
113         - Use git-fetch instead of git-pull removing any need for merges when
114           fetching (we don't care about the index). Fixes fetch errors.
115         - Add BB_GENERATE_MIRROR_TARBALLS option, set to 0 to make git fetches
116           faster at the expense of not creating mirror tarballs.
117         - SRCREV handling updates, improvements and fixes from Poky
118         - Add bb.utils.lockfile() and bb.utils.unlockfile() from Poky
119         - Add support for task selfstamp and lockfiles flags
120         - Disable task number acceleration since it can allow the tasks to run
121           out of sequence
122         - Improve runqueue code comments
123         - Add task scheduler abstraction and some example schedulers
124         - Improve circular dependency chain debugging code and user feedback
125         - Don't give a stacktrace for invalid tasks, have a user friendly message (#3431)
126         - Add support for "-e target" (#3432)
127         - Fix shell showdata command (#3259)
128         - Fix shell data updating problems (#1880)
129         - Properly raise errors for invalid source URI protocols
130         - Change the wget fetcher failure handling to avoid lockfile problems
131         - Add git branch support
132         - Add support for branches in git fetcher (Otavio Salvador, Michael Lauer)
133         - Make taskdata and runqueue errors more user friendly
134         - Add norecurse and fullpath options to cvs fetcher
135         - bb.utils.prunedir can cope with symlinks to directories without exceptions
136
137 Changes in Bitbake 1.8.8:
138         - Rewrite svn fetcher to make adding extra operations easier
139           as part of future SRCDATE="now" fixes
140           (requires new FETCHCMD_svn definition in bitbake.conf)
141         - Change SVNDIR layout to be more unique (fixes #2644 and #2624)
142         - Import persistent data store from trunk
143         - Sync fetcher code with that in trunk, adding SRCREV support for svn
144         - Add ConfigParsed Event after configuration parsing is complete
145         - data.emit_var() - only call getVar if we need the variable
146         - Stop generating the A variable (seems to be legacy code)
147         - Make sure intertask depends get processed correcting in recursive depends
148         - Add pn-PN to overrides when evaluating PREFERRED_VERSION
149         - Improve the progress indicator by skipping tasks that have
150           already run before starting the build rather than during it
151         - Add profiling option (-P)
152         - Add BB_SRCREV_POLICY variable (clear or cache) to control SRCREV cache
153         - Add SRCREV_FORMAT support
154         - Fix local fetcher's localpath return values
155         - Apply OVERRIDES before performing immediate expansions
156         - Allow the -b -e option combination to take regular expressions
157         - Add plain message function to bb.msg
158         - Sort the list of providers before processing so dependency problems are
159           reproducible rather than effectively random
160         - Add locking for fetchers so only one tries to fetch a given file at a given time
161         - Fix int(0)/None confusion in runqueue.py which causes random gaps in dependency chains
162         - Fix handling of variables with expansion in the name using _append/_prepend
163           e.g. RRECOMMENDS_${PN}_append_xyz = "abc"
164         - Expand data in addtasks
165         - Print the list of missing DEPENDS,RDEPENDS for the "No buildable providers available for required...."
166           error message.
167         - Rework add_task to be more efficient (6% speedup, 7% number of function calls reduction)
168         - Sort digraph output to make builds more reproducible
169         - Split expandKeys into two for loops to benefit from the expand_cache (12% speedup)
170         - runqueue.py: Fix idepends handling to avoid dependency errors
171         - Clear the terminal TOSTOP flag if set (and warn the user)
172         - Fix regression from r653 and make SRCDATE/CVSDATE work for packages again
173
174 Changes in Bitbake 1.8.6:
175         - Correctly redirect stdin when forking
176         - If parsing errors are found, exit, too many users miss the errors
177         - Remove supriours PREFERRED_PROVIDER warnings
178
179 Changes in Bitbake 1.8.4:
180         - Make sure __inherit_cache is updated before calling include() (from Michael Krelin)
181         - Fix bug when target was in ASSUME_PROVIDED (#2236)
182         - Raise ParseError for filenames with multiple underscores instead of infinitely looping (#2062)
183         - Fix invalid regexp in BBMASK error handling (missing import) (#1124)
184         - Don't run build sanity checks on incomplete builds
185         - Promote certain warnings from debug to note 2 level
186         - Update manual
187
188 Changes in Bitbake 1.8.2:
189         - Catch truncated cache file errors
190         - Add PE (Package Epoch) support from Philipp Zabel (pH5)
191         - Add code to handle inter-task dependencies
192         - Allow operations other than assignment on flag variables
193         - Fix cache errors when generation dotGraphs
194
195 Changes in Bitbake 1.8.0:
196         - Release 1.7.x as a stable series
197
198 Changes in BitBake 1.7.x:
199         - Major updates of the dependency handling and execution
200           of tasks. Code from bin/bitbake replaced with runqueue.py
201           and taskdata.py
202         - New task execution code supports multithreading with a simplistic
203           threading algorithm controlled by BB_NUMBER_THREADS
204         - Change of the SVN Fetcher to keep the checkout around
205           courtsey of Paul Sokolovsky (#1367)
206         - PATH fix to bbimage (#1108)
207         - Allow debug domains to be specified on the commandline (-l)
208         - Allow 'interactive' tasks
209         - Logging message improvements
210         - Drop now uneeded BUILD_ALL_DEPS variable
211         - Add support for wildcards to -b option
212         - Major overhaul of the fetchers making a large amount of code common
213           including mirroring code
214         - Fetchers now touch md5 stamps upon access (to show activity)
215         - Fix -f force option when used without -b (long standing bug)
216         - Add expand_cache to data_cache.py, caching expanded data (speedup)
217         - Allow version field in DEPENDS (ignored for now)
218         - Add abort flag support to the shell
219         - Make inherit fail if the class doesn't exist (#1478)
220         - Fix data.emit_env() to expand keynames as well as values
221         - Add ssh fetcher
222         - Add perforce fetcher
223         - Make PREFERRED_PROVIDER_foobar defaults to foobar if available
224         - Share the parser's mtime_cache, reducing the number of stat syscalls
225         - Compile all anonfuncs at once!
226           *** Anonfuncs must now use common spacing format ***
227         - Memorise the list of handlers in __BBHANDLERS and tasks in __BBTASKS
228           This removes 2 million function calls resulting in a 5-10% speedup
229         - Add manpage
230         - Update generateDotGraph to use taskData/runQueue improving accuracy
231           and also adding a task dependency graph
232         - Fix/standardise on GPLv2 licence
233         - Move most functionality from bin/bitbake to cooker.py and split into
234           separate funcitons
235         - CVS fetcher: Added support for non-default port
236         - Add BBINCLUDELOGS_LINES, the number of lines to read from any logfile
237         - Drop shebangs from lib/bb scripts
238
239 Changes in Bitbake 1.6.0:
240         - Better msg handling
241         - COW dict implementation from Tim Ansell (mithro) leading
242           to better performance
243         - Speed up of -s
244
245 Changes in Bitbake 1.4.4:
246         - SRCDATE now handling courtsey Justin Patrin
247         - #1017 fix to work with rm_work
248
249 Changes in BitBake 1.4.2:
250         - Send logs to oe.pastebin.com instead of pastebin.com
251           fixes #856
252         - Copy the internal bitbake data before building the
253           dependency graph. This fixes nano not having a
254           virtual/libc dependency
255         - Allow multiple TARBALL_STASH entries
256         - Cache, check if the directory exists before changing
257           into it
258         - git speedup cloning by not doing a checkout
259         - allow to have spaces in filenames (.conf, .bb, .bbclass)
260
261 Changes in BitBake 1.4.0:
262         - Fix to check both RDEPENDS and RDEPENDS_${PN}
263         - Fix a RDEPENDS parsing bug in utils:explode_deps()
264         - Update git fetcher behaviour to match git changes
265         - ASSUME_PROVIDED allowed to include runtime packages
266         - git fetcher cleanup and efficency improvements
267         - Change the format of the cache
268         - Update usermanual to document the Fetchers
269         - Major changes to caching with a new strategy
270           giving a major performance increase when reparsing
271           with few data changes
272
273 Changes in BitBake 1.3.3:
274         - Create a new Fetcher module to ease the
275           development of new Fetchers.
276           Issue #438 fixed by rpurdie@openedhand.com
277         - Make the Subversion fetcher honor the SRC Date
278           (CVSDATE).
279           Issue #555 fixed by chris@openedhand.com
280         - Expand PREFERRED_PROVIDER properly
281           Issue #436 fixed by rprudie@openedhand.com
282         - Typo fix for Issue #531 by Philipp Zabel for the
283           BitBake Shell
284         - Introduce a new special variable SRCDATE as
285           a generic naming to replace CVSDATE.
286         - Introduce a new keyword 'required'. In contrast
287           to 'include' parsing will fail if a to be included
288           file can not be found.
289         - Remove hardcoding of the STAMP directory. Patch
290           courtsey pHilipp Zabel
291         - Track the RDEPENDS of each package (rpurdie@openedhand.com)
292         - Introduce BUILD_ALL_DEPS to build all RDEPENDS. E.g
293           this is used by the OpenEmbedded Meta Packages.
294           (rpurdie@openedhand.com).
295
296 Changes in BitBake 1.3.2:
297         - reintegration of make.py into BitBake
298         - bbread is gone, use bitbake -e
299         - lots of shell updates and bugfixes
300         - Introduction of the .= and =. operator
301         - Sort variables, keys and groups in bitdoc
302         - Fix regression in the handling of BBCOLLECTIONS
303         - Update the bitbake usermanual
304
305 Changes in BitBake 1.3.0:
306         - add bitbake interactive shell (bitbake -i)
307         - refactor bitbake utility in OO style
308         - kill default arguments in methods in the bb.data module
309         - kill default arguments in methods in the bb.fetch module
310         - the http/https/ftp fetcher will fail if the to be
311           downloaded file was not found in DL_DIR (this is needed
312           to avoid unpacking the sourceforge mirror page)
313         - Switch to a cow like data instance for persistent and non
314           persisting mode (called data_smart.py)
315         - Changed the callback of bb.make.collect_bbfiles to carry
316           additional parameters
317         - Drastically reduced the amount of needed RAM by not holding
318           each data instance in memory when using a cache/persistent
319           storage
320
321 Changes in BitBake 1.2.1:
322         The 1.2.1 release is meant as a intermediate release to lay the
323         ground for more radical changes. The most notable changes are:
324
325         - Do not hardcode {}, use bb.data.init() instead if you want to
326           get a instance of a data class
327         - bb.data.init() is a factory and the old bb.data methods are delegates
328         - Do not use deepcopy use bb.data.createCopy() instead.
329         - Removed default arguments in bb.fetch
330