enigma2: 4.3.1r17
[opendreambox.git] / Makefile
1 #!/usr/bin/make -f
2 #
3 # Copyright (c) 2016 Dream Property GmbH, Germany
4 #                    https://dreambox.de/
5 # Author:
6 #   Andreas Oberritter <obi@opendreambox.org>
7 #
8 # Permission is hereby granted, free of charge, to any person obtaining a copy
9 # of this software and associated documentation files (the "Software"), to deal
10 # in the Software without restriction, including without limitation the rights
11 # to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
12 # copies of the Software, and to permit persons to whom the Software is
13 # furnished to do so, subject to the following conditions:
14 #
15 # The above copyright notice and this permission notice shall be included in
16 # all copies or substantial portions of the Software.
17 #
18 # THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
19 # IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
20 # FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
21 # AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
22 # LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
23 # OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN
24 # THE SOFTWARE.
25 #
26
27 # Note: You can override all variables by storing them
28 # in an external file called "make.conf".
29 -include conf/make.conf
30
31 # Target platforms:
32 # dm520, dm820, dm900, dm7080
33 #
34 # This only sets the default value. All platforms now use a shared build
35 # directory. Run "MACHINE=dm820 bitbake dreambox-image" to build an image
36 # for the dm820, if it is not the default.
37 MACHINE ?= dm900
38
39 USER_MACHINE := $(MACHINE)
40
41 MAKE_IMAGE_BB ?= dreambox-image
42
43 # Adjust according to the number CPU cores to use for parallel build.
44 # Default: Number of processors in /proc/cpuinfo, if present, or 1.
45 NR_CPU := $(shell [ -f /proc/cpuinfo ] && grep -c '^processor\s*:' /proc/cpuinfo || echo 1)
46 BB_NUMBER_THREADS ?= $(NR_CPU)
47 PARALLEL_MAKE ?= -j $(NR_CPU)
48
49 NICE ?= nice -n 19
50 XSUM ?= md5sum
51
52 BUILD_DIR = $(CURDIR)/build
53 TOPDIR = $(BUILD_DIR)/$(MACHINE)
54 DL_DIR = $(CURDIR)/sources
55 PERSISTENT_DIR = $(CURDIR)/persist-cache
56 SSTATE_DIR = $(CURDIR)/sstate-cache
57 TMPDIR = $(TOPDIR)/tmp
58 DEPDIR = $(CURDIR)/.deps
59
60 BITBAKE = . $(CURDIR)/bitbake.env && cd $(TOPDIR) && $(NICE) bitbake
61
62 BBLAYERS ?= \
63         $(CURDIR)/meta-dreambox \
64         $(CURDIR)/meta-games \
65         $(CURDIR)/meta-golang \
66         $(CURDIR)/meta-opendreambox \
67         $(CURDIR)/meta-openembedded/meta-filesystems \
68         $(CURDIR)/meta-openembedded/meta-multimedia \
69         $(CURDIR)/meta-openembedded/meta-networking \
70         $(CURDIR)/meta-openembedded/meta-oe \
71         $(CURDIR)/meta-openembedded/meta-python \
72         $(CURDIR)/meta-openembedded/meta-ruby \
73         $(CURDIR)/meta-openembedded/meta-webserver \
74         $(CURDIR)/meta-qt5 \
75         $(CURDIR)/openembedded-core/meta
76
77 CONFFILES_AUTO = \
78         bitbake.env \
79         conf/opendreambox.conf \
80         $(TOPDIR)/Makefile \
81         $(TOPDIR)/bitbake.env \
82         $(TOPDIR)/conf/bblayers.conf \
83         $(TOPDIR)/conf/local.conf
84
85 CONFFILES_MANUAL = \
86         .cross-compile-$(MACHINE).env
87
88 CONFDEPS = \
89         $(DEPDIR)/.bitbake.env.$(BITBAKE_ENV_HASH) \
90         $(DEPDIR)/.opendreambox.conf.$(OPENDREAMBOX_CONF_HASH) \
91         $(DEPDIR)/.bblayers.conf.$(MACHINE).$(BBLAYERS_CONF_HASH) \
92         $(DEPDIR)/.local.conf.$(MACHINE).$(LOCAL_CONF_HASH) \
93         $(DEPDIR)/.cross-compile.env.$(MACHINE).$(CROSS_COMPILE_ENV_HASH)
94
95 CONFFILES_BITBAKE = \
96         conf/opendreambox.conf \
97         openembedded-core/meta/conf/bitbake.conf \
98         $(wildcard \
99                 conf/bblayers-ext.conf \
100                 conf/bblayers-$(MACHINE)-ext.conf \
101                 conf/local-ext.conf \
102                 conf/local-$(MACHINE)-ext.conf)
103
104 GIT ?= git
105 GIT_REMOTE := $(shell $(GIT) remote)
106 GIT_AUTHOR_NAME ?= $(shell $(GIT) config user.name)
107 GIT_AUTHOR_EMAIL ?= $(shell $(GIT) config user.email)
108
109 hash = $(shell echo $(1) | $(XSUM) | awk '{print $$1}')
110
111 .DEFAULT_GOAL := all
112 all: init usage
113
114 $(BBLAYERS):
115         [ -d $@ ] || $(MAKE) $(MFLAGS) update
116
117 init: $(BBLAYERS) $(CONFFILES_AUTO)
118
119 help:
120         @echo "Your options:"
121         @echo
122         @echo "  * Update the SDK"
123         @echo "      $$ $(MAKE) update"
124         @echo
125         @echo "  * Build the PDF documentation (doc/opendreambox.pdf, requires pdfTeX):"
126         @echo "      $$ $(MAKE) doc"
127         @echo
128         @echo "  * View the documentation in text format:"
129         @echo "      $$ view doc/opendreambox.txt"
130         @echo
131         @echo "  * Select a new target machine:"
132         @echo "      $$ echo MACHINE=dm820 >> conf/make.conf"
133         @echo "    [Valid values: dm520, dm820, dm900, dm7080]"
134         @echo
135         @echo "  * Build a firmware image for the selected target machine:"
136         @echo "      $$ $(MAKE) image"
137         @echo
138         @echo "  * Build a firmware image for a different target machine:"
139         @echo "      $$ $(MAKE) image MACHINE=dm820"
140         @echo "    [Valid values: dm520, dm820, dm900, dm7080]"
141         @echo
142         @echo "  * Download all source files at once:"
143         @echo "      $$ $(MAKE) download"
144         @echo
145         @echo "  * Set up the environment to build recipes manually:"
146         @echo "      $$ source bitbake.env"
147         @echo "      $$ cd build/$(MACHINE)"
148         @echo "      $$ bitbake <target>"
149         @echo "    [Replace <target> with a recipe name, e.g. $(MAKE_IMAGE_BB) or enigma2]"
150         @echo
151         @echo "Your current settings:"
152         @echo "  MACHINE = $(USER_MACHINE)"
153         @echo
154         @echo "  BB_NUMBER_THREADS = $(BB_NUMBER_THREADS)"
155         @echo "  PARALLEL_MAKE = $(PARALLEL_MAKE)"
156         @echo
157         @echo "Trouble finding a recipe? Try ./scripts/drepo grep 'search string'"
158         @echo "or ./scripts/drepo find -name \"*recipe*\"."
159         @echo
160         @if [ -z "$(GIT_AUTHOR_NAME)" -o -z "$(GIT_AUTHOR_EMAIL)" ]; then \
161                 echo "Before doing any commits, please configure your name and email"; \
162                 echo "address using the following commands:"; \
163                 echo; \
164                 echo "  $$ $(GIT) config user.name \"Your Name\""; \
165                 echo "  $$ $(GIT) config user.email \"mail@example.com\""; \
166         else \
167                 echo "Git has been configured for $(GIT_AUTHOR_NAME) <$(GIT_AUTHOR_EMAIL)>."; \
168                 echo "Please submit patches to <enigma2-devel@lists.elitedvb.net>."; \
169         fi
170
171 usage:
172         @echo "[*] Please run '$(MAKE) help' to display further information!"
173
174 clean:
175         @echo '[*] Deleting generated configuration files'
176         @$(RM) $(CONFFILES_AUTO) $(CONFFILES_MANUAL) $(CONFDEPS)
177         @$(MAKE) $(MFLAGS) -C doc clean
178
179 distclean: clean
180         @echo '[*] Deleting dependencies directory'
181         @$(RM) -r $(DEPDIR)
182         @echo '[*] Deleting download directory'
183         @$(RM) -r $(DL_DIR)
184         @echo '[*] Deleting tmp directory'
185         @$(RM) -r $(TMPDIR)
186         @echo '[*] Deleting sstate directory'
187         @$(RM) -r $(SSTATE_DIR)
188         @echo '[*] Deleting persistent directory'
189         @$(RM) -r $(PERSISTENT_DIR)
190         @echo '[*] Deleting build directory'
191         @$(RM) -r $(BUILD_DIR)
192         @echo '[*] Deleting git submodules'
193         @$(GIT) submodule foreach 'rm -rf .* * 2>/dev/null || true'
194
195 # function to convert simple space separated list to csv
196 space :=
197 space +=
198 comma := ,
199 csv = $(subst $(space),$(comma),$(strip $1))
200
201 sstate-cache-clean: init
202         @echo '[*] Cleaning up sstate-cache'
203         @. $(CURDIR)/bitbake.env && sstate-cache-management.sh --cache-dir=$(SSTATE_DIR) --stamps-dir=$(call csv,$(wildcard $(CURDIR)/build/*/tmp*/stamps)) -v
204
205 doc:
206         @$(MAKE) $(MFLAGS) -C doc
207
208 dreambox-image enigma2 package-index: init
209         @echo '[*] Building $@ for $(USER_MACHINE)'
210         @$(BITBAKE) $@
211
212 image: init
213         @echo '[*] Building $@ for $(USER_MACHINE)'
214         @$(BITBAKE) $(MAKE_IMAGE_BB)
215
216 console-image: init
217         @echo '[*] Building $@ for $(USER_MACHINE)'
218         @$(BITBAKE) dreambox-$@
219
220 rescue-image: init
221         @echo '[*] Building $@ for $(USER_MACHINE)'
222         @$(BITBAKE) linux-dreambox
223
224 download: init
225         @echo '[*] Downloading sources'
226         @$(BITBAKE) -cfetchall -k $(MAKE_IMAGE_BB)
227
228 update:
229         @echo '[*] Updating Git repositories...'
230         @HASH=`$(XSUM) $(MAKEFILE_LIST)`; \
231         if [ -n "$(GIT_REMOTE)" ]; then \
232                 $(GIT) pull --ff-only || $(GIT) pull --rebase || exit 1; \
233         fi; \
234         if [ "$$HASH" != "`$(XSUM) $(MAKEFILE_LIST)`" ]; then \
235                 echo '[*] Makefile changed. Restarting...'; \
236                 $(MAKE) $(MFLAGS) --no-print-directory $(MAKECMDGOALS); \
237         else \
238                 $(GIT) submodule sync && \
239                 $(GIT) submodule update --init && \
240                 echo "[*] The Dreambox SDK is now up-to-date."; \
241         fi
242
243 .PHONY: all clean doc help image init update usage
244
245 MACHINE_INCLUDE_CONF = $(CURDIR)/conf/$(basename $(@F))-$(MACHINE)-ext.conf
246 DISTRO_INCLUDE_CONF = $(CURDIR)/conf/$(basename $(@F))-ext.conf
247
248 BB_ENV_EXTRAWHITE = MACHINE DISTRO TCMODE TCLIBC HTTP_PROXY http_proxy \
249         HTTPS_PROXY https_proxy FTP_PROXY ftp_proxy FTPS_PROXY ftps_proxy ALL_PROXY \
250         all_proxy NO_PROXY no_proxy SSH_AGENT_PID SSH_AUTH_SOCK BB_SRCREV_POLICY \
251         SDKMACHINE BB_NUMBER_THREADS BB_NO_NETWORK PARALLEL_MAKE GIT_PROXY_COMMAND \
252         SOCKS5_PASSWD SOCKS5_USER SCREENDIR STAMPS_DIR BBPATH_EXTRA BB_SETSCENE_ENFORCE
253
254 BITBAKE_ENV_HASH := $(call hash, \
255         'BITBAKE_ENV_VERSION = "0"' \
256         'BB_ENV_EXTRAWHITE = "$(BB_ENV_EXTRAWHITE)"' \
257         'CURDIR = "$(CURDIR)"' \
258         )
259
260 bitbake.env: $(DEPDIR)/.bitbake.env.$(BITBAKE_ENV_HASH)
261         @echo '[*] Generating $@'
262         @echo '# Automatically generated file. Do not edit!' > $@
263         @echo 'export BB_ENV_EXTRAWHITE="$(BB_ENV_EXTRAWHITE)"' >> $@
264         @echo 'export PATH="$(CURDIR)/openembedded-core/scripts:$(CURDIR)/bitbake/bin:$${PATH}"' >> $@
265
266 OPENDREAMBOX_CONF_HASH := $(call hash, \
267         'OPENDREAMBOX_CONF_VERSION = "2"' \
268         'CURDIR = "$(CURDIR)"' \
269         'BB_NUMBER_THREADS = "$(BB_NUMBER_THREADS)"' \
270         'PARALLEL_MAKE = "$(PARALLEL_MAKE)"' \
271         'DL_DIR = "$(DL_DIR)"' \
272         'PERSISTENT_DIR = "$(PERSISTENT_DIR)"' \
273         'SSTATE_DIR = "$(SSTATE_DIR)"' \
274         )
275
276 conf/opendreambox.conf: $(DEPDIR)/.opendreambox.conf.$(OPENDREAMBOX_CONF_HASH)
277         @echo '[*] Generating $@'
278         @test -d $(@D) || mkdir -p $(@D)
279         @echo '# Automatically generated file. Do not edit!' > $@
280         @echo 'BB_NUMBER_THREADS = "$(BB_NUMBER_THREADS)"' >> $@
281         @echo 'PARALLEL_MAKE = "$(PARALLEL_MAKE)"' >> $@
282         @echo 'DL_DIR = "$(DL_DIR)"' >> $@
283         @echo 'PERSISTENT_DIR = "$(PERSISTENT_DIR)"' >> $@
284         @echo 'SSTATE_DIR = "$(SSTATE_DIR)"' >> $@
285         @echo 'BB_GENERATE_MIRROR_TARBALLS = "0"' >> $@
286         @echo 'BBINCLUDELOGS = "yes"' >> $@
287         @echo 'CONF_VERSION = "1"' >> $@
288         @echo 'DISTRO = "opendreambox"' >> $@
289         @echo 'PATCHRESOLVE = "noop"' >> $@
290         @echo 'PRSERV_HOST = "localhost:0"' >> $@
291
292 LOCAL_CONF_HASH := $(call hash, \
293         'LOCAL_CONF_VERSION = "0"' \
294         'CURDIR = "$(CURDIR)"' \
295         'TOPDIR = "$(TOPDIR)"' \
296         'MACHINE = "$(MACHINE)"' \
297         'TMPDIR = "$(TMPDIR)"' \
298         'DISTRO_INCLUDE_CONF = "$(DISTRO_INCLUDE_CONF)"' \
299         'MACHINE_INCLUDE_CONF = "$(MACHINE_INCLUDE_CONF)"' \
300         )
301
302 $(TOPDIR)/conf/local.conf: $(DEPDIR)/.local.conf.$(MACHINE).$(LOCAL_CONF_HASH)
303         @echo '[*] Generating $@'
304         @test -d $(@D) || mkdir -p $(@D)
305         @echo '# Automatically generated file. Do not edit!' > $@
306         @echo 'TOPDIR = "$(TOPDIR)"' >> $@
307         @echo 'MACHINE = "$(MACHINE)"' >> $@
308         @echo 'TMPDIR = "$(TMPDIR)"' >> $@
309         @echo 'require $(CURDIR)/conf/opendreambox.conf' >> $@
310         @echo 'include $(DISTRO_INCLUDE_CONF)' >> $@
311         @echo 'include $(MACHINE_INCLUDE_CONF)' >> $@
312
313 BBLAYERS_CONF_HASH := $(call hash, \
314         'BBLAYERS_CONF_VERSION = "0"' \
315         'CURDIR = "$(CURDIR)"' \
316         'LCONF_VERSION = "$(LCONF_VERSION)"' \
317         'BBFILES = "$(BBFILES)"' \
318         'BBLAYERS = "$(BBLAYERS)"' \
319         'DISTRO_INCLUDE_CONF = "$(DISTRO_INCLUDE_CONF)"' \
320         'MACHINE_INCLUDE_CONF = "$(MACHINE_INCLUDE_CONF)"' \
321         )
322
323 $(TOPDIR)/conf/bblayers.conf: $(DEPDIR)/.bblayers.conf.$(MACHINE).$(BBLAYERS_CONF_HASH)
324         @echo '[*] Generating $@'
325         @test -d $(@D) || mkdir -p $(@D)
326         @echo '# Automatically generated file. Do not edit!' > $@
327         @echo 'LCONF_VERSION = "4"' >> $@
328         @echo 'BBFILES = ""' >> $@
329         @echo 'BBLAYERS = "$(BBLAYERS)"' >> $@
330         @echo 'include $(DISTRO_INCLUDE_CONF)' >> $@
331         @echo 'include $(MACHINE_INCLUDE_CONF)' >> $@
332
333 $(TOPDIR)/Makefile:
334         @echo '[*] Generating $@'
335         @test -d $(@D) || mkdir -p $(@D)
336         @printf '%%::\n\tMACHINE=$(MACHINE) $$(MAKE) -C ../.. $$(MAKECMDGOALS)\n' > $@
337
338 $(TOPDIR)/bitbake.env:
339         @echo '[*] Generating $@'
340         @test -d $(@D) || mkdir -p $(@D)
341         @echo '. ../../bitbake.env' > $@
342
343 CROSS_COMPILE_ENV_BLACKLIST = \
344         HOME LOGNAME PWD SHELL SSH_AGENT_PID SSH_AUTH_SOCK TERM USER
345
346 CROSS_COMPILE_ENV_HASH := $(call hash, \
347         'CROSS_COMPILE_ENV_VERSION = "0"' \
348         'CURDIR = "$(CURDIR)"' \
349         'PARALLEL_MAKE = "$(PARALLEL_MAKE)"' \
350         'TMPDIR = "$(TMPDIR)"' \
351         'TOPDIR = "$(TOPDIR)"' \
352         'CROSS_COMPILE_ENV_BLACKLIST = "$(CROSS_COMPILE_ENV_BLACKLIST)"' \
353         )
354
355 .cross-compile-$(MACHINE).env: $(DEPDIR)/.cross-compile.env.$(MACHINE).$(CROSS_COMPILE_ENV_HASH) $(CONFFILES_BITBAKE)
356         @test -d $(TOPDIR) || (echo 'The directory "$(TOPDIR)" does not exist. Is "$(MACHINE)" a valid machine? Try running "make MACHINE=$(MACHINE)" first.' && exit 1)
357         @echo '[*] Generating $@'
358         @($(BITBAKE) -e | grep '^\(export\s\)\?[a-zA-Z0-9_]\+=".*"$$' | sed -e 's,^export\s,,' | grep -v $(foreach v,$(CROSS_COMPILE_ENV_BLACKLIST),-e ^$(v)=) | sed -e 's,^,local ,' | sort) > $@.tmp && [ -s $@.tmp ] && mv $@.tmp $@ || ($(RM) $@.tmp && echo 'Failed! Please verify that no instance of bitbake is currently running for this machine.' && exit 1)
359
360 $(CONFDEPS):
361         @test -d $(@D) || mkdir -p $(@D)
362         @$(RM) $(basename $@).*
363         @touch $@