include/image.mk: add a target for generating sysupgrade tar files for nand
[openwrt.git] / include / image.mk
1 #
2 # Copyright (C) 2006-2010 OpenWrt.org
3 #
4 # This is free software, licensed under the GNU General Public License v2.
5 # See /LICENSE for more information.
6 #
7
8 override TARGET_BUILD=
9 include $(INCLUDE_DIR)/prereq.mk
10 include $(INCLUDE_DIR)/kernel.mk
11 include $(INCLUDE_DIR)/host.mk
12
13 .NOTPARALLEL:
14 override MAKEFLAGS=
15 override MAKE:=$(SUBMAKE)
16 KDIR=$(KERNEL_BUILD_DIR)
17
18 IMG_PREFIX:=openwrt-$(BOARD)$(if $(SUBTARGET),-$(SUBTARGET))
19
20 MKFS_DEVTABLE_OPT := -D $(INCLUDE_DIR)/device_table.txt
21
22 ifneq ($(CONFIG_BIG_ENDIAN),)
23   JFFS2OPTS     :=  --big-endian --squash-uids -v
24 else
25   JFFS2OPTS     :=  --little-endian --squash-uids -v
26 endif
27
28 ifeq ($(CONFIG_JFFS2_RTIME),y)
29   JFFS2OPTS += -X rtime
30 endif
31 ifeq ($(CONFIG_JFFS2_ZLIB),y)
32   JFFS2OPTS += -X zlib
33 endif
34 ifeq ($(CONFIG_JFFS2_LZMA),y)
35   JFFS2OPTS += -X lzma --compression-mode=size
36 endif
37 ifneq ($(CONFIG_JFFS2_RTIME),y)
38   JFFS2OPTS += -x rtime
39 endif
40 ifneq ($(CONFIG_JFFS2_ZLIB),y)
41   JFFS2OPTS += -x zlib
42 endif
43 ifneq ($(CONFIG_JFFS2_LZMA),y)
44   JFFS2OPTS += -x lzma
45 endif
46
47 JFFS2OPTS += $(MKFS_DEVTABLE_OPT)
48
49 SQUASHFS_BLOCKSIZE := $(CONFIG_TARGET_SQUASHFS_BLOCK_SIZE)k
50 SQUASHFSOPT := -b $(SQUASHFS_BLOCKSIZE)
51 SQUASHFSOPT += -p '/dev d 755 0 0' -p '/dev/console c 600 0 0 5 1'
52 SQUASHFSCOMP := gzip
53 LZMA_XZ_OPTIONS := -Xpreset 9 -Xe -Xlc 0 -Xlp 2 -Xpb 2
54 ifeq ($(CONFIG_SQUASHFS_LZMA),y)
55   SQUASHFSCOMP := lzma $(LZMA_XZ_OPTIONS)
56 endif
57 ifeq ($(CONFIG_SQUASHFS_XZ),y)
58   ifneq ($(filter arm x86 powerpc sparc,$(LINUX_KARCH)),)
59     BCJ_FILTER:=-Xbcj $(LINUX_KARCH)
60   endif
61   SQUASHFSCOMP := xz $(LZMA_XZ_OPTIONS) $(BCJ_FILTER)
62 endif
63
64 JFFS2_BLOCKSIZE ?= 64k 128k
65
66 define add_jffs2_mark
67         echo -ne '\xde\xad\xc0\xde' >> $(1)
68 endef
69
70 define toupper
71 $(shell echo $(1) | tr '[:lower:]' '[:upper:]')
72 endef
73
74 # pad to 4k, 8k, 16k, 64k, 128k, 256k and add jffs2 end-of-filesystem mark
75 define prepare_generic_squashfs
76         $(STAGING_DIR_HOST)/bin/padjffs2 $(1) 4 8 16 64 128 256
77 endef
78
79 ifneq ($(CONFIG_TARGET_ROOTFS_INITRAMFS),)
80   define Image/BuildKernel/Initramfs
81         cp $(KDIR)/vmlinux-initramfs.elf $(BIN_DIR)/$(IMG_PREFIX)-vmlinux-initramfs.elf
82         $(call Image/Build/Initramfs)
83   endef
84 else
85   define Image/BuildKernel/Initramfs
86   endef
87 endif
88
89 define Image/BuildKernel/MkuImage
90         mkimage -A $(ARCH) -O linux -T kernel -C $(1) -a $(2) -e $(3) \
91                 -n '$(call toupper,$(ARCH)) OpenWrt Linux-$(LINUX_VERSION)' -d $(4) $(5)
92 endef
93
94 define Image/BuildKernel/MkFIT
95         $(TOPDIR)/scripts/mkits.sh \
96                 -D $(1) -o $(KDIR)/fit-$(1).its -k $(2) -d $(3) -C $(4) -a $(5) -e $(6) \
97                 -A $(ARCH) -v $(LINUX_VERSION)
98         PATH=$(LINUX_DIR)/scripts/dtc:$(PATH) mkimage -f $(KDIR)/fit-$(1).its $(KDIR)/fit-$(1)$(7).itb
99 endef
100
101 define Image/mkfs/jffs2/sub
102                 # FIXME: removing this line will cause strange behaviour in the foreach loop below
103                 $(STAGING_DIR_HOST)/bin/mkfs.jffs2 $(3) --pad -e $(patsubst %k,%KiB,$(1)) -o $(KDIR)/root.jffs2-$(2) -d $(TARGET_DIR) -v 2>&1 1>/dev/null | awk '/^.+$$$$/'
104                 $(STAGING_DIR_HOST)/bin/mkfs.jffs2 $(3) -e $(patsubst %k,%KiB,$(1)) -o $(KDIR)/root.jffs2-$(2)-raw -d $(TARGET_DIR) -v 2>&1 1>/dev/null | awk '/^.+$$$$/'
105                 $(call add_jffs2_mark,$(KDIR)/root.jffs2-$(2))
106                 $(call Image/Build,jffs2-$(2))
107 endef
108
109 ifneq ($(CONFIG_TARGET_ROOTFS_JFFS2),)
110     define Image/mkfs/jffs2
111                 $(foreach SZ,$(JFFS2_BLOCKSIZE),$(call Image/mkfs/jffs2/sub,$(SZ),$(SZ),$(JFFS2OPTS)))
112     endef
113 endif
114
115 ifneq ($(CONFIG_TARGET_ROOTFS_JFFS2_NAND),)
116     define Image/mkfs/jffs2_nand
117                 $(foreach SZ,$(NAND_BLOCKSIZE), $(call Image/mkfs/jffs2/sub, \
118                         $(word 2,$(subst :, ,$(SZ))),nand-$(subst :,-,$(SZ)), \
119                         $(JFFS2OPTS) --no-cleanmarkers --pagesize=$(word 1,$(subst :, ,$(SZ)))) \
120                 )
121     endef
122 endif
123
124 ifneq ($(CONFIG_TARGET_ROOTFS_SQUASHFS),)
125     define Image/mkfs/squashfs
126                 @mkdir -p $(TARGET_DIR)/overlay
127                 $(STAGING_DIR_HOST)/bin/mksquashfs4 $(TARGET_DIR) $(KDIR)/root.squashfs -nopad -noappend -root-owned -comp $(SQUASHFSCOMP) $(SQUASHFSOPT) -processors $(if $(CONFIG_PKG_BUILD_JOBS),$(CONFIG_PKG_BUILD_JOBS),1)
128                 $(call Image/Build,squashfs)
129     endef
130 endif
131
132 # $(1): Board name (small caps)
133 # $(2): kernel image
134 # $(3): rootfs image
135 ifneq ($(CONFIG_NAND_SUPPORT),)
136    define Image/Build/SysupgradeNAND
137         mkdir -p $(KDIR_TMP)/sysupgrade-$(1)/
138         echo "BOARD=$(1)" > $(KDIR_TMP)/sysupgrade-$(1)/CONTROL
139         $(CP) $(2) $(KDIR_TMP)/sysupgrade-$(1)/kernel
140         $(CP) $(3) $(KDIR_TMP)/sysupgrade-$(1)/root
141         (cd $(KDIR_TMP); $(TAR) cvzf \
142                 $(call imgname,ubi,$(1))-sysupgrade.tgz sysupgrade-$(1))
143    endef
144 endif
145
146 ifneq ($(CONFIG_TARGET_ROOTFS_UBIFS),)
147     define Image/mkfs/ubifs/generate
148         $(CP) ./ubinize$(1).cfg $(KDIR)
149         ( cd $(KDIR); \
150                 $(STAGING_DIR_HOST)/bin/ubinize \
151                 $(if $($(PROFILE)_UBI_OPTS), \
152                         $(shell echo $($(PROFILE)_UBI_OPTS)), \
153                         $(shell echo $(UBI_OPTS)) \
154                 ) \
155                 -o $(KDIR)/root$(1).ubi \
156                 ubinize$(1).cfg \
157         )
158     endef
159
160     define Image/mkfs/ubifs
161
162         ifneq ($($(PROFILE)_UBIFS_OPTS)$(UBIFS_OPTS),)
163                 $(STAGING_DIR_HOST)/bin/mkfs.ubifs \
164                         $(if $($(PROFILE)_UBIFS_OPTS), \
165                                 $(shell echo $($(PROFILE)_UBIFS_OPTS)), \
166                                 $(shell echo $(UBIFS_OPTS)) \
167                         ) \
168                         $(if $(CONFIG_TARGET_UBIFS_FREE_SPACE_FIXUP),--space-fixup) \
169                         $(if $(CONFIG_TARGET_UBIFS_COMPRESSION_NONE),--force-compr=none) \
170                         $(if $(CONFIG_TARGET_UBIFS_COMPRESSION_LZO),--force-compr=lzo) \
171                         $(if $(CONFIG_TARGET_UBIFS_COMPRESSION_ZLIB),--force-compr=zlib) \
172                         $(if $(shell echo $(CONFIG_TARGET_UBIFS_JOURNAL_SIZE)),--jrn-size=$(CONFIG_TARGET_UBIFS_JOURNAL_SIZE)) \
173                         --squash-uids \
174                         -o $(KDIR)/root.ubifs \
175                         -d $(TARGET_DIR)
176         endif
177         $(call Image/Build,ubifs)
178
179         ifneq ($($(PROFILE)_UBI_OPTS)$(UBI_OPTS),)
180                 $(call Image/mkfs/ubifs/generate,)
181                 $(if $(wildcard ./ubinize-overlay.cfg),$(call Image/mkfs/ubifs/generate,-overlay))
182         endif
183         $(call Image/Build,ubi)
184     endef
185 endif
186
187 ifneq ($(CONFIG_TARGET_ROOTFS_CPIOGZ),)
188   define Image/mkfs/cpiogz
189                 ( cd $(TARGET_DIR); find . | cpio -o -H newc | gzip -9 >$(BIN_DIR)/$(IMG_PREFIX)-rootfs.cpio.gz )
190   endef
191 endif
192
193 ifneq ($(CONFIG_TARGET_ROOTFS_TARGZ),)
194   define Image/mkfs/targz
195                 # Preserve permissions (-p) when building as non-root user
196                 $(TAR) -czpf $(BIN_DIR)/$(IMG_PREFIX)$(if $(PROFILE),-$(PROFILE))-rootfs.tar.gz --numeric-owner --owner=0 --group=0 -C $(TARGET_DIR)/ .
197   endef
198 endif
199
200 ifneq ($(CONFIG_TARGET_ROOTFS_EXT4FS),)
201   E2SIZE=$(shell echo $$(($(CONFIG_TARGET_ROOTFS_PARTSIZE)*1024*1024/$(CONFIG_TARGET_EXT4_BLOCKSIZE))))
202
203   define Image/mkfs/ext4
204 # generate an ext2 fs
205         $(STAGING_DIR_HOST)/bin/genext2fs -U -B $(CONFIG_TARGET_EXT4_BLOCKSIZE) -b $(E2SIZE) -N $(CONFIG_TARGET_EXT4_MAXINODE) -d $(TARGET_DIR)/ $(KDIR)/root.ext4 -m $(CONFIG_TARGET_EXT4_RESERVED_PCT) $(MKFS_DEVTABLE_OPT)
206 # convert it to ext4
207         $(STAGING_DIR_HOST)/bin/tune2fs $(if $(CONFIG_TARGET_EXT4_JOURNAL),-j) -O extents,uninit_bg,dir_index $(KDIR)/root.ext4
208 # fix it up
209         $(STAGING_DIR_HOST)/bin/e2fsck -fy $(KDIR)/root.ext4
210         $(call Image/Build,ext4)
211   endef
212 endif
213
214 ifneq ($(CONFIG_TARGET_ROOTFS_ISO),)
215   define Image/mkfs/iso
216                 $(call Image/Build,iso)
217   endef
218 endif
219
220
221 define Image/mkfs/prepare/default
222         # Use symbolic permissions to avoid clobbering SUID/SGID/sticky bits
223         - $(FIND) $(TARGET_DIR) -type f -not -perm +0100 -not -name 'ssh_host*' -not -name 'shadow' -print0 | $(XARGS) -0 chmod u+rw,g+r,o+r
224         - $(FIND) $(TARGET_DIR) -type f -perm +0100 -print0 | $(XARGS) -0 chmod u+rwx,g+rx,o+rx
225         - $(FIND) $(TARGET_DIR) -type d -print0 | $(XARGS) -0 chmod u+rwx,g+rx,o+rx
226         $(INSTALL_DIR) $(TARGET_DIR)/tmp
227         chmod 1777 $(TARGET_DIR)/tmp
228 endef
229
230 define Image/mkfs/prepare
231         $(call Image/mkfs/prepare/default)
232 endef
233
234
235 define Image/Checksum
236         ( cd ${BIN_DIR} ; \
237                 $(FIND) -maxdepth 1 -type f \! -name 'md5sums'  -printf "%P\n" | sort | xargs \
238                 md5sum --binary > md5sums \
239         )
240 endef
241
242
243 define BuildImage
244
245   download:
246   prepare:
247
248   ifeq ($(IB),)
249     compile: compile-targets FORCE
250                 $(call Build/Compile)
251   else
252     compile:
253   endif
254
255   ifeq ($(IB),)
256     install: compile install-targets FORCE
257                 $(call Image/Prepare)
258                 $(call Image/mkfs/prepare)
259                 $(call Image/BuildKernel)
260                 $(call Image/BuildKernel/Initramfs)
261                 $(call Image/InstallKernel)
262                 $(call Image/mkfs/cpiogz)
263                 $(call Image/mkfs/targz)
264                 $(call Image/mkfs/ext4)
265                 $(call Image/mkfs/iso)
266                 $(call Image/mkfs/jffs2)
267                 $(call Image/mkfs/jffs2_nand)
268                 $(call Image/mkfs/squashfs)
269                 $(call Image/mkfs/ubifs)
270                 $(call Image/Checksum)
271   else
272     install: compile install-targets
273                 $(call Image/BuildKernel)
274                 $(call Image/BuildKernel/Initramfs)
275                 $(call Image/InstallKernel)
276                 $(call Image/mkfs/cpiogz)
277                 $(call Image/mkfs/targz)
278                 $(call Image/mkfs/ext4)
279                 $(call Image/mkfs/iso)
280                 $(call Image/mkfs/jffs2)
281                 $(call Image/mkfs/jffs2_nand)
282                 $(call Image/mkfs/squashfs)
283                 $(call Image/mkfs/ubifs)
284                 $(call Image/Checksum)
285   endif
286
287   ifeq ($(IB),)
288     clean: clean-targets
289                 $(call Build/Clean)
290   else
291     clean:
292   endif
293
294   compile-targets:
295   install-targets:
296   clean-targets:
297
298 endef