]> git.kernelconcepts.de Git - karo-tx-linux.git/blob - arch/arm/mach-omap2/omap_hwmod.c
Merge tag 'clk-for-linus-4.3' of git://git.kernel.org/pub/scm/linux/kernel/git/clk...
[karo-tx-linux.git] / arch / arm / mach-omap2 / omap_hwmod.c
1 /*
2  * omap_hwmod implementation for OMAP2/3/4
3  *
4  * Copyright (C) 2009-2011 Nokia Corporation
5  * Copyright (C) 2011-2012 Texas Instruments, Inc.
6  *
7  * Paul Walmsley, BenoĆ®t Cousson, Kevin Hilman
8  *
9  * Created in collaboration with (alphabetical order): Thara Gopinath,
10  * Tony Lindgren, Rajendra Nayak, Vikram Pandita, Sakari Poussa, Anand
11  * Sawant, Santosh Shilimkar, Richard Woodruff
12  *
13  * This program is free software; you can redistribute it and/or modify
14  * it under the terms of the GNU General Public License version 2 as
15  * published by the Free Software Foundation.
16  *
17  * Introduction
18  * ------------
19  * One way to view an OMAP SoC is as a collection of largely unrelated
20  * IP blocks connected by interconnects.  The IP blocks include
21  * devices such as ARM processors, audio serial interfaces, UARTs,
22  * etc.  Some of these devices, like the DSP, are created by TI;
23  * others, like the SGX, largely originate from external vendors.  In
24  * TI's documentation, on-chip devices are referred to as "OMAP
25  * modules."  Some of these IP blocks are identical across several
26  * OMAP versions.  Others are revised frequently.
27  *
28  * These OMAP modules are tied together by various interconnects.
29  * Most of the address and data flow between modules is via OCP-based
30  * interconnects such as the L3 and L4 buses; but there are other
31  * interconnects that distribute the hardware clock tree, handle idle
32  * and reset signaling, supply power, and connect the modules to
33  * various pads or balls on the OMAP package.
34  *
35  * OMAP hwmod provides a consistent way to describe the on-chip
36  * hardware blocks and their integration into the rest of the chip.
37  * This description can be automatically generated from the TI
38  * hardware database.  OMAP hwmod provides a standard, consistent API
39  * to reset, enable, idle, and disable these hardware blocks.  And
40  * hwmod provides a way for other core code, such as the Linux device
41  * code or the OMAP power management and address space mapping code,
42  * to query the hardware database.
43  *
44  * Using hwmod
45  * -----------
46  * Drivers won't call hwmod functions directly.  That is done by the
47  * omap_device code, and in rare occasions, by custom integration code
48  * in arch/arm/ *omap*.  The omap_device code includes functions to
49  * build a struct platform_device using omap_hwmod data, and that is
50  * currently how hwmod data is communicated to drivers and to the
51  * Linux driver model.  Most drivers will call omap_hwmod functions only
52  * indirectly, via pm_runtime*() functions.
53  *
54  * From a layering perspective, here is where the OMAP hwmod code
55  * fits into the kernel software stack:
56  *
57  *            +-------------------------------+
58  *            |      Device driver code       |
59  *            |      (e.g., drivers/)         |
60  *            +-------------------------------+
61  *            |      Linux driver model       |
62  *            |     (platform_device /        |
63  *            |  platform_driver data/code)   |
64  *            +-------------------------------+
65  *            | OMAP core-driver integration  |
66  *            |(arch/arm/mach-omap2/devices.c)|
67  *            +-------------------------------+
68  *            |      omap_device code         |
69  *            | (../plat-omap/omap_device.c)  |
70  *            +-------------------------------+
71  *   ---->    |    omap_hwmod code/data       |    <-----
72  *            | (../mach-omap2/omap_hwmod*)   |
73  *            +-------------------------------+
74  *            | OMAP clock/PRCM/register fns  |
75  *            | ({read,write}l_relaxed, clk*) |
76  *            +-------------------------------+
77  *
78  * Device drivers should not contain any OMAP-specific code or data in
79  * them.  They should only contain code to operate the IP block that
80  * the driver is responsible for.  This is because these IP blocks can
81  * also appear in other SoCs, either from TI (such as DaVinci) or from
82  * other manufacturers; and drivers should be reusable across other
83  * platforms.
84  *
85  * The OMAP hwmod code also will attempt to reset and idle all on-chip
86  * devices upon boot.  The goal here is for the kernel to be
87  * completely self-reliant and independent from bootloaders.  This is
88  * to ensure a repeatable configuration, both to ensure consistent
89  * runtime behavior, and to make it easier for others to reproduce
90  * bugs.
91  *
92  * OMAP module activity states
93  * ---------------------------
94  * The hwmod code considers modules to be in one of several activity
95  * states.  IP blocks start out in an UNKNOWN state, then once they
96  * are registered via the hwmod code, proceed to the REGISTERED state.
97  * Once their clock names are resolved to clock pointers, the module
98  * enters the CLKS_INITED state; and finally, once the module has been
99  * reset and the integration registers programmed, the INITIALIZED state
100  * is entered.  The hwmod code will then place the module into either
101  * the IDLE state to save power, or in the case of a critical system
102  * module, the ENABLED state.
103  *
104  * OMAP core integration code can then call omap_hwmod*() functions
105  * directly to move the module between the IDLE, ENABLED, and DISABLED
106  * states, as needed.  This is done during both the PM idle loop, and
107  * in the OMAP core integration code's implementation of the PM runtime
108  * functions.
109  *
110  * References
111  * ----------
112  * This is a partial list.
113  * - OMAP2420 Multimedia Processor Silicon Revision 2.1.1, 2.2 (SWPU064)
114  * - OMAP2430 Multimedia Device POP Silicon Revision 2.1 (SWPU090)
115  * - OMAP34xx Multimedia Device Silicon Revision 3.1 (SWPU108)
116  * - OMAP4430 Multimedia Device Silicon Revision 1.0 (SWPU140)
117  * - Open Core Protocol Specification 2.2
118  *
119  * To do:
120  * - handle IO mapping
121  * - bus throughput & module latency measurement code
122  *
123  * XXX add tests at the beginning of each function to ensure the hwmod is
124  * in the appropriate state
125  * XXX error return values should be checked to ensure that they are
126  * appropriate
127  */
128 #undef DEBUG
129
130 #include <linux/kernel.h>
131 #include <linux/errno.h>
132 #include <linux/io.h>
133 #include <linux/clk.h>
134 #include <linux/clk-provider.h>
135 #include <linux/delay.h>
136 #include <linux/err.h>
137 #include <linux/list.h>
138 #include <linux/mutex.h>
139 #include <linux/spinlock.h>
140 #include <linux/slab.h>
141 #include <linux/bootmem.h>
142 #include <linux/cpu.h>
143 #include <linux/of.h>
144 #include <linux/of_address.h>
145
146 #include <asm/system_misc.h>
147
148 #include "clock.h"
149 #include "omap_hwmod.h"
150
151 #include "soc.h"
152 #include "common.h"
153 #include "clockdomain.h"
154 #include "powerdomain.h"
155 #include "cm2xxx.h"
156 #include "cm3xxx.h"
157 #include "cm33xx.h"
158 #include "prm.h"
159 #include "prm3xxx.h"
160 #include "prm44xx.h"
161 #include "prm33xx.h"
162 #include "prminst44xx.h"
163 #include "mux.h"
164 #include "pm.h"
165
166 /* Name of the OMAP hwmod for the MPU */
167 #define MPU_INITIATOR_NAME              "mpu"
168
169 /*
170  * Number of struct omap_hwmod_link records per struct
171  * omap_hwmod_ocp_if record (master->slave and slave->master)
172  */
173 #define LINKS_PER_OCP_IF                2
174
175 /*
176  * Address offset (in bytes) between the reset control and the reset
177  * status registers: 4 bytes on OMAP4
178  */
179 #define OMAP4_RST_CTRL_ST_OFFSET        4
180
181 /**
182  * struct omap_hwmod_soc_ops - fn ptrs for some SoC-specific operations
183  * @enable_module: function to enable a module (via MODULEMODE)
184  * @disable_module: function to disable a module (via MODULEMODE)
185  *
186  * XXX Eventually this functionality will be hidden inside the PRM/CM
187  * device drivers.  Until then, this should avoid huge blocks of cpu_is_*()
188  * conditionals in this code.
189  */
190 struct omap_hwmod_soc_ops {
191         void (*enable_module)(struct omap_hwmod *oh);
192         int (*disable_module)(struct omap_hwmod *oh);
193         int (*wait_target_ready)(struct omap_hwmod *oh);
194         int (*assert_hardreset)(struct omap_hwmod *oh,
195                                 struct omap_hwmod_rst_info *ohri);
196         int (*deassert_hardreset)(struct omap_hwmod *oh,
197                                   struct omap_hwmod_rst_info *ohri);
198         int (*is_hardreset_asserted)(struct omap_hwmod *oh,
199                                      struct omap_hwmod_rst_info *ohri);
200         int (*init_clkdm)(struct omap_hwmod *oh);
201         void (*update_context_lost)(struct omap_hwmod *oh);
202         int (*get_context_lost)(struct omap_hwmod *oh);
203 };
204
205 /* soc_ops: adapts the omap_hwmod code to the currently-booted SoC */
206 static struct omap_hwmod_soc_ops soc_ops;
207
208 /* omap_hwmod_list contains all registered struct omap_hwmods */
209 static LIST_HEAD(omap_hwmod_list);
210
211 /* mpu_oh: used to add/remove MPU initiator from sleepdep list */
212 static struct omap_hwmod *mpu_oh;
213
214 /* io_chain_lock: used to serialize reconfigurations of the I/O chain */
215 static DEFINE_SPINLOCK(io_chain_lock);
216
217 /*
218  * linkspace: ptr to a buffer that struct omap_hwmod_link records are
219  * allocated from - used to reduce the number of small memory
220  * allocations, which has a significant impact on performance
221  */
222 static struct omap_hwmod_link *linkspace;
223
224 /*
225  * free_ls, max_ls: array indexes into linkspace; representing the
226  * next free struct omap_hwmod_link index, and the maximum number of
227  * struct omap_hwmod_link records allocated (respectively)
228  */
229 static unsigned short free_ls, max_ls, ls_supp;
230
231 /* inited: set to true once the hwmod code is initialized */
232 static bool inited;
233
234 /* Private functions */
235
236 /**
237  * _fetch_next_ocp_if - return the next OCP interface in a list
238  * @p: ptr to a ptr to the list_head inside the ocp_if to return
239  * @i: pointer to the index of the element pointed to by @p in the list
240  *
241  * Return a pointer to the struct omap_hwmod_ocp_if record
242  * containing the struct list_head pointed to by @p, and increment
243  * @p such that a future call to this routine will return the next
244  * record.
245  */
246 static struct omap_hwmod_ocp_if *_fetch_next_ocp_if(struct list_head **p,
247                                                     int *i)
248 {
249         struct omap_hwmod_ocp_if *oi;
250
251         oi = list_entry(*p, struct omap_hwmod_link, node)->ocp_if;
252         *p = (*p)->next;
253
254         *i = *i + 1;
255
256         return oi;
257 }
258
259 /**
260  * _update_sysc_cache - return the module OCP_SYSCONFIG register, keep copy
261  * @oh: struct omap_hwmod *
262  *
263  * Load the current value of the hwmod OCP_SYSCONFIG register into the
264  * struct omap_hwmod for later use.  Returns -EINVAL if the hwmod has no
265  * OCP_SYSCONFIG register or 0 upon success.
266  */
267 static int _update_sysc_cache(struct omap_hwmod *oh)
268 {
269         if (!oh->class->sysc) {
270                 WARN(1, "omap_hwmod: %s: cannot read OCP_SYSCONFIG: not defined on hwmod's class\n", oh->name);
271                 return -EINVAL;
272         }
273
274         /* XXX ensure module interface clock is up */
275
276         oh->_sysc_cache = omap_hwmod_read(oh, oh->class->sysc->sysc_offs);
277
278         if (!(oh->class->sysc->sysc_flags & SYSC_NO_CACHE))
279                 oh->_int_flags |= _HWMOD_SYSCONFIG_LOADED;
280
281         return 0;
282 }
283
284 /**
285  * _write_sysconfig - write a value to the module's OCP_SYSCONFIG register
286  * @v: OCP_SYSCONFIG value to write
287  * @oh: struct omap_hwmod *
288  *
289  * Write @v into the module class' OCP_SYSCONFIG register, if it has
290  * one.  No return value.
291  */
292 static void _write_sysconfig(u32 v, struct omap_hwmod *oh)
293 {
294         if (!oh->class->sysc) {
295                 WARN(1, "omap_hwmod: %s: cannot write OCP_SYSCONFIG: not defined on hwmod's class\n", oh->name);
296                 return;
297         }
298
299         /* XXX ensure module interface clock is up */
300
301         /* Module might have lost context, always update cache and register */
302         oh->_sysc_cache = v;
303         omap_hwmod_write(v, oh, oh->class->sysc->sysc_offs);
304 }
305
306 /**
307  * _set_master_standbymode: set the OCP_SYSCONFIG MIDLEMODE field in @v
308  * @oh: struct omap_hwmod *
309  * @standbymode: MIDLEMODE field bits
310  * @v: pointer to register contents to modify
311  *
312  * Update the master standby mode bits in @v to be @standbymode for
313  * the @oh hwmod.  Does not write to the hardware.  Returns -EINVAL
314  * upon error or 0 upon success.
315  */
316 static int _set_master_standbymode(struct omap_hwmod *oh, u8 standbymode,
317                                    u32 *v)
318 {
319         u32 mstandby_mask;
320         u8 mstandby_shift;
321
322         if (!oh->class->sysc ||
323             !(oh->class->sysc->sysc_flags & SYSC_HAS_MIDLEMODE))
324                 return -EINVAL;
325
326         if (!oh->class->sysc->sysc_fields) {
327                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
328                 return -EINVAL;
329         }
330
331         mstandby_shift = oh->class->sysc->sysc_fields->midle_shift;
332         mstandby_mask = (0x3 << mstandby_shift);
333
334         *v &= ~mstandby_mask;
335         *v |= __ffs(standbymode) << mstandby_shift;
336
337         return 0;
338 }
339
340 /**
341  * _set_slave_idlemode: set the OCP_SYSCONFIG SIDLEMODE field in @v
342  * @oh: struct omap_hwmod *
343  * @idlemode: SIDLEMODE field bits
344  * @v: pointer to register contents to modify
345  *
346  * Update the slave idle mode bits in @v to be @idlemode for the @oh
347  * hwmod.  Does not write to the hardware.  Returns -EINVAL upon error
348  * or 0 upon success.
349  */
350 static int _set_slave_idlemode(struct omap_hwmod *oh, u8 idlemode, u32 *v)
351 {
352         u32 sidle_mask;
353         u8 sidle_shift;
354
355         if (!oh->class->sysc ||
356             !(oh->class->sysc->sysc_flags & SYSC_HAS_SIDLEMODE))
357                 return -EINVAL;
358
359         if (!oh->class->sysc->sysc_fields) {
360                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
361                 return -EINVAL;
362         }
363
364         sidle_shift = oh->class->sysc->sysc_fields->sidle_shift;
365         sidle_mask = (0x3 << sidle_shift);
366
367         *v &= ~sidle_mask;
368         *v |= __ffs(idlemode) << sidle_shift;
369
370         return 0;
371 }
372
373 /**
374  * _set_clockactivity: set OCP_SYSCONFIG.CLOCKACTIVITY bits in @v
375  * @oh: struct omap_hwmod *
376  * @clockact: CLOCKACTIVITY field bits
377  * @v: pointer to register contents to modify
378  *
379  * Update the clockactivity mode bits in @v to be @clockact for the
380  * @oh hwmod.  Used for additional powersaving on some modules.  Does
381  * not write to the hardware.  Returns -EINVAL upon error or 0 upon
382  * success.
383  */
384 static int _set_clockactivity(struct omap_hwmod *oh, u8 clockact, u32 *v)
385 {
386         u32 clkact_mask;
387         u8  clkact_shift;
388
389         if (!oh->class->sysc ||
390             !(oh->class->sysc->sysc_flags & SYSC_HAS_CLOCKACTIVITY))
391                 return -EINVAL;
392
393         if (!oh->class->sysc->sysc_fields) {
394                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
395                 return -EINVAL;
396         }
397
398         clkact_shift = oh->class->sysc->sysc_fields->clkact_shift;
399         clkact_mask = (0x3 << clkact_shift);
400
401         *v &= ~clkact_mask;
402         *v |= clockact << clkact_shift;
403
404         return 0;
405 }
406
407 /**
408  * _set_softreset: set OCP_SYSCONFIG.SOFTRESET bit in @v
409  * @oh: struct omap_hwmod *
410  * @v: pointer to register contents to modify
411  *
412  * Set the SOFTRESET bit in @v for hwmod @oh.  Returns -EINVAL upon
413  * error or 0 upon success.
414  */
415 static int _set_softreset(struct omap_hwmod *oh, u32 *v)
416 {
417         u32 softrst_mask;
418
419         if (!oh->class->sysc ||
420             !(oh->class->sysc->sysc_flags & SYSC_HAS_SOFTRESET))
421                 return -EINVAL;
422
423         if (!oh->class->sysc->sysc_fields) {
424                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
425                 return -EINVAL;
426         }
427
428         softrst_mask = (0x1 << oh->class->sysc->sysc_fields->srst_shift);
429
430         *v |= softrst_mask;
431
432         return 0;
433 }
434
435 /**
436  * _clear_softreset: clear OCP_SYSCONFIG.SOFTRESET bit in @v
437  * @oh: struct omap_hwmod *
438  * @v: pointer to register contents to modify
439  *
440  * Clear the SOFTRESET bit in @v for hwmod @oh.  Returns -EINVAL upon
441  * error or 0 upon success.
442  */
443 static int _clear_softreset(struct omap_hwmod *oh, u32 *v)
444 {
445         u32 softrst_mask;
446
447         if (!oh->class->sysc ||
448             !(oh->class->sysc->sysc_flags & SYSC_HAS_SOFTRESET))
449                 return -EINVAL;
450
451         if (!oh->class->sysc->sysc_fields) {
452                 WARN(1,
453                      "omap_hwmod: %s: sysc_fields absent for sysconfig class\n",
454                      oh->name);
455                 return -EINVAL;
456         }
457
458         softrst_mask = (0x1 << oh->class->sysc->sysc_fields->srst_shift);
459
460         *v &= ~softrst_mask;
461
462         return 0;
463 }
464
465 /**
466  * _wait_softreset_complete - wait for an OCP softreset to complete
467  * @oh: struct omap_hwmod * to wait on
468  *
469  * Wait until the IP block represented by @oh reports that its OCP
470  * softreset is complete.  This can be triggered by software (see
471  * _ocp_softreset()) or by hardware upon returning from off-mode (one
472  * example is HSMMC).  Waits for up to MAX_MODULE_SOFTRESET_WAIT
473  * microseconds.  Returns the number of microseconds waited.
474  */
475 static int _wait_softreset_complete(struct omap_hwmod *oh)
476 {
477         struct omap_hwmod_class_sysconfig *sysc;
478         u32 softrst_mask;
479         int c = 0;
480
481         sysc = oh->class->sysc;
482
483         if (sysc->sysc_flags & SYSS_HAS_RESET_STATUS)
484                 omap_test_timeout((omap_hwmod_read(oh, sysc->syss_offs)
485                                    & SYSS_RESETDONE_MASK),
486                                   MAX_MODULE_SOFTRESET_WAIT, c);
487         else if (sysc->sysc_flags & SYSC_HAS_RESET_STATUS) {
488                 softrst_mask = (0x1 << sysc->sysc_fields->srst_shift);
489                 omap_test_timeout(!(omap_hwmod_read(oh, sysc->sysc_offs)
490                                     & softrst_mask),
491                                   MAX_MODULE_SOFTRESET_WAIT, c);
492         }
493
494         return c;
495 }
496
497 /**
498  * _set_dmadisable: set OCP_SYSCONFIG.DMADISABLE bit in @v
499  * @oh: struct omap_hwmod *
500  *
501  * The DMADISABLE bit is a semi-automatic bit present in sysconfig register
502  * of some modules. When the DMA must perform read/write accesses, the
503  * DMADISABLE bit is cleared by the hardware. But when the DMA must stop
504  * for power management, software must set the DMADISABLE bit back to 1.
505  *
506  * Set the DMADISABLE bit in @v for hwmod @oh.  Returns -EINVAL upon
507  * error or 0 upon success.
508  */
509 static int _set_dmadisable(struct omap_hwmod *oh)
510 {
511         u32 v;
512         u32 dmadisable_mask;
513
514         if (!oh->class->sysc ||
515             !(oh->class->sysc->sysc_flags & SYSC_HAS_DMADISABLE))
516                 return -EINVAL;
517
518         if (!oh->class->sysc->sysc_fields) {
519                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
520                 return -EINVAL;
521         }
522
523         /* clocks must be on for this operation */
524         if (oh->_state != _HWMOD_STATE_ENABLED) {
525                 pr_warn("omap_hwmod: %s: dma can be disabled only from enabled state\n", oh->name);
526                 return -EINVAL;
527         }
528
529         pr_debug("omap_hwmod: %s: setting DMADISABLE\n", oh->name);
530
531         v = oh->_sysc_cache;
532         dmadisable_mask =
533                 (0x1 << oh->class->sysc->sysc_fields->dmadisable_shift);
534         v |= dmadisable_mask;
535         _write_sysconfig(v, oh);
536
537         return 0;
538 }
539
540 /**
541  * _set_module_autoidle: set the OCP_SYSCONFIG AUTOIDLE field in @v
542  * @oh: struct omap_hwmod *
543  * @autoidle: desired AUTOIDLE bitfield value (0 or 1)
544  * @v: pointer to register contents to modify
545  *
546  * Update the module autoidle bit in @v to be @autoidle for the @oh
547  * hwmod.  The autoidle bit controls whether the module can gate
548  * internal clocks automatically when it isn't doing anything; the
549  * exact function of this bit varies on a per-module basis.  This
550  * function does not write to the hardware.  Returns -EINVAL upon
551  * error or 0 upon success.
552  */
553 static int _set_module_autoidle(struct omap_hwmod *oh, u8 autoidle,
554                                 u32 *v)
555 {
556         u32 autoidle_mask;
557         u8 autoidle_shift;
558
559         if (!oh->class->sysc ||
560             !(oh->class->sysc->sysc_flags & SYSC_HAS_AUTOIDLE))
561                 return -EINVAL;
562
563         if (!oh->class->sysc->sysc_fields) {
564                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
565                 return -EINVAL;
566         }
567
568         autoidle_shift = oh->class->sysc->sysc_fields->autoidle_shift;
569         autoidle_mask = (0x1 << autoidle_shift);
570
571         *v &= ~autoidle_mask;
572         *v |= autoidle << autoidle_shift;
573
574         return 0;
575 }
576
577 /**
578  * _set_idle_ioring_wakeup - enable/disable IO pad wakeup on hwmod idle for mux
579  * @oh: struct omap_hwmod *
580  * @set_wake: bool value indicating to set (true) or clear (false) wakeup enable
581  *
582  * Set or clear the I/O pad wakeup flag in the mux entries for the
583  * hwmod @oh.  This function changes the @oh->mux->pads_dynamic array
584  * in memory.  If the hwmod is currently idled, and the new idle
585  * values don't match the previous ones, this function will also
586  * update the SCM PADCTRL registers.  Otherwise, if the hwmod is not
587  * currently idled, this function won't touch the hardware: the new
588  * mux settings are written to the SCM PADCTRL registers when the
589  * hwmod is idled.  No return value.
590  */
591 static void _set_idle_ioring_wakeup(struct omap_hwmod *oh, bool set_wake)
592 {
593         struct omap_device_pad *pad;
594         bool change = false;
595         u16 prev_idle;
596         int j;
597
598         if (!oh->mux || !oh->mux->enabled)
599                 return;
600
601         for (j = 0; j < oh->mux->nr_pads_dynamic; j++) {
602                 pad = oh->mux->pads_dynamic[j];
603
604                 if (!(pad->flags & OMAP_DEVICE_PAD_WAKEUP))
605                         continue;
606
607                 prev_idle = pad->idle;
608
609                 if (set_wake)
610                         pad->idle |= OMAP_WAKEUP_EN;
611                 else
612                         pad->idle &= ~OMAP_WAKEUP_EN;
613
614                 if (prev_idle != pad->idle)
615                         change = true;
616         }
617
618         if (change && oh->_state == _HWMOD_STATE_IDLE)
619                 omap_hwmod_mux(oh->mux, _HWMOD_STATE_IDLE);
620 }
621
622 /**
623  * _enable_wakeup: set OCP_SYSCONFIG.ENAWAKEUP bit in the hardware
624  * @oh: struct omap_hwmod *
625  *
626  * Allow the hardware module @oh to send wakeups.  Returns -EINVAL
627  * upon error or 0 upon success.
628  */
629 static int _enable_wakeup(struct omap_hwmod *oh, u32 *v)
630 {
631         if (!oh->class->sysc ||
632             !((oh->class->sysc->sysc_flags & SYSC_HAS_ENAWAKEUP) ||
633               (oh->class->sysc->idlemodes & SIDLE_SMART_WKUP) ||
634               (oh->class->sysc->idlemodes & MSTANDBY_SMART_WKUP)))
635                 return -EINVAL;
636
637         if (!oh->class->sysc->sysc_fields) {
638                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
639                 return -EINVAL;
640         }
641
642         if (oh->class->sysc->sysc_flags & SYSC_HAS_ENAWAKEUP)
643                 *v |= 0x1 << oh->class->sysc->sysc_fields->enwkup_shift;
644
645         if (oh->class->sysc->idlemodes & SIDLE_SMART_WKUP)
646                 _set_slave_idlemode(oh, HWMOD_IDLEMODE_SMART_WKUP, v);
647         if (oh->class->sysc->idlemodes & MSTANDBY_SMART_WKUP)
648                 _set_master_standbymode(oh, HWMOD_IDLEMODE_SMART_WKUP, v);
649
650         /* XXX test pwrdm_get_wken for this hwmod's subsystem */
651
652         return 0;
653 }
654
655 /**
656  * _disable_wakeup: clear OCP_SYSCONFIG.ENAWAKEUP bit in the hardware
657  * @oh: struct omap_hwmod *
658  *
659  * Prevent the hardware module @oh to send wakeups.  Returns -EINVAL
660  * upon error or 0 upon success.
661  */
662 static int _disable_wakeup(struct omap_hwmod *oh, u32 *v)
663 {
664         if (!oh->class->sysc ||
665             !((oh->class->sysc->sysc_flags & SYSC_HAS_ENAWAKEUP) ||
666               (oh->class->sysc->idlemodes & SIDLE_SMART_WKUP) ||
667               (oh->class->sysc->idlemodes & MSTANDBY_SMART_WKUP)))
668                 return -EINVAL;
669
670         if (!oh->class->sysc->sysc_fields) {
671                 WARN(1, "omap_hwmod: %s: offset struct for sysconfig not provided in class\n", oh->name);
672                 return -EINVAL;
673         }
674
675         if (oh->class->sysc->sysc_flags & SYSC_HAS_ENAWAKEUP)
676                 *v &= ~(0x1 << oh->class->sysc->sysc_fields->enwkup_shift);
677
678         if (oh->class->sysc->idlemodes & SIDLE_SMART_WKUP)
679                 _set_slave_idlemode(oh, HWMOD_IDLEMODE_SMART, v);
680         if (oh->class->sysc->idlemodes & MSTANDBY_SMART_WKUP)
681                 _set_master_standbymode(oh, HWMOD_IDLEMODE_SMART, v);
682
683         /* XXX test pwrdm_get_wken for this hwmod's subsystem */
684
685         return 0;
686 }
687
688 static struct clockdomain *_get_clkdm(struct omap_hwmod *oh)
689 {
690         struct clk_hw_omap *clk;
691
692         if (oh->clkdm) {
693                 return oh->clkdm;
694         } else if (oh->_clk) {
695                 if (__clk_get_flags(oh->_clk) & CLK_IS_BASIC)
696                         return NULL;
697                 clk = to_clk_hw_omap(__clk_get_hw(oh->_clk));
698                 return  clk->clkdm;
699         }
700         return NULL;
701 }
702
703 /**
704  * _add_initiator_dep: prevent @oh from smart-idling while @init_oh is active
705  * @oh: struct omap_hwmod *
706  *
707  * Prevent the hardware module @oh from entering idle while the
708  * hardare module initiator @init_oh is active.  Useful when a module
709  * will be accessed by a particular initiator (e.g., if a module will
710  * be accessed by the IVA, there should be a sleepdep between the IVA
711  * initiator and the module).  Only applies to modules in smart-idle
712  * mode.  If the clockdomain is marked as not needing autodeps, return
713  * 0 without doing anything.  Otherwise, returns -EINVAL upon error or
714  * passes along clkdm_add_sleepdep() value upon success.
715  */
716 static int _add_initiator_dep(struct omap_hwmod *oh, struct omap_hwmod *init_oh)
717 {
718         struct clockdomain *clkdm, *init_clkdm;
719
720         clkdm = _get_clkdm(oh);
721         init_clkdm = _get_clkdm(init_oh);
722
723         if (!clkdm || !init_clkdm)
724                 return -EINVAL;
725
726         if (clkdm && clkdm->flags & CLKDM_NO_AUTODEPS)
727                 return 0;
728
729         return clkdm_add_sleepdep(clkdm, init_clkdm);
730 }
731
732 /**
733  * _del_initiator_dep: allow @oh to smart-idle even if @init_oh is active
734  * @oh: struct omap_hwmod *
735  *
736  * Allow the hardware module @oh to enter idle while the hardare
737  * module initiator @init_oh is active.  Useful when a module will not
738  * be accessed by a particular initiator (e.g., if a module will not
739  * be accessed by the IVA, there should be no sleepdep between the IVA
740  * initiator and the module).  Only applies to modules in smart-idle
741  * mode.  If the clockdomain is marked as not needing autodeps, return
742  * 0 without doing anything.  Returns -EINVAL upon error or passes
743  * along clkdm_del_sleepdep() value upon success.
744  */
745 static int _del_initiator_dep(struct omap_hwmod *oh, struct omap_hwmod *init_oh)
746 {
747         struct clockdomain *clkdm, *init_clkdm;
748
749         clkdm = _get_clkdm(oh);
750         init_clkdm = _get_clkdm(init_oh);
751
752         if (!clkdm || !init_clkdm)
753                 return -EINVAL;
754
755         if (clkdm && clkdm->flags & CLKDM_NO_AUTODEPS)
756                 return 0;
757
758         return clkdm_del_sleepdep(clkdm, init_clkdm);
759 }
760
761 /**
762  * _init_main_clk - get a struct clk * for the the hwmod's main functional clk
763  * @oh: struct omap_hwmod *
764  *
765  * Called from _init_clocks().  Populates the @oh _clk (main
766  * functional clock pointer) if a main_clk is present.  Returns 0 on
767  * success or -EINVAL on error.
768  */
769 static int _init_main_clk(struct omap_hwmod *oh)
770 {
771         int ret = 0;
772
773         if (!oh->main_clk)
774                 return 0;
775
776         oh->_clk = clk_get(NULL, oh->main_clk);
777         if (IS_ERR(oh->_clk)) {
778                 pr_warn("omap_hwmod: %s: cannot clk_get main_clk %s\n",
779                         oh->name, oh->main_clk);
780                 return -EINVAL;
781         }
782         /*
783          * HACK: This needs a re-visit once clk_prepare() is implemented
784          * to do something meaningful. Today its just a no-op.
785          * If clk_prepare() is used at some point to do things like
786          * voltage scaling etc, then this would have to be moved to
787          * some point where subsystems like i2c and pmic become
788          * available.
789          */
790         clk_prepare(oh->_clk);
791
792         if (!_get_clkdm(oh))
793                 pr_debug("omap_hwmod: %s: missing clockdomain for %s.\n",
794                            oh->name, oh->main_clk);
795
796         return ret;
797 }
798
799 /**
800  * _init_interface_clks - get a struct clk * for the the hwmod's interface clks
801  * @oh: struct omap_hwmod *
802  *
803  * Called from _init_clocks().  Populates the @oh OCP slave interface
804  * clock pointers.  Returns 0 on success or -EINVAL on error.
805  */
806 static int _init_interface_clks(struct omap_hwmod *oh)
807 {
808         struct omap_hwmod_ocp_if *os;
809         struct list_head *p;
810         struct clk *c;
811         int i = 0;
812         int ret = 0;
813
814         p = oh->slave_ports.next;
815
816         while (i < oh->slaves_cnt) {
817                 os = _fetch_next_ocp_if(&p, &i);
818                 if (!os->clk)
819                         continue;
820
821                 c = clk_get(NULL, os->clk);
822                 if (IS_ERR(c)) {
823                         pr_warn("omap_hwmod: %s: cannot clk_get interface_clk %s\n",
824                                 oh->name, os->clk);
825                         ret = -EINVAL;
826                         continue;
827                 }
828                 os->_clk = c;
829                 /*
830                  * HACK: This needs a re-visit once clk_prepare() is implemented
831                  * to do something meaningful. Today its just a no-op.
832                  * If clk_prepare() is used at some point to do things like
833                  * voltage scaling etc, then this would have to be moved to
834                  * some point where subsystems like i2c and pmic become
835                  * available.
836                  */
837                 clk_prepare(os->_clk);
838         }
839
840         return ret;
841 }
842
843 /**
844  * _init_opt_clk - get a struct clk * for the the hwmod's optional clocks
845  * @oh: struct omap_hwmod *
846  *
847  * Called from _init_clocks().  Populates the @oh omap_hwmod_opt_clk
848  * clock pointers.  Returns 0 on success or -EINVAL on error.
849  */
850 static int _init_opt_clks(struct omap_hwmod *oh)
851 {
852         struct omap_hwmod_opt_clk *oc;
853         struct clk *c;
854         int i;
855         int ret = 0;
856
857         for (i = oh->opt_clks_cnt, oc = oh->opt_clks; i > 0; i--, oc++) {
858                 c = clk_get(NULL, oc->clk);
859                 if (IS_ERR(c)) {
860                         pr_warn("omap_hwmod: %s: cannot clk_get opt_clk %s\n",
861                                 oh->name, oc->clk);
862                         ret = -EINVAL;
863                         continue;
864                 }
865                 oc->_clk = c;
866                 /*
867                  * HACK: This needs a re-visit once clk_prepare() is implemented
868                  * to do something meaningful. Today its just a no-op.
869                  * If clk_prepare() is used at some point to do things like
870                  * voltage scaling etc, then this would have to be moved to
871                  * some point where subsystems like i2c and pmic become
872                  * available.
873                  */
874                 clk_prepare(oc->_clk);
875         }
876
877         return ret;
878 }
879
880 /**
881  * _enable_clocks - enable hwmod main clock and interface clocks
882  * @oh: struct omap_hwmod *
883  *
884  * Enables all clocks necessary for register reads and writes to succeed
885  * on the hwmod @oh.  Returns 0.
886  */
887 static int _enable_clocks(struct omap_hwmod *oh)
888 {
889         struct omap_hwmod_ocp_if *os;
890         struct list_head *p;
891         int i = 0;
892
893         pr_debug("omap_hwmod: %s: enabling clocks\n", oh->name);
894
895         if (oh->_clk)
896                 clk_enable(oh->_clk);
897
898         p = oh->slave_ports.next;
899
900         while (i < oh->slaves_cnt) {
901                 os = _fetch_next_ocp_if(&p, &i);
902
903                 if (os->_clk && (os->flags & OCPIF_SWSUP_IDLE))
904                         clk_enable(os->_clk);
905         }
906
907         /* The opt clocks are controlled by the device driver. */
908
909         return 0;
910 }
911
912 /**
913  * _disable_clocks - disable hwmod main clock and interface clocks
914  * @oh: struct omap_hwmod *
915  *
916  * Disables the hwmod @oh main functional and interface clocks.  Returns 0.
917  */
918 static int _disable_clocks(struct omap_hwmod *oh)
919 {
920         struct omap_hwmod_ocp_if *os;
921         struct list_head *p;
922         int i = 0;
923
924         pr_debug("omap_hwmod: %s: disabling clocks\n", oh->name);
925
926         if (oh->_clk)
927                 clk_disable(oh->_clk);
928
929         p = oh->slave_ports.next;
930
931         while (i < oh->slaves_cnt) {
932                 os = _fetch_next_ocp_if(&p, &i);
933
934                 if (os->_clk && (os->flags & OCPIF_SWSUP_IDLE))
935                         clk_disable(os->_clk);
936         }
937
938         /* The opt clocks are controlled by the device driver. */
939
940         return 0;
941 }
942
943 static void _enable_optional_clocks(struct omap_hwmod *oh)
944 {
945         struct omap_hwmod_opt_clk *oc;
946         int i;
947
948         pr_debug("omap_hwmod: %s: enabling optional clocks\n", oh->name);
949
950         for (i = oh->opt_clks_cnt, oc = oh->opt_clks; i > 0; i--, oc++)
951                 if (oc->_clk) {
952                         pr_debug("omap_hwmod: enable %s:%s\n", oc->role,
953                                  __clk_get_name(oc->_clk));
954                         clk_enable(oc->_clk);
955                 }
956 }
957
958 static void _disable_optional_clocks(struct omap_hwmod *oh)
959 {
960         struct omap_hwmod_opt_clk *oc;
961         int i;
962
963         pr_debug("omap_hwmod: %s: disabling optional clocks\n", oh->name);
964
965         for (i = oh->opt_clks_cnt, oc = oh->opt_clks; i > 0; i--, oc++)
966                 if (oc->_clk) {
967                         pr_debug("omap_hwmod: disable %s:%s\n", oc->role,
968                                  __clk_get_name(oc->_clk));
969                         clk_disable(oc->_clk);
970                 }
971 }
972
973 /**
974  * _omap4_enable_module - enable CLKCTRL modulemode on OMAP4
975  * @oh: struct omap_hwmod *
976  *
977  * Enables the PRCM module mode related to the hwmod @oh.
978  * No return value.
979  */
980 static void _omap4_enable_module(struct omap_hwmod *oh)
981 {
982         if (!oh->clkdm || !oh->prcm.omap4.modulemode)
983                 return;
984
985         pr_debug("omap_hwmod: %s: %s: %d\n",
986                  oh->name, __func__, oh->prcm.omap4.modulemode);
987
988         omap_cm_module_enable(oh->prcm.omap4.modulemode,
989                               oh->clkdm->prcm_partition,
990                               oh->clkdm->cm_inst, oh->prcm.omap4.clkctrl_offs);
991 }
992
993 /**
994  * _omap4_wait_target_disable - wait for a module to be disabled on OMAP4
995  * @oh: struct omap_hwmod *
996  *
997  * Wait for a module @oh to enter slave idle.  Returns 0 if the module
998  * does not have an IDLEST bit or if the module successfully enters
999  * slave idle; otherwise, pass along the return value of the
1000  * appropriate *_cm*_wait_module_idle() function.
1001  */
1002 static int _omap4_wait_target_disable(struct omap_hwmod *oh)
1003 {
1004         if (!oh)
1005                 return -EINVAL;
1006
1007         if (oh->_int_flags & _HWMOD_NO_MPU_PORT || !oh->clkdm)
1008                 return 0;
1009
1010         if (oh->flags & HWMOD_NO_IDLEST)
1011                 return 0;
1012
1013         return omap_cm_wait_module_idle(oh->clkdm->prcm_partition,
1014                                         oh->clkdm->cm_inst,
1015                                         oh->prcm.omap4.clkctrl_offs, 0);
1016 }
1017
1018 /**
1019  * _count_mpu_irqs - count the number of MPU IRQ lines associated with @oh
1020  * @oh: struct omap_hwmod *oh
1021  *
1022  * Count and return the number of MPU IRQs associated with the hwmod
1023  * @oh.  Used to allocate struct resource data.  Returns 0 if @oh is
1024  * NULL.
1025  */
1026 static int _count_mpu_irqs(struct omap_hwmod *oh)
1027 {
1028         struct omap_hwmod_irq_info *ohii;
1029         int i = 0;
1030
1031         if (!oh || !oh->mpu_irqs)
1032                 return 0;
1033
1034         do {
1035                 ohii = &oh->mpu_irqs[i++];
1036         } while (ohii->irq != -1);
1037
1038         return i-1;
1039 }
1040
1041 /**
1042  * _count_sdma_reqs - count the number of SDMA request lines associated with @oh
1043  * @oh: struct omap_hwmod *oh
1044  *
1045  * Count and return the number of SDMA request lines associated with
1046  * the hwmod @oh.  Used to allocate struct resource data.  Returns 0
1047  * if @oh is NULL.
1048  */
1049 static int _count_sdma_reqs(struct omap_hwmod *oh)
1050 {
1051         struct omap_hwmod_dma_info *ohdi;
1052         int i = 0;
1053
1054         if (!oh || !oh->sdma_reqs)
1055                 return 0;
1056
1057         do {
1058                 ohdi = &oh->sdma_reqs[i++];
1059         } while (ohdi->dma_req != -1);
1060
1061         return i-1;
1062 }
1063
1064 /**
1065  * _count_ocp_if_addr_spaces - count the number of address space entries for @oh
1066  * @oh: struct omap_hwmod *oh
1067  *
1068  * Count and return the number of address space ranges associated with
1069  * the hwmod @oh.  Used to allocate struct resource data.  Returns 0
1070  * if @oh is NULL.
1071  */
1072 static int _count_ocp_if_addr_spaces(struct omap_hwmod_ocp_if *os)
1073 {
1074         struct omap_hwmod_addr_space *mem;
1075         int i = 0;
1076
1077         if (!os || !os->addr)
1078                 return 0;
1079
1080         do {
1081                 mem = &os->addr[i++];
1082         } while (mem->pa_start != mem->pa_end);
1083
1084         return i-1;
1085 }
1086
1087 /**
1088  * _get_mpu_irq_by_name - fetch MPU interrupt line number by name
1089  * @oh: struct omap_hwmod * to operate on
1090  * @name: pointer to the name of the MPU interrupt number to fetch (optional)
1091  * @irq: pointer to an unsigned int to store the MPU IRQ number to
1092  *
1093  * Retrieve a MPU hardware IRQ line number named by @name associated
1094  * with the IP block pointed to by @oh.  The IRQ number will be filled
1095  * into the address pointed to by @dma.  When @name is non-null, the
1096  * IRQ line number associated with the named entry will be returned.
1097  * If @name is null, the first matching entry will be returned.  Data
1098  * order is not meaningful in hwmod data, so callers are strongly
1099  * encouraged to use a non-null @name whenever possible to avoid
1100  * unpredictable effects if hwmod data is later added that causes data
1101  * ordering to change.  Returns 0 upon success or a negative error
1102  * code upon error.
1103  */
1104 static int _get_mpu_irq_by_name(struct omap_hwmod *oh, const char *name,
1105                                 unsigned int *irq)
1106 {
1107         int i;
1108         bool found = false;
1109
1110         if (!oh->mpu_irqs)
1111                 return -ENOENT;
1112
1113         i = 0;
1114         while (oh->mpu_irqs[i].irq != -1) {
1115                 if (name == oh->mpu_irqs[i].name ||
1116                     !strcmp(name, oh->mpu_irqs[i].name)) {
1117                         found = true;
1118                         break;
1119                 }
1120                 i++;
1121         }
1122
1123         if (!found)
1124                 return -ENOENT;
1125
1126         *irq = oh->mpu_irqs[i].irq;
1127
1128         return 0;
1129 }
1130
1131 /**
1132  * _get_sdma_req_by_name - fetch SDMA request line ID by name
1133  * @oh: struct omap_hwmod * to operate on
1134  * @name: pointer to the name of the SDMA request line to fetch (optional)
1135  * @dma: pointer to an unsigned int to store the request line ID to
1136  *
1137  * Retrieve an SDMA request line ID named by @name on the IP block
1138  * pointed to by @oh.  The ID will be filled into the address pointed
1139  * to by @dma.  When @name is non-null, the request line ID associated
1140  * with the named entry will be returned.  If @name is null, the first
1141  * matching entry will be returned.  Data order is not meaningful in
1142  * hwmod data, so callers are strongly encouraged to use a non-null
1143  * @name whenever possible to avoid unpredictable effects if hwmod
1144  * data is later added that causes data ordering to change.  Returns 0
1145  * upon success or a negative error code upon error.
1146  */
1147 static int _get_sdma_req_by_name(struct omap_hwmod *oh, const char *name,
1148                                  unsigned int *dma)
1149 {
1150         int i;
1151         bool found = false;
1152
1153         if (!oh->sdma_reqs)
1154                 return -ENOENT;
1155
1156         i = 0;
1157         while (oh->sdma_reqs[i].dma_req != -1) {
1158                 if (name == oh->sdma_reqs[i].name ||
1159                     !strcmp(name, oh->sdma_reqs[i].name)) {
1160                         found = true;
1161                         break;
1162                 }
1163                 i++;
1164         }
1165
1166         if (!found)
1167                 return -ENOENT;
1168
1169         *dma = oh->sdma_reqs[i].dma_req;
1170
1171         return 0;
1172 }
1173
1174 /**
1175  * _get_addr_space_by_name - fetch address space start & end by name
1176  * @oh: struct omap_hwmod * to operate on
1177  * @name: pointer to the name of the address space to fetch (optional)
1178  * @pa_start: pointer to a u32 to store the starting address to
1179  * @pa_end: pointer to a u32 to store the ending address to
1180  *
1181  * Retrieve address space start and end addresses for the IP block
1182  * pointed to by @oh.  The data will be filled into the addresses
1183  * pointed to by @pa_start and @pa_end.  When @name is non-null, the
1184  * address space data associated with the named entry will be
1185  * returned.  If @name is null, the first matching entry will be
1186  * returned.  Data order is not meaningful in hwmod data, so callers
1187  * are strongly encouraged to use a non-null @name whenever possible
1188  * to avoid unpredictable effects if hwmod data is later added that
1189  * causes data ordering to change.  Returns 0 upon success or a
1190  * negative error code upon error.
1191  */
1192 static int _get_addr_space_by_name(struct omap_hwmod *oh, const char *name,
1193                                    u32 *pa_start, u32 *pa_end)
1194 {
1195         int i, j;
1196         struct omap_hwmod_ocp_if *os;
1197         struct list_head *p = NULL;
1198         bool found = false;
1199
1200         p = oh->slave_ports.next;
1201
1202         i = 0;
1203         while (i < oh->slaves_cnt) {
1204                 os = _fetch_next_ocp_if(&p, &i);
1205
1206                 if (!os->addr)
1207                         return -ENOENT;
1208
1209                 j = 0;
1210                 while (os->addr[j].pa_start != os->addr[j].pa_end) {
1211                         if (name == os->addr[j].name ||
1212                             !strcmp(name, os->addr[j].name)) {
1213                                 found = true;
1214                                 break;
1215                         }
1216                         j++;
1217                 }
1218
1219                 if (found)
1220                         break;
1221         }
1222
1223         if (!found)
1224                 return -ENOENT;
1225
1226         *pa_start = os->addr[j].pa_start;
1227         *pa_end = os->addr[j].pa_end;
1228
1229         return 0;
1230 }
1231
1232 /**
1233  * _save_mpu_port_index - find and save the index to @oh's MPU port
1234  * @oh: struct omap_hwmod *
1235  *
1236  * Determines the array index of the OCP slave port that the MPU uses
1237  * to address the device, and saves it into the struct omap_hwmod.
1238  * Intended to be called during hwmod registration only. No return
1239  * value.
1240  */
1241 static void __init _save_mpu_port_index(struct omap_hwmod *oh)
1242 {
1243         struct omap_hwmod_ocp_if *os = NULL;
1244         struct list_head *p;
1245         int i = 0;
1246
1247         if (!oh)
1248                 return;
1249
1250         oh->_int_flags |= _HWMOD_NO_MPU_PORT;
1251
1252         p = oh->slave_ports.next;
1253
1254         while (i < oh->slaves_cnt) {
1255                 os = _fetch_next_ocp_if(&p, &i);
1256                 if (os->user & OCP_USER_MPU) {
1257                         oh->_mpu_port = os;
1258                         oh->_int_flags &= ~_HWMOD_NO_MPU_PORT;
1259                         break;
1260                 }
1261         }
1262
1263         return;
1264 }
1265
1266 /**
1267  * _find_mpu_rt_port - return omap_hwmod_ocp_if accessible by the MPU
1268  * @oh: struct omap_hwmod *
1269  *
1270  * Given a pointer to a struct omap_hwmod record @oh, return a pointer
1271  * to the struct omap_hwmod_ocp_if record that is used by the MPU to
1272  * communicate with the IP block.  This interface need not be directly
1273  * connected to the MPU (and almost certainly is not), but is directly
1274  * connected to the IP block represented by @oh.  Returns a pointer
1275  * to the struct omap_hwmod_ocp_if * upon success, or returns NULL upon
1276  * error or if there does not appear to be a path from the MPU to this
1277  * IP block.
1278  */
1279 static struct omap_hwmod_ocp_if *_find_mpu_rt_port(struct omap_hwmod *oh)
1280 {
1281         if (!oh || oh->_int_flags & _HWMOD_NO_MPU_PORT || oh->slaves_cnt == 0)
1282                 return NULL;
1283
1284         return oh->_mpu_port;
1285 };
1286
1287 /**
1288  * _find_mpu_rt_addr_space - return MPU register target address space for @oh
1289  * @oh: struct omap_hwmod *
1290  *
1291  * Returns a pointer to the struct omap_hwmod_addr_space record representing
1292  * the register target MPU address space; or returns NULL upon error.
1293  */
1294 static struct omap_hwmod_addr_space * __init _find_mpu_rt_addr_space(struct omap_hwmod *oh)
1295 {
1296         struct omap_hwmod_ocp_if *os;
1297         struct omap_hwmod_addr_space *mem;
1298         int found = 0, i = 0;
1299
1300         os = _find_mpu_rt_port(oh);
1301         if (!os || !os->addr)
1302                 return NULL;
1303
1304         do {
1305                 mem = &os->addr[i++];
1306                 if (mem->flags & ADDR_TYPE_RT)
1307                         found = 1;
1308         } while (!found && mem->pa_start != mem->pa_end);
1309
1310         return (found) ? mem : NULL;
1311 }
1312
1313 /**
1314  * _enable_sysc - try to bring a module out of idle via OCP_SYSCONFIG
1315  * @oh: struct omap_hwmod *
1316  *
1317  * Ensure that the OCP_SYSCONFIG register for the IP block represented
1318  * by @oh is set to indicate to the PRCM that the IP block is active.
1319  * Usually this means placing the module into smart-idle mode and
1320  * smart-standby, but if there is a bug in the automatic idle handling
1321  * for the IP block, it may need to be placed into the force-idle or
1322  * no-idle variants of these modes.  No return value.
1323  */
1324 static void _enable_sysc(struct omap_hwmod *oh)
1325 {
1326         u8 idlemode, sf;
1327         u32 v;
1328         bool clkdm_act;
1329         struct clockdomain *clkdm;
1330
1331         if (!oh->class->sysc)
1332                 return;
1333
1334         /*
1335          * Wait until reset has completed, this is needed as the IP
1336          * block is reset automatically by hardware in some cases
1337          * (off-mode for example), and the drivers require the
1338          * IP to be ready when they access it
1339          */
1340         if (oh->flags & HWMOD_CONTROL_OPT_CLKS_IN_RESET)
1341                 _enable_optional_clocks(oh);
1342         _wait_softreset_complete(oh);
1343         if (oh->flags & HWMOD_CONTROL_OPT_CLKS_IN_RESET)
1344                 _disable_optional_clocks(oh);
1345
1346         v = oh->_sysc_cache;
1347         sf = oh->class->sysc->sysc_flags;
1348
1349         clkdm = _get_clkdm(oh);
1350         if (sf & SYSC_HAS_SIDLEMODE) {
1351                 if (oh->flags & HWMOD_SWSUP_SIDLE ||
1352                     oh->flags & HWMOD_SWSUP_SIDLE_ACT) {
1353                         idlemode = HWMOD_IDLEMODE_NO;
1354                 } else {
1355                         if (sf & SYSC_HAS_ENAWAKEUP)
1356                                 _enable_wakeup(oh, &v);
1357                         if (oh->class->sysc->idlemodes & SIDLE_SMART_WKUP)
1358                                 idlemode = HWMOD_IDLEMODE_SMART_WKUP;
1359                         else
1360                                 idlemode = HWMOD_IDLEMODE_SMART;
1361                 }
1362
1363                 /*
1364                  * This is special handling for some IPs like
1365                  * 32k sync timer. Force them to idle!
1366                  */
1367                 clkdm_act = (clkdm && clkdm->flags & CLKDM_ACTIVE_WITH_MPU);
1368                 if (clkdm_act && !(oh->class->sysc->idlemodes &
1369                                    (SIDLE_SMART | SIDLE_SMART_WKUP)))
1370                         idlemode = HWMOD_IDLEMODE_FORCE;
1371
1372                 _set_slave_idlemode(oh, idlemode, &v);
1373         }
1374
1375         if (sf & SYSC_HAS_MIDLEMODE) {
1376                 if (oh->flags & HWMOD_FORCE_MSTANDBY) {
1377                         idlemode = HWMOD_IDLEMODE_FORCE;
1378                 } else if (oh->flags & HWMOD_SWSUP_MSTANDBY) {
1379                         idlemode = HWMOD_IDLEMODE_NO;
1380                 } else {
1381                         if (sf & SYSC_HAS_ENAWAKEUP)
1382                                 _enable_wakeup(oh, &v);
1383                         if (oh->class->sysc->idlemodes & MSTANDBY_SMART_WKUP)
1384                                 idlemode = HWMOD_IDLEMODE_SMART_WKUP;
1385                         else
1386                                 idlemode = HWMOD_IDLEMODE_SMART;
1387                 }
1388                 _set_master_standbymode(oh, idlemode, &v);
1389         }
1390
1391         /*
1392          * XXX The clock framework should handle this, by
1393          * calling into this code.  But this must wait until the
1394          * clock structures are tagged with omap_hwmod entries
1395          */
1396         if ((oh->flags & HWMOD_SET_DEFAULT_CLOCKACT) &&
1397             (sf & SYSC_HAS_CLOCKACTIVITY))
1398                 _set_clockactivity(oh, oh->class->sysc->clockact, &v);
1399
1400         /* If the cached value is the same as the new value, skip the write */
1401         if (oh->_sysc_cache != v)
1402                 _write_sysconfig(v, oh);
1403
1404         /*
1405          * Set the autoidle bit only after setting the smartidle bit
1406          * Setting this will not have any impact on the other modules.
1407          */
1408         if (sf & SYSC_HAS_AUTOIDLE) {
1409                 idlemode = (oh->flags & HWMOD_NO_OCP_AUTOIDLE) ?
1410                         0 : 1;
1411                 _set_module_autoidle(oh, idlemode, &v);
1412                 _write_sysconfig(v, oh);
1413         }
1414 }
1415
1416 /**
1417  * _idle_sysc - try to put a module into idle via OCP_SYSCONFIG
1418  * @oh: struct omap_hwmod *
1419  *
1420  * If module is marked as SWSUP_SIDLE, force the module into slave
1421  * idle; otherwise, configure it for smart-idle.  If module is marked
1422  * as SWSUP_MSUSPEND, force the module into master standby; otherwise,
1423  * configure it for smart-standby.  No return value.
1424  */
1425 static void _idle_sysc(struct omap_hwmod *oh)
1426 {
1427         u8 idlemode, sf;
1428         u32 v;
1429
1430         if (!oh->class->sysc)
1431                 return;
1432
1433         v = oh->_sysc_cache;
1434         sf = oh->class->sysc->sysc_flags;
1435
1436         if (sf & SYSC_HAS_SIDLEMODE) {
1437                 if (oh->flags & HWMOD_SWSUP_SIDLE) {
1438                         idlemode = HWMOD_IDLEMODE_FORCE;
1439                 } else {
1440                         if (sf & SYSC_HAS_ENAWAKEUP)
1441                                 _enable_wakeup(oh, &v);
1442                         if (oh->class->sysc->idlemodes & SIDLE_SMART_WKUP)
1443                                 idlemode = HWMOD_IDLEMODE_SMART_WKUP;
1444                         else
1445                                 idlemode = HWMOD_IDLEMODE_SMART;
1446                 }
1447                 _set_slave_idlemode(oh, idlemode, &v);
1448         }
1449
1450         if (sf & SYSC_HAS_MIDLEMODE) {
1451                 if ((oh->flags & HWMOD_SWSUP_MSTANDBY) ||
1452                     (oh->flags & HWMOD_FORCE_MSTANDBY)) {
1453                         idlemode = HWMOD_IDLEMODE_FORCE;
1454                 } else {
1455                         if (sf & SYSC_HAS_ENAWAKEUP)
1456                                 _enable_wakeup(oh, &v);
1457                         if (oh->class->sysc->idlemodes & MSTANDBY_SMART_WKUP)
1458                                 idlemode = HWMOD_IDLEMODE_SMART_WKUP;
1459                         else
1460                                 idlemode = HWMOD_IDLEMODE_SMART;
1461                 }
1462                 _set_master_standbymode(oh, idlemode, &v);
1463         }
1464
1465         _write_sysconfig(v, oh);
1466 }
1467
1468 /**
1469  * _shutdown_sysc - force a module into idle via OCP_SYSCONFIG
1470  * @oh: struct omap_hwmod *
1471  *
1472  * Force the module into slave idle and master suspend. No return
1473  * value.
1474  */
1475 static void _shutdown_sysc(struct omap_hwmod *oh)
1476 {
1477         u32 v;
1478         u8 sf;
1479
1480         if (!oh->class->sysc)
1481                 return;
1482
1483         v = oh->_sysc_cache;
1484         sf = oh->class->sysc->sysc_flags;
1485
1486         if (sf & SYSC_HAS_SIDLEMODE)
1487                 _set_slave_idlemode(oh, HWMOD_IDLEMODE_FORCE, &v);
1488
1489         if (sf & SYSC_HAS_MIDLEMODE)
1490                 _set_master_standbymode(oh, HWMOD_IDLEMODE_FORCE, &v);
1491
1492         if (sf & SYSC_HAS_AUTOIDLE)
1493                 _set_module_autoidle(oh, 1, &v);
1494
1495         _write_sysconfig(v, oh);
1496 }
1497
1498 /**
1499  * _lookup - find an omap_hwmod by name
1500  * @name: find an omap_hwmod by name
1501  *
1502  * Return a pointer to an omap_hwmod by name, or NULL if not found.
1503  */
1504 static struct omap_hwmod *_lookup(const char *name)
1505 {
1506         struct omap_hwmod *oh, *temp_oh;
1507
1508         oh = NULL;
1509
1510         list_for_each_entry(temp_oh, &omap_hwmod_list, node) {
1511                 if (!strcmp(name, temp_oh->name)) {
1512                         oh = temp_oh;
1513                         break;
1514                 }
1515         }
1516
1517         return oh;
1518 }
1519
1520 /**
1521  * _init_clkdm - look up a clockdomain name, store pointer in omap_hwmod
1522  * @oh: struct omap_hwmod *
1523  *
1524  * Convert a clockdomain name stored in a struct omap_hwmod into a
1525  * clockdomain pointer, and save it into the struct omap_hwmod.
1526  * Return -EINVAL if the clkdm_name lookup failed.
1527  */
1528 static int _init_clkdm(struct omap_hwmod *oh)
1529 {
1530         if (!oh->clkdm_name) {
1531                 pr_debug("omap_hwmod: %s: missing clockdomain\n", oh->name);
1532                 return 0;
1533         }
1534
1535         oh->clkdm = clkdm_lookup(oh->clkdm_name);
1536         if (!oh->clkdm) {
1537                 pr_warn("omap_hwmod: %s: could not associate to clkdm %s\n",
1538                         oh->name, oh->clkdm_name);
1539                 return 0;
1540         }
1541
1542         pr_debug("omap_hwmod: %s: associated to clkdm %s\n",
1543                 oh->name, oh->clkdm_name);
1544
1545         return 0;
1546 }
1547
1548 /**
1549  * _init_clocks - clk_get() all clocks associated with this hwmod. Retrieve as
1550  * well the clockdomain.
1551  * @oh: struct omap_hwmod *
1552  * @data: not used; pass NULL
1553  *
1554  * Called by omap_hwmod_setup_*() (after omap2_clk_init()).
1555  * Resolves all clock names embedded in the hwmod.  Returns 0 on
1556  * success, or a negative error code on failure.
1557  */
1558 static int _init_clocks(struct omap_hwmod *oh, void *data)
1559 {
1560         int ret = 0;
1561
1562         if (oh->_state != _HWMOD_STATE_REGISTERED)
1563                 return 0;
1564
1565         pr_debug("omap_hwmod: %s: looking up clocks\n", oh->name);
1566
1567         if (soc_ops.init_clkdm)
1568                 ret |= soc_ops.init_clkdm(oh);
1569
1570         ret |= _init_main_clk(oh);
1571         ret |= _init_interface_clks(oh);
1572         ret |= _init_opt_clks(oh);
1573
1574         if (!ret)
1575                 oh->_state = _HWMOD_STATE_CLKS_INITED;
1576         else
1577                 pr_warn("omap_hwmod: %s: cannot _init_clocks\n", oh->name);
1578
1579         return ret;
1580 }
1581
1582 /**
1583  * _lookup_hardreset - fill register bit info for this hwmod/reset line
1584  * @oh: struct omap_hwmod *
1585  * @name: name of the reset line in the context of this hwmod
1586  * @ohri: struct omap_hwmod_rst_info * that this function will fill in
1587  *
1588  * Return the bit position of the reset line that match the
1589  * input name. Return -ENOENT if not found.
1590  */
1591 static int _lookup_hardreset(struct omap_hwmod *oh, const char *name,
1592                              struct omap_hwmod_rst_info *ohri)
1593 {
1594         int i;
1595
1596         for (i = 0; i < oh->rst_lines_cnt; i++) {
1597                 const char *rst_line = oh->rst_lines[i].name;
1598                 if (!strcmp(rst_line, name)) {
1599                         ohri->rst_shift = oh->rst_lines[i].rst_shift;
1600                         ohri->st_shift = oh->rst_lines[i].st_shift;
1601                         pr_debug("omap_hwmod: %s: %s: %s: rst %d st %d\n",
1602                                  oh->name, __func__, rst_line, ohri->rst_shift,
1603                                  ohri->st_shift);
1604
1605                         return 0;
1606                 }
1607         }
1608
1609         return -ENOENT;
1610 }
1611
1612 /**
1613  * _assert_hardreset - assert the HW reset line of submodules
1614  * contained in the hwmod module.
1615  * @oh: struct omap_hwmod *
1616  * @name: name of the reset line to lookup and assert
1617  *
1618  * Some IP like dsp, ipu or iva contain processor that require an HW
1619  * reset line to be assert / deassert in order to enable fully the IP.
1620  * Returns -EINVAL if @oh is null, -ENOSYS if we have no way of
1621  * asserting the hardreset line on the currently-booted SoC, or passes
1622  * along the return value from _lookup_hardreset() or the SoC's
1623  * assert_hardreset code.
1624  */
1625 static int _assert_hardreset(struct omap_hwmod *oh, const char *name)
1626 {
1627         struct omap_hwmod_rst_info ohri;
1628         int ret = -EINVAL;
1629
1630         if (!oh)
1631                 return -EINVAL;
1632
1633         if (!soc_ops.assert_hardreset)
1634                 return -ENOSYS;
1635
1636         ret = _lookup_hardreset(oh, name, &ohri);
1637         if (ret < 0)
1638                 return ret;
1639
1640         ret = soc_ops.assert_hardreset(oh, &ohri);
1641
1642         return ret;
1643 }
1644
1645 /**
1646  * _deassert_hardreset - deassert the HW reset line of submodules contained
1647  * in the hwmod module.
1648  * @oh: struct omap_hwmod *
1649  * @name: name of the reset line to look up and deassert
1650  *
1651  * Some IP like dsp, ipu or iva contain processor that require an HW
1652  * reset line to be assert / deassert in order to enable fully the IP.
1653  * Returns -EINVAL if @oh is null, -ENOSYS if we have no way of
1654  * deasserting the hardreset line on the currently-booted SoC, or passes
1655  * along the return value from _lookup_hardreset() or the SoC's
1656  * deassert_hardreset code.
1657  */
1658 static int _deassert_hardreset(struct omap_hwmod *oh, const char *name)
1659 {
1660         struct omap_hwmod_rst_info ohri;
1661         int ret = -EINVAL;
1662         int hwsup = 0;
1663
1664         if (!oh)
1665                 return -EINVAL;
1666
1667         if (!soc_ops.deassert_hardreset)
1668                 return -ENOSYS;
1669
1670         ret = _lookup_hardreset(oh, name, &ohri);
1671         if (ret < 0)
1672                 return ret;
1673
1674         if (oh->clkdm) {
1675                 /*
1676                  * A clockdomain must be in SW_SUP otherwise reset
1677                  * might not be completed. The clockdomain can be set
1678                  * in HW_AUTO only when the module become ready.
1679                  */
1680                 hwsup = clkdm_in_hwsup(oh->clkdm);
1681                 ret = clkdm_hwmod_enable(oh->clkdm, oh);
1682                 if (ret) {
1683                         WARN(1, "omap_hwmod: %s: could not enable clockdomain %s: %d\n",
1684                              oh->name, oh->clkdm->name, ret);
1685                         return ret;
1686                 }
1687         }
1688
1689         _enable_clocks(oh);
1690         if (soc_ops.enable_module)
1691                 soc_ops.enable_module(oh);
1692
1693         ret = soc_ops.deassert_hardreset(oh, &ohri);
1694
1695         if (soc_ops.disable_module)
1696                 soc_ops.disable_module(oh);
1697         _disable_clocks(oh);
1698
1699         if (ret == -EBUSY)
1700                 pr_warn("omap_hwmod: %s: failed to hardreset\n", oh->name);
1701
1702         if (oh->clkdm) {
1703                 /*
1704                  * Set the clockdomain to HW_AUTO, assuming that the
1705                  * previous state was HW_AUTO.
1706                  */
1707                 if (hwsup)
1708                         clkdm_allow_idle(oh->clkdm);
1709
1710                 clkdm_hwmod_disable(oh->clkdm, oh);
1711         }
1712
1713         return ret;
1714 }
1715
1716 /**
1717  * _read_hardreset - read the HW reset line state of submodules
1718  * contained in the hwmod module
1719  * @oh: struct omap_hwmod *
1720  * @name: name of the reset line to look up and read
1721  *
1722  * Return the state of the reset line.  Returns -EINVAL if @oh is
1723  * null, -ENOSYS if we have no way of reading the hardreset line
1724  * status on the currently-booted SoC, or passes along the return
1725  * value from _lookup_hardreset() or the SoC's is_hardreset_asserted
1726  * code.
1727  */
1728 static int _read_hardreset(struct omap_hwmod *oh, const char *name)
1729 {
1730         struct omap_hwmod_rst_info ohri;
1731         int ret = -EINVAL;
1732
1733         if (!oh)
1734                 return -EINVAL;
1735
1736         if (!soc_ops.is_hardreset_asserted)
1737                 return -ENOSYS;
1738
1739         ret = _lookup_hardreset(oh, name, &ohri);
1740         if (ret < 0)
1741                 return ret;
1742
1743         return soc_ops.is_hardreset_asserted(oh, &ohri);
1744 }
1745
1746 /**
1747  * _are_all_hardreset_lines_asserted - return true if the @oh is hard-reset
1748  * @oh: struct omap_hwmod *
1749  *
1750  * If all hardreset lines associated with @oh are asserted, then return true.
1751  * Otherwise, if part of @oh is out hardreset or if no hardreset lines
1752  * associated with @oh are asserted, then return false.
1753  * This function is used to avoid executing some parts of the IP block
1754  * enable/disable sequence if its hardreset line is set.
1755  */
1756 static bool _are_all_hardreset_lines_asserted(struct omap_hwmod *oh)
1757 {
1758         int i, rst_cnt = 0;
1759
1760         if (oh->rst_lines_cnt == 0)
1761                 return false;
1762
1763         for (i = 0; i < oh->rst_lines_cnt; i++)
1764                 if (_read_hardreset(oh, oh->rst_lines[i].name) > 0)
1765                         rst_cnt++;
1766
1767         if (oh->rst_lines_cnt == rst_cnt)
1768                 return true;
1769
1770         return false;
1771 }
1772
1773 /**
1774  * _are_any_hardreset_lines_asserted - return true if any part of @oh is
1775  * hard-reset
1776  * @oh: struct omap_hwmod *
1777  *
1778  * If any hardreset lines associated with @oh are asserted, then
1779  * return true.  Otherwise, if no hardreset lines associated with @oh
1780  * are asserted, or if @oh has no hardreset lines, then return false.
1781  * This function is used to avoid executing some parts of the IP block
1782  * enable/disable sequence if any hardreset line is set.
1783  */
1784 static bool _are_any_hardreset_lines_asserted(struct omap_hwmod *oh)
1785 {
1786         int rst_cnt = 0;
1787         int i;
1788
1789         for (i = 0; i < oh->rst_lines_cnt && rst_cnt == 0; i++)
1790                 if (_read_hardreset(oh, oh->rst_lines[i].name) > 0)
1791                         rst_cnt++;
1792
1793         return (rst_cnt) ? true : false;
1794 }
1795
1796 /**
1797  * _omap4_disable_module - enable CLKCTRL modulemode on OMAP4
1798  * @oh: struct omap_hwmod *
1799  *
1800  * Disable the PRCM module mode related to the hwmod @oh.
1801  * Return EINVAL if the modulemode is not supported and 0 in case of success.
1802  */
1803 static int _omap4_disable_module(struct omap_hwmod *oh)
1804 {
1805         int v;
1806
1807         if (!oh->clkdm || !oh->prcm.omap4.modulemode)
1808                 return -EINVAL;
1809
1810         /*
1811          * Since integration code might still be doing something, only
1812          * disable if all lines are under hardreset.
1813          */
1814         if (_are_any_hardreset_lines_asserted(oh))
1815                 return 0;
1816
1817         pr_debug("omap_hwmod: %s: %s\n", oh->name, __func__);
1818
1819         omap_cm_module_disable(oh->clkdm->prcm_partition, oh->clkdm->cm_inst,
1820                                oh->prcm.omap4.clkctrl_offs);
1821
1822         v = _omap4_wait_target_disable(oh);
1823         if (v)
1824                 pr_warn("omap_hwmod: %s: _wait_target_disable failed\n",
1825                         oh->name);
1826
1827         return 0;
1828 }
1829
1830 /**
1831  * _ocp_softreset - reset an omap_hwmod via the OCP_SYSCONFIG bit
1832  * @oh: struct omap_hwmod *
1833  *
1834  * Resets an omap_hwmod @oh via the OCP_SYSCONFIG bit.  hwmod must be
1835  * enabled for this to work.  Returns -ENOENT if the hwmod cannot be
1836  * reset this way, -EINVAL if the hwmod is in the wrong state,
1837  * -ETIMEDOUT if the module did not reset in time, or 0 upon success.
1838  *
1839  * In OMAP3 a specific SYSSTATUS register is used to get the reset status.
1840  * Starting in OMAP4, some IPs do not have SYSSTATUS registers and instead
1841  * use the SYSCONFIG softreset bit to provide the status.
1842  *
1843  * Note that some IP like McBSP do have reset control but don't have
1844  * reset status.
1845  */
1846 static int _ocp_softreset(struct omap_hwmod *oh)
1847 {
1848         u32 v;
1849         int c = 0;
1850         int ret = 0;
1851
1852         if (!oh->class->sysc ||
1853             !(oh->class->sysc->sysc_flags & SYSC_HAS_SOFTRESET))
1854                 return -ENOENT;
1855
1856         /* clocks must be on for this operation */
1857         if (oh->_state != _HWMOD_STATE_ENABLED) {
1858                 pr_warn("omap_hwmod: %s: reset can only be entered from enabled state\n",
1859                         oh->name);
1860                 return -EINVAL;
1861         }
1862
1863         /* For some modules, all optionnal clocks need to be enabled as well */
1864         if (oh->flags & HWMOD_CONTROL_OPT_CLKS_IN_RESET)
1865                 _enable_optional_clocks(oh);
1866
1867         pr_debug("omap_hwmod: %s: resetting via OCP SOFTRESET\n", oh->name);
1868
1869         v = oh->_sysc_cache;
1870         ret = _set_softreset(oh, &v);
1871         if (ret)
1872                 goto dis_opt_clks;
1873
1874         _write_sysconfig(v, oh);
1875
1876         if (oh->class->sysc->srst_udelay)
1877                 udelay(oh->class->sysc->srst_udelay);
1878
1879         c = _wait_softreset_complete(oh);
1880         if (c == MAX_MODULE_SOFTRESET_WAIT) {
1881                 pr_warn("omap_hwmod: %s: softreset failed (waited %d usec)\n",
1882                         oh->name, MAX_MODULE_SOFTRESET_WAIT);
1883                 ret = -ETIMEDOUT;
1884                 goto dis_opt_clks;
1885         } else {
1886                 pr_debug("omap_hwmod: %s: softreset in %d usec\n", oh->name, c);
1887         }
1888
1889         ret = _clear_softreset(oh, &v);
1890         if (ret)
1891                 goto dis_opt_clks;
1892
1893         _write_sysconfig(v, oh);
1894
1895         /*
1896          * XXX add _HWMOD_STATE_WEDGED for modules that don't come back from
1897          * _wait_target_ready() or _reset()
1898          */
1899
1900 dis_opt_clks:
1901         if (oh->flags & HWMOD_CONTROL_OPT_CLKS_IN_RESET)
1902                 _disable_optional_clocks(oh);
1903
1904         return ret;
1905 }
1906
1907 /**
1908  * _reset - reset an omap_hwmod
1909  * @oh: struct omap_hwmod *
1910  *
1911  * Resets an omap_hwmod @oh.  If the module has a custom reset
1912  * function pointer defined, then call it to reset the IP block, and
1913  * pass along its return value to the caller.  Otherwise, if the IP
1914  * block has an OCP_SYSCONFIG register with a SOFTRESET bitfield
1915  * associated with it, call a function to reset the IP block via that
1916  * method, and pass along the return value to the caller.  Finally, if
1917  * the IP block has some hardreset lines associated with it, assert
1918  * all of those, but do _not_ deassert them. (This is because driver
1919  * authors have expressed an apparent requirement to control the
1920  * deassertion of the hardreset lines themselves.)
1921  *
1922  * The default software reset mechanism for most OMAP IP blocks is
1923  * triggered via the OCP_SYSCONFIG.SOFTRESET bit.  However, some
1924  * hwmods cannot be reset via this method.  Some are not targets and
1925  * therefore have no OCP header registers to access.  Others (like the
1926  * IVA) have idiosyncratic reset sequences.  So for these relatively
1927  * rare cases, custom reset code can be supplied in the struct
1928  * omap_hwmod_class .reset function pointer.
1929  *
1930  * _set_dmadisable() is called to set the DMADISABLE bit so that it
1931  * does not prevent idling of the system. This is necessary for cases
1932  * where ROMCODE/BOOTLOADER uses dma and transfers control to the
1933  * kernel without disabling dma.
1934  *
1935  * Passes along the return value from either _ocp_softreset() or the
1936  * custom reset function - these must return -EINVAL if the hwmod
1937  * cannot be reset this way or if the hwmod is in the wrong state,
1938  * -ETIMEDOUT if the module did not reset in time, or 0 upon success.
1939  */
1940 static int _reset(struct omap_hwmod *oh)
1941 {
1942         int i, r;
1943
1944         pr_debug("omap_hwmod: %s: resetting\n", oh->name);
1945
1946         if (oh->class->reset) {
1947                 r = oh->class->reset(oh);
1948         } else {
1949                 if (oh->rst_lines_cnt > 0) {
1950                         for (i = 0; i < oh->rst_lines_cnt; i++)
1951                                 _assert_hardreset(oh, oh->rst_lines[i].name);
1952                         return 0;
1953                 } else {
1954                         r = _ocp_softreset(oh);
1955                         if (r == -ENOENT)
1956                                 r = 0;
1957                 }
1958         }
1959
1960         _set_dmadisable(oh);
1961
1962         /*
1963          * OCP_SYSCONFIG bits need to be reprogrammed after a
1964          * softreset.  The _enable() function should be split to avoid
1965          * the rewrite of the OCP_SYSCONFIG register.
1966          */
1967         if (oh->class->sysc) {
1968                 _update_sysc_cache(oh);
1969                 _enable_sysc(oh);
1970         }
1971
1972         return r;
1973 }
1974
1975 /**
1976  * _reconfigure_io_chain - clear any I/O chain wakeups and reconfigure chain
1977  *
1978  * Call the appropriate PRM function to clear any logged I/O chain
1979  * wakeups and to reconfigure the chain.  This apparently needs to be
1980  * done upon every mux change.  Since hwmods can be concurrently
1981  * enabled and idled, hold a spinlock around the I/O chain
1982  * reconfiguration sequence.  No return value.
1983  *
1984  * XXX When the PRM code is moved to drivers, this function can be removed,
1985  * as the PRM infrastructure should abstract this.
1986  */
1987 static void _reconfigure_io_chain(void)
1988 {
1989         unsigned long flags;
1990
1991         spin_lock_irqsave(&io_chain_lock, flags);
1992
1993         omap_prm_reconfigure_io_chain();
1994
1995         spin_unlock_irqrestore(&io_chain_lock, flags);
1996 }
1997
1998 /**
1999  * _omap4_update_context_lost - increment hwmod context loss counter if
2000  * hwmod context was lost, and clear hardware context loss reg
2001  * @oh: hwmod to check for context loss
2002  *
2003  * If the PRCM indicates that the hwmod @oh lost context, increment
2004  * our in-memory context loss counter, and clear the RM_*_CONTEXT
2005  * bits. No return value.
2006  */
2007 static void _omap4_update_context_lost(struct omap_hwmod *oh)
2008 {
2009         if (oh->prcm.omap4.flags & HWMOD_OMAP4_NO_CONTEXT_LOSS_BIT)
2010                 return;
2011
2012         if (!prm_was_any_context_lost_old(oh->clkdm->pwrdm.ptr->prcm_partition,
2013                                           oh->clkdm->pwrdm.ptr->prcm_offs,
2014                                           oh->prcm.omap4.context_offs))
2015                 return;
2016
2017         oh->prcm.omap4.context_lost_counter++;
2018         prm_clear_context_loss_flags_old(oh->clkdm->pwrdm.ptr->prcm_partition,
2019                                          oh->clkdm->pwrdm.ptr->prcm_offs,
2020                                          oh->prcm.omap4.context_offs);
2021 }
2022
2023 /**
2024  * _omap4_get_context_lost - get context loss counter for a hwmod
2025  * @oh: hwmod to get context loss counter for
2026  *
2027  * Returns the in-memory context loss counter for a hwmod.
2028  */
2029 static int _omap4_get_context_lost(struct omap_hwmod *oh)
2030 {
2031         return oh->prcm.omap4.context_lost_counter;
2032 }
2033
2034 /**
2035  * _enable_preprogram - Pre-program an IP block during the _enable() process
2036  * @oh: struct omap_hwmod *
2037  *
2038  * Some IP blocks (such as AESS) require some additional programming
2039  * after enable before they can enter idle.  If a function pointer to
2040  * do so is present in the hwmod data, then call it and pass along the
2041  * return value; otherwise, return 0.
2042  */
2043 static int _enable_preprogram(struct omap_hwmod *oh)
2044 {
2045         if (!oh->class->enable_preprogram)
2046                 return 0;
2047
2048         return oh->class->enable_preprogram(oh);
2049 }
2050
2051 /**
2052  * _enable - enable an omap_hwmod
2053  * @oh: struct omap_hwmod *
2054  *
2055  * Enables an omap_hwmod @oh such that the MPU can access the hwmod's
2056  * register target.  Returns -EINVAL if the hwmod is in the wrong
2057  * state or passes along the return value of _wait_target_ready().
2058  */
2059 static int _enable(struct omap_hwmod *oh)
2060 {
2061         int r;
2062         int hwsup = 0;
2063
2064         pr_debug("omap_hwmod: %s: enabling\n", oh->name);
2065
2066         /*
2067          * hwmods with HWMOD_INIT_NO_IDLE flag set are left in enabled
2068          * state at init.  Now that someone is really trying to enable
2069          * them, just ensure that the hwmod mux is set.
2070          */
2071         if (oh->_int_flags & _HWMOD_SKIP_ENABLE) {
2072                 /*
2073                  * If the caller has mux data populated, do the mux'ing
2074                  * which wouldn't have been done as part of the _enable()
2075                  * done during setup.
2076                  */
2077                 if (oh->mux)
2078                         omap_hwmod_mux(oh->mux, _HWMOD_STATE_ENABLED);
2079
2080                 oh->_int_flags &= ~_HWMOD_SKIP_ENABLE;
2081                 return 0;
2082         }
2083
2084         if (oh->_state != _HWMOD_STATE_INITIALIZED &&
2085             oh->_state != _HWMOD_STATE_IDLE &&
2086             oh->_state != _HWMOD_STATE_DISABLED) {
2087                 WARN(1, "omap_hwmod: %s: enabled state can only be entered from initialized, idle, or disabled state\n",
2088                         oh->name);
2089                 return -EINVAL;
2090         }
2091
2092         /*
2093          * If an IP block contains HW reset lines and all of them are
2094          * asserted, we let integration code associated with that
2095          * block handle the enable.  We've received very little
2096          * information on what those driver authors need, and until
2097          * detailed information is provided and the driver code is
2098          * posted to the public lists, this is probably the best we
2099          * can do.
2100          */
2101         if (_are_all_hardreset_lines_asserted(oh))
2102                 return 0;
2103
2104         /* Mux pins for device runtime if populated */
2105         if (oh->mux && (!oh->mux->enabled ||
2106                         ((oh->_state == _HWMOD_STATE_IDLE) &&
2107                          oh->mux->pads_dynamic))) {
2108                 omap_hwmod_mux(oh->mux, _HWMOD_STATE_ENABLED);
2109                 _reconfigure_io_chain();
2110         } else if (oh->flags & HWMOD_RECONFIG_IO_CHAIN) {
2111                 _reconfigure_io_chain();
2112         }
2113
2114         _add_initiator_dep(oh, mpu_oh);
2115
2116         if (oh->clkdm) {
2117                 /*
2118                  * A clockdomain must be in SW_SUP before enabling
2119                  * completely the module. The clockdomain can be set
2120                  * in HW_AUTO only when the module become ready.
2121                  */
2122                 hwsup = clkdm_in_hwsup(oh->clkdm) &&
2123                         !clkdm_missing_idle_reporting(oh->clkdm);
2124                 r = clkdm_hwmod_enable(oh->clkdm, oh);
2125                 if (r) {
2126                         WARN(1, "omap_hwmod: %s: could not enable clockdomain %s: %d\n",
2127                              oh->name, oh->clkdm->name, r);
2128                         return r;
2129                 }
2130         }
2131
2132         _enable_clocks(oh);
2133         if (soc_ops.enable_module)
2134                 soc_ops.enable_module(oh);
2135         if (oh->flags & HWMOD_BLOCK_WFI)
2136                 cpu_idle_poll_ctrl(true);
2137
2138         if (soc_ops.update_context_lost)
2139                 soc_ops.update_context_lost(oh);
2140
2141         r = (soc_ops.wait_target_ready) ? soc_ops.wait_target_ready(oh) :
2142                 -EINVAL;
2143         if (!r) {
2144                 /*
2145                  * Set the clockdomain to HW_AUTO only if the target is ready,
2146                  * assuming that the previous state was HW_AUTO
2147                  */
2148                 if (oh->clkdm && hwsup)
2149                         clkdm_allow_idle(oh->clkdm);
2150
2151                 oh->_state = _HWMOD_STATE_ENABLED;
2152
2153                 /* Access the sysconfig only if the target is ready */
2154                 if (oh->class->sysc) {
2155                         if (!(oh->_int_flags & _HWMOD_SYSCONFIG_LOADED))
2156                                 _update_sysc_cache(oh);
2157                         _enable_sysc(oh);
2158                 }
2159                 r = _enable_preprogram(oh);
2160         } else {
2161                 if (soc_ops.disable_module)
2162                         soc_ops.disable_module(oh);
2163                 _disable_clocks(oh);
2164                 pr_err("omap_hwmod: %s: _wait_target_ready failed: %d\n",
2165                        oh->name, r);
2166
2167                 if (oh->clkdm)
2168                         clkdm_hwmod_disable(oh->clkdm, oh);
2169         }
2170
2171         return r;
2172 }
2173
2174 /**
2175  * _idle - idle an omap_hwmod
2176  * @oh: struct omap_hwmod *
2177  *
2178  * Idles an omap_hwmod @oh.  This should be called once the hwmod has
2179  * no further work.  Returns -EINVAL if the hwmod is in the wrong
2180  * state or returns 0.
2181  */
2182 static int _idle(struct omap_hwmod *oh)
2183 {
2184         pr_debug("omap_hwmod: %s: idling\n", oh->name);
2185
2186         if (oh->_state != _HWMOD_STATE_ENABLED) {
2187                 WARN(1, "omap_hwmod: %s: idle state can only be entered from enabled state\n",
2188                         oh->name);
2189                 return -EINVAL;
2190         }
2191
2192         if (_are_all_hardreset_lines_asserted(oh))
2193                 return 0;
2194
2195         if (oh->class->sysc)
2196                 _idle_sysc(oh);
2197         _del_initiator_dep(oh, mpu_oh);
2198
2199         if (oh->flags & HWMOD_BLOCK_WFI)
2200                 cpu_idle_poll_ctrl(false);
2201         if (soc_ops.disable_module)
2202                 soc_ops.disable_module(oh);
2203
2204         /*
2205          * The module must be in idle mode before disabling any parents
2206          * clocks. Otherwise, the parent clock might be disabled before
2207          * the module transition is done, and thus will prevent the
2208          * transition to complete properly.
2209          */
2210         _disable_clocks(oh);
2211         if (oh->clkdm)
2212                 clkdm_hwmod_disable(oh->clkdm, oh);
2213
2214         /* Mux pins for device idle if populated */
2215         if (oh->mux && oh->mux->pads_dynamic) {
2216                 omap_hwmod_mux(oh->mux, _HWMOD_STATE_IDLE);
2217                 _reconfigure_io_chain();
2218         } else if (oh->flags & HWMOD_RECONFIG_IO_CHAIN) {
2219                 _reconfigure_io_chain();
2220         }
2221
2222         oh->_state = _HWMOD_STATE_IDLE;
2223
2224         return 0;
2225 }
2226
2227 /**
2228  * _shutdown - shutdown an omap_hwmod
2229  * @oh: struct omap_hwmod *
2230  *
2231  * Shut down an omap_hwmod @oh.  This should be called when the driver
2232  * used for the hwmod is removed or unloaded or if the driver is not
2233  * used by the system.  Returns -EINVAL if the hwmod is in the wrong
2234  * state or returns 0.
2235  */
2236 static int _shutdown(struct omap_hwmod *oh)
2237 {
2238         int ret, i;
2239         u8 prev_state;
2240
2241         if (oh->_state != _HWMOD_STATE_IDLE &&
2242             oh->_state != _HWMOD_STATE_ENABLED) {
2243                 WARN(1, "omap_hwmod: %s: disabled state can only be entered from idle, or enabled state\n",
2244                         oh->name);
2245                 return -EINVAL;
2246         }
2247
2248         if (_are_all_hardreset_lines_asserted(oh))
2249                 return 0;
2250
2251         pr_debug("omap_hwmod: %s: disabling\n", oh->name);
2252
2253         if (oh->class->pre_shutdown) {
2254                 prev_state = oh->_state;
2255                 if (oh->_state == _HWMOD_STATE_IDLE)
2256                         _enable(oh);
2257                 ret = oh->class->pre_shutdown(oh);
2258                 if (ret) {
2259                         if (prev_state == _HWMOD_STATE_IDLE)
2260                                 _idle(oh);
2261                         return ret;
2262                 }
2263         }
2264
2265         if (oh->class->sysc) {
2266                 if (oh->_state == _HWMOD_STATE_IDLE)
2267                         _enable(oh);
2268                 _shutdown_sysc(oh);
2269         }
2270
2271         /* clocks and deps are already disabled in idle */
2272         if (oh->_state == _HWMOD_STATE_ENABLED) {
2273                 _del_initiator_dep(oh, mpu_oh);
2274                 /* XXX what about the other system initiators here? dma, dsp */
2275                 if (oh->flags & HWMOD_BLOCK_WFI)
2276                         cpu_idle_poll_ctrl(false);
2277                 if (soc_ops.disable_module)
2278                         soc_ops.disable_module(oh);
2279                 _disable_clocks(oh);
2280                 if (oh->clkdm)
2281                         clkdm_hwmod_disable(oh->clkdm, oh);
2282         }
2283         /* XXX Should this code also force-disable the optional clocks? */
2284
2285         for (i = 0; i < oh->rst_lines_cnt; i++)
2286                 _assert_hardreset(oh, oh->rst_lines[i].name);
2287
2288         /* Mux pins to safe mode or use populated off mode values */
2289         if (oh->mux)
2290                 omap_hwmod_mux(oh->mux, _HWMOD_STATE_DISABLED);
2291
2292         oh->_state = _HWMOD_STATE_DISABLED;
2293
2294         return 0;
2295 }
2296
2297 static int of_dev_find_hwmod(struct device_node *np,
2298                              struct omap_hwmod *oh)
2299 {
2300         int count, i, res;
2301         const char *p;
2302
2303         count = of_property_count_strings(np, "ti,hwmods");
2304         if (count < 1)
2305                 return -ENODEV;
2306
2307         for (i = 0; i < count; i++) {
2308                 res = of_property_read_string_index(np, "ti,hwmods",
2309                                                     i, &p);
2310                 if (res)
2311                         continue;
2312                 if (!strcmp(p, oh->name)) {
2313                         pr_debug("omap_hwmod: dt %s[%i] uses hwmod %s\n",
2314                                  np->name, i, oh->name);
2315                         return i;
2316                 }
2317         }
2318
2319         return -ENODEV;
2320 }
2321
2322 /**
2323  * of_dev_hwmod_lookup - look up needed hwmod from dt blob
2324  * @np: struct device_node *
2325  * @oh: struct omap_hwmod *
2326  * @index: index of the entry found
2327  * @found: struct device_node * found or NULL
2328  *
2329  * Parse the dt blob and find out needed hwmod. Recursive function is
2330  * implemented to take care hierarchical dt blob parsing.
2331  * Return: Returns 0 on success, -ENODEV when not found.
2332  */
2333 static int of_dev_hwmod_lookup(struct device_node *np,
2334                                struct omap_hwmod *oh,
2335                                int *index,
2336                                struct device_node **found)
2337 {
2338         struct device_node *np0 = NULL;
2339         int res;
2340
2341         res = of_dev_find_hwmod(np, oh);
2342         if (res >= 0) {
2343                 *found = np;
2344                 *index = res;
2345                 return 0;
2346         }
2347
2348         for_each_child_of_node(np, np0) {
2349                 struct device_node *fc;
2350                 int i;
2351
2352                 res = of_dev_hwmod_lookup(np0, oh, &i, &fc);
2353                 if (res == 0) {
2354                         *found = fc;
2355                         *index = i;
2356                         return 0;
2357                 }
2358         }
2359
2360         *found = NULL;
2361         *index = 0;
2362
2363         return -ENODEV;
2364 }
2365
2366 /**
2367  * _init_mpu_rt_base - populate the virtual address for a hwmod
2368  * @oh: struct omap_hwmod * to locate the virtual address
2369  * @data: (unused, caller should pass NULL)
2370  * @index: index of the reg entry iospace in device tree
2371  * @np: struct device_node * of the IP block's device node in the DT data
2372  *
2373  * Cache the virtual address used by the MPU to access this IP block's
2374  * registers.  This address is needed early so the OCP registers that
2375  * are part of the device's address space can be ioremapped properly.
2376  *
2377  * If SYSC access is not needed, the registers will not be remapped
2378  * and non-availability of MPU access is not treated as an error.
2379  *
2380  * Returns 0 on success, -EINVAL if an invalid hwmod is passed, and
2381  * -ENXIO on absent or invalid register target address space.
2382  */
2383 static int __init _init_mpu_rt_base(struct omap_hwmod *oh, void *data,
2384                                     int index, struct device_node *np)
2385 {
2386         struct omap_hwmod_addr_space *mem;
2387         void __iomem *va_start = NULL;
2388
2389         if (!oh)
2390                 return -EINVAL;
2391
2392         _save_mpu_port_index(oh);
2393
2394         /* if we don't need sysc access we don't need to ioremap */
2395         if (!oh->class->sysc)
2396                 return 0;
2397
2398         /* we can't continue without MPU PORT if we need sysc access */
2399         if (oh->_int_flags & _HWMOD_NO_MPU_PORT)
2400                 return -ENXIO;
2401
2402         mem = _find_mpu_rt_addr_space(oh);
2403         if (!mem) {
2404                 pr_debug("omap_hwmod: %s: no MPU register target found\n",
2405                          oh->name);
2406
2407                 /* Extract the IO space from device tree blob */
2408                 if (!np) {
2409                         pr_err("omap_hwmod: %s: no dt node\n", oh->name);
2410                         return -ENXIO;
2411                 }
2412
2413                 va_start = of_iomap(np, index + oh->mpu_rt_idx);
2414         } else {
2415                 va_start = ioremap(mem->pa_start, mem->pa_end - mem->pa_start);
2416         }
2417
2418         if (!va_start) {
2419                 if (mem)
2420                         pr_err("omap_hwmod: %s: Could not ioremap\n", oh->name);
2421                 else
2422                         pr_err("omap_hwmod: %s: Missing dt reg%i for %s\n",
2423                                oh->name, index, np->full_name);
2424                 return -ENXIO;
2425         }
2426
2427         pr_debug("omap_hwmod: %s: MPU register target at va %p\n",
2428                  oh->name, va_start);
2429
2430         oh->_mpu_rt_va = va_start;
2431         return 0;
2432 }
2433
2434 /**
2435  * _init - initialize internal data for the hwmod @oh
2436  * @oh: struct omap_hwmod *
2437  * @n: (unused)
2438  *
2439  * Look up the clocks and the address space used by the MPU to access
2440  * registers belonging to the hwmod @oh.  @oh must already be
2441  * registered at this point.  This is the first of two phases for
2442  * hwmod initialization.  Code called here does not touch any hardware
2443  * registers, it simply prepares internal data structures.  Returns 0
2444  * upon success or if the hwmod isn't registered or if the hwmod's
2445  * address space is not defined, or -EINVAL upon failure.
2446  */
2447 static int __init _init(struct omap_hwmod *oh, void *data)
2448 {
2449         int r, index;
2450         struct device_node *np = NULL;
2451
2452         if (oh->_state != _HWMOD_STATE_REGISTERED)
2453                 return 0;
2454
2455         if (of_have_populated_dt()) {
2456                 struct device_node *bus;
2457
2458                 bus = of_find_node_by_name(NULL, "ocp");
2459                 if (!bus)
2460                         return -ENODEV;
2461
2462                 r = of_dev_hwmod_lookup(bus, oh, &index, &np);
2463                 if (r)
2464                         pr_debug("omap_hwmod: %s missing dt data\n", oh->name);
2465                 else if (np && index)
2466                         pr_warn("omap_hwmod: %s using broken dt data from %s\n",
2467                                 oh->name, np->name);
2468         }
2469
2470         r = _init_mpu_rt_base(oh, NULL, index, np);
2471         if (r < 0) {
2472                 WARN(1, "omap_hwmod: %s: doesn't have mpu register target base\n",
2473                      oh->name);
2474                 return 0;
2475         }
2476
2477         r = _init_clocks(oh, NULL);
2478         if (r < 0) {
2479                 WARN(1, "omap_hwmod: %s: couldn't init clocks\n", oh->name);
2480                 return -EINVAL;
2481         }
2482
2483         if (np) {
2484                 if (of_find_property(np, "ti,no-reset-on-init", NULL))
2485                         oh->flags |= HWMOD_INIT_NO_RESET;
2486                 if (of_find_property(np, "ti,no-idle-on-init", NULL))
2487                         oh->flags |= HWMOD_INIT_NO_IDLE;
2488         }
2489
2490         oh->_state = _HWMOD_STATE_INITIALIZED;
2491
2492         return 0;
2493 }
2494
2495 /**
2496  * _setup_iclk_autoidle - configure an IP block's interface clocks
2497  * @oh: struct omap_hwmod *
2498  *
2499  * Set up the module's interface clocks.  XXX This function is still mostly
2500  * a stub; implementing this properly requires iclk autoidle usecounting in
2501  * the clock code.   No return value.
2502  */
2503 static void __init _setup_iclk_autoidle(struct omap_hwmod *oh)
2504 {
2505         struct omap_hwmod_ocp_if *os;
2506         struct list_head *p;
2507         int i = 0;
2508         if (oh->_state != _HWMOD_STATE_INITIALIZED)
2509                 return;
2510
2511         p = oh->slave_ports.next;
2512
2513         while (i < oh->slaves_cnt) {
2514                 os = _fetch_next_ocp_if(&p, &i);
2515                 if (!os->_clk)
2516                         continue;
2517
2518                 if (os->flags & OCPIF_SWSUP_IDLE) {
2519                         /* XXX omap_iclk_deny_idle(c); */
2520                 } else {
2521                         /* XXX omap_iclk_allow_idle(c); */
2522                         clk_enable(os->_clk);
2523                 }
2524         }
2525
2526         return;
2527 }
2528
2529 /**
2530  * _setup_reset - reset an IP block during the setup process
2531  * @oh: struct omap_hwmod *
2532  *
2533  * Reset the IP block corresponding to the hwmod @oh during the setup
2534  * process.  The IP block is first enabled so it can be successfully
2535  * reset.  Returns 0 upon success or a negative error code upon
2536  * failure.
2537  */
2538 static int __init _setup_reset(struct omap_hwmod *oh)
2539 {
2540         int r;
2541
2542         if (oh->_state != _HWMOD_STATE_INITIALIZED)
2543                 return -EINVAL;
2544
2545         if (oh->flags & HWMOD_EXT_OPT_MAIN_CLK)
2546                 return -EPERM;
2547
2548         if (oh->rst_lines_cnt == 0) {
2549                 r = _enable(oh);
2550                 if (r) {
2551                         pr_warn("omap_hwmod: %s: cannot be enabled for reset (%d)\n",
2552                                 oh->name, oh->_state);
2553                         return -EINVAL;
2554                 }
2555         }
2556
2557         if (!(oh->flags & HWMOD_INIT_NO_RESET))
2558                 r = _reset(oh);
2559
2560         return r;
2561 }
2562
2563 /**
2564  * _setup_postsetup - transition to the appropriate state after _setup
2565  * @oh: struct omap_hwmod *
2566  *
2567  * Place an IP block represented by @oh into a "post-setup" state --
2568  * either IDLE, ENABLED, or DISABLED.  ("post-setup" simply means that
2569  * this function is called at the end of _setup().)  The postsetup
2570  * state for an IP block can be changed by calling
2571  * omap_hwmod_enter_postsetup_state() early in the boot process,
2572  * before one of the omap_hwmod_setup*() functions are called for the
2573  * IP block.
2574  *
2575  * The IP block stays in this state until a PM runtime-based driver is
2576  * loaded for that IP block.  A post-setup state of IDLE is
2577  * appropriate for almost all IP blocks with runtime PM-enabled
2578  * drivers, since those drivers are able to enable the IP block.  A
2579  * post-setup state of ENABLED is appropriate for kernels with PM
2580  * runtime disabled.  The DISABLED state is appropriate for unusual IP
2581  * blocks such as the MPU WDTIMER on kernels without WDTIMER drivers
2582  * included, since the WDTIMER starts running on reset and will reset
2583  * the MPU if left active.
2584  *
2585  * This post-setup mechanism is deprecated.  Once all of the OMAP
2586  * drivers have been converted to use PM runtime, and all of the IP
2587  * block data and interconnect data is available to the hwmod code, it
2588  * should be possible to replace this mechanism with a "lazy reset"
2589  * arrangement.  In a "lazy reset" setup, each IP block is enabled
2590  * when the driver first probes, then all remaining IP blocks without
2591  * drivers are either shut down or enabled after the drivers have
2592  * loaded.  However, this cannot take place until the above
2593  * preconditions have been met, since otherwise the late reset code
2594  * has no way of knowing which IP blocks are in use by drivers, and
2595  * which ones are unused.
2596  *
2597  * No return value.
2598  */
2599 static void __init _setup_postsetup(struct omap_hwmod *oh)
2600 {
2601         u8 postsetup_state;
2602
2603         if (oh->rst_lines_cnt > 0)
2604                 return;
2605
2606         postsetup_state = oh->_postsetup_state;
2607         if (postsetup_state == _HWMOD_STATE_UNKNOWN)
2608                 postsetup_state = _HWMOD_STATE_ENABLED;
2609
2610         /*
2611          * XXX HWMOD_INIT_NO_IDLE does not belong in hwmod data -
2612          * it should be set by the core code as a runtime flag during startup
2613          */
2614         if ((oh->flags & HWMOD_INIT_NO_IDLE) &&
2615             (postsetup_state == _HWMOD_STATE_IDLE)) {
2616                 oh->_int_flags |= _HWMOD_SKIP_ENABLE;
2617                 postsetup_state = _HWMOD_STATE_ENABLED;
2618         }
2619
2620         if (postsetup_state == _HWMOD_STATE_IDLE)
2621                 _idle(oh);
2622         else if (postsetup_state == _HWMOD_STATE_DISABLED)
2623                 _shutdown(oh);
2624         else if (postsetup_state != _HWMOD_STATE_ENABLED)
2625                 WARN(1, "hwmod: %s: unknown postsetup state %d! defaulting to enabled\n",
2626                      oh->name, postsetup_state);
2627
2628         return;
2629 }
2630
2631 /**
2632  * _setup - prepare IP block hardware for use
2633  * @oh: struct omap_hwmod *
2634  * @n: (unused, pass NULL)
2635  *
2636  * Configure the IP block represented by @oh.  This may include
2637  * enabling the IP block, resetting it, and placing it into a
2638  * post-setup state, depending on the type of IP block and applicable
2639  * flags.  IP blocks are reset to prevent any previous configuration
2640  * by the bootloader or previous operating system from interfering
2641  * with power management or other parts of the system.  The reset can
2642  * be avoided; see omap_hwmod_no_setup_reset().  This is the second of
2643  * two phases for hwmod initialization.  Code called here generally
2644  * affects the IP block hardware, or system integration hardware
2645  * associated with the IP block.  Returns 0.
2646  */
2647 static int __init _setup(struct omap_hwmod *oh, void *data)
2648 {
2649         if (oh->_state != _HWMOD_STATE_INITIALIZED)
2650                 return 0;
2651
2652         if (oh->parent_hwmod) {
2653                 int r;
2654
2655                 r = _enable(oh->parent_hwmod);
2656                 WARN(r, "hwmod: %s: setup: failed to enable parent hwmod %s\n",
2657                      oh->name, oh->parent_hwmod->name);
2658         }
2659
2660         _setup_iclk_autoidle(oh);
2661
2662         if (!_setup_reset(oh))
2663                 _setup_postsetup(oh);
2664
2665         if (oh->parent_hwmod) {
2666                 u8 postsetup_state;
2667
2668                 postsetup_state = oh->parent_hwmod->_postsetup_state;
2669
2670                 if (postsetup_state == _HWMOD_STATE_IDLE)
2671                         _idle(oh->parent_hwmod);
2672                 else if (postsetup_state == _HWMOD_STATE_DISABLED)
2673                         _shutdown(oh->parent_hwmod);
2674                 else if (postsetup_state != _HWMOD_STATE_ENABLED)
2675                         WARN(1, "hwmod: %s: unknown postsetup state %d! defaulting to enabled\n",
2676                              oh->parent_hwmod->name, postsetup_state);
2677         }
2678
2679         return 0;
2680 }
2681
2682 /**
2683  * _register - register a struct omap_hwmod
2684  * @oh: struct omap_hwmod *
2685  *
2686  * Registers the omap_hwmod @oh.  Returns -EEXIST if an omap_hwmod
2687  * already has been registered by the same name; -EINVAL if the
2688  * omap_hwmod is in the wrong state, if @oh is NULL, if the
2689  * omap_hwmod's class field is NULL; if the omap_hwmod is missing a
2690  * name, or if the omap_hwmod's class is missing a name; or 0 upon
2691  * success.
2692  *
2693  * XXX The data should be copied into bootmem, so the original data
2694  * should be marked __initdata and freed after init.  This would allow
2695  * unneeded omap_hwmods to be freed on multi-OMAP configurations.  Note
2696  * that the copy process would be relatively complex due to the large number
2697  * of substructures.
2698  */
2699 static int __init _register(struct omap_hwmod *oh)
2700 {
2701         if (!oh || !oh->name || !oh->class || !oh->class->name ||
2702             (oh->_state != _HWMOD_STATE_UNKNOWN))
2703                 return -EINVAL;
2704
2705         pr_debug("omap_hwmod: %s: registering\n", oh->name);
2706
2707         if (_lookup(oh->name))
2708                 return -EEXIST;
2709
2710         list_add_tail(&oh->node, &omap_hwmod_list);
2711
2712         INIT_LIST_HEAD(&oh->master_ports);
2713         INIT_LIST_HEAD(&oh->slave_ports);
2714         spin_lock_init(&oh->_lock);
2715         lockdep_set_class(&oh->_lock, &oh->hwmod_key);
2716
2717         oh->_state = _HWMOD_STATE_REGISTERED;
2718
2719         /*
2720          * XXX Rather than doing a strcmp(), this should test a flag
2721          * set in the hwmod data, inserted by the autogenerator code.
2722          */
2723         if (!strcmp(oh->name, MPU_INITIATOR_NAME))
2724                 mpu_oh = oh;
2725
2726         return 0;
2727 }
2728
2729 /**
2730  * _alloc_links - return allocated memory for hwmod links
2731  * @ml: pointer to a struct omap_hwmod_link * for the master link
2732  * @sl: pointer to a struct omap_hwmod_link * for the slave link
2733  *
2734  * Return pointers to two struct omap_hwmod_link records, via the
2735  * addresses pointed to by @ml and @sl.  Will first attempt to return
2736  * memory allocated as part of a large initial block, but if that has
2737  * been exhausted, will allocate memory itself.  Since ideally this
2738  * second allocation path will never occur, the number of these
2739  * 'supplemental' allocations will be logged when debugging is
2740  * enabled.  Returns 0.
2741  */
2742 static int __init _alloc_links(struct omap_hwmod_link **ml,
2743                                struct omap_hwmod_link **sl)
2744 {
2745         unsigned int sz;
2746
2747         if ((free_ls + LINKS_PER_OCP_IF) <= max_ls) {
2748                 *ml = &linkspace[free_ls++];
2749                 *sl = &linkspace[free_ls++];
2750                 return 0;
2751         }
2752
2753         sz = sizeof(struct omap_hwmod_link) * LINKS_PER_OCP_IF;
2754
2755         *sl = NULL;
2756         *ml = memblock_virt_alloc(sz, 0);
2757
2758         *sl = (void *)(*ml) + sizeof(struct omap_hwmod_link);
2759
2760         ls_supp++;
2761         pr_debug("omap_hwmod: supplemental link allocations needed: %d\n",
2762                  ls_supp * LINKS_PER_OCP_IF);
2763
2764         return 0;
2765 };
2766
2767 /**
2768  * _add_link - add an interconnect between two IP blocks
2769  * @oi: pointer to a struct omap_hwmod_ocp_if record
2770  *
2771  * Add struct omap_hwmod_link records connecting the master IP block
2772  * specified in @oi->master to @oi, and connecting the slave IP block
2773  * specified in @oi->slave to @oi.  This code is assumed to run before
2774  * preemption or SMP has been enabled, thus avoiding the need for
2775  * locking in this code.  Changes to this assumption will require
2776  * additional locking.  Returns 0.
2777  */
2778 static int __init _add_link(struct omap_hwmod_ocp_if *oi)
2779 {
2780         struct omap_hwmod_link *ml, *sl;
2781
2782         pr_debug("omap_hwmod: %s -> %s: adding link\n", oi->master->name,
2783                  oi->slave->name);
2784
2785         _alloc_links(&ml, &sl);
2786
2787         ml->ocp_if = oi;
2788         list_add(&ml->node, &oi->master->master_ports);
2789         oi->master->masters_cnt++;
2790
2791         sl->ocp_if = oi;
2792         list_add(&sl->node, &oi->slave->slave_ports);
2793         oi->slave->slaves_cnt++;
2794
2795         return 0;
2796 }
2797
2798 /**
2799  * _register_link - register a struct omap_hwmod_ocp_if
2800  * @oi: struct omap_hwmod_ocp_if *
2801  *
2802  * Registers the omap_hwmod_ocp_if record @oi.  Returns -EEXIST if it
2803  * has already been registered; -EINVAL if @oi is NULL or if the
2804  * record pointed to by @oi is missing required fields; or 0 upon
2805  * success.
2806  *
2807  * XXX The data should be copied into bootmem, so the original data
2808  * should be marked __initdata and freed after init.  This would allow
2809  * unneeded omap_hwmods to be freed on multi-OMAP configurations.
2810  */
2811 static int __init _register_link(struct omap_hwmod_ocp_if *oi)
2812 {
2813         if (!oi || !oi->master || !oi->slave || !oi->user)
2814                 return -EINVAL;
2815
2816         if (oi->_int_flags & _OCPIF_INT_FLAGS_REGISTERED)
2817                 return -EEXIST;
2818
2819         pr_debug("omap_hwmod: registering link from %s to %s\n",
2820                  oi->master->name, oi->slave->name);
2821
2822         /*
2823          * Register the connected hwmods, if they haven't been
2824          * registered already
2825          */
2826         if (oi->master->_state != _HWMOD_STATE_REGISTERED)
2827                 _register(oi->master);
2828
2829         if (oi->slave->_state != _HWMOD_STATE_REGISTERED)
2830                 _register(oi->slave);
2831
2832         _add_link(oi);
2833
2834         oi->_int_flags |= _OCPIF_INT_FLAGS_REGISTERED;
2835
2836         return 0;
2837 }
2838
2839 /**
2840  * _alloc_linkspace - allocate large block of hwmod links
2841  * @ois: pointer to an array of struct omap_hwmod_ocp_if records to count
2842  *
2843  * Allocate a large block of struct omap_hwmod_link records.  This
2844  * improves boot time significantly by avoiding the need to allocate
2845  * individual records one by one.  If the number of records to
2846  * allocate in the block hasn't been manually specified, this function
2847  * will count the number of struct omap_hwmod_ocp_if records in @ois
2848  * and use that to determine the allocation size.  For SoC families
2849  * that require multiple list registrations, such as OMAP3xxx, this
2850  * estimation process isn't optimal, so manual estimation is advised
2851  * in those cases.  Returns -EEXIST if the allocation has already occurred
2852  * or 0 upon success.
2853  */
2854 static int __init _alloc_linkspace(struct omap_hwmod_ocp_if **ois)
2855 {
2856         unsigned int i = 0;
2857         unsigned int sz;
2858
2859         if (linkspace) {
2860                 WARN(1, "linkspace already allocated\n");
2861                 return -EEXIST;
2862         }
2863
2864         if (max_ls == 0)
2865                 while (ois[i++])
2866                         max_ls += LINKS_PER_OCP_IF;
2867
2868         sz = sizeof(struct omap_hwmod_link) * max_ls;
2869
2870         pr_debug("omap_hwmod: %s: allocating %d byte linkspace (%d links)\n",
2871                  __func__, sz, max_ls);
2872
2873         linkspace = memblock_virt_alloc(sz, 0);
2874
2875         return 0;
2876 }
2877
2878 /* Static functions intended only for use in soc_ops field function pointers */
2879
2880 /**
2881  * _omap2xxx_3xxx_wait_target_ready - wait for a module to leave slave idle
2882  * @oh: struct omap_hwmod *
2883  *
2884  * Wait for a module @oh to leave slave idle.  Returns 0 if the module
2885  * does not have an IDLEST bit or if the module successfully leaves
2886  * slave idle; otherwise, pass along the return value of the
2887  * appropriate *_cm*_wait_module_ready() function.
2888  */
2889 static int _omap2xxx_3xxx_wait_target_ready(struct omap_hwmod *oh)
2890 {
2891         if (!oh)
2892                 return -EINVAL;
2893
2894         if (oh->flags & HWMOD_NO_IDLEST)
2895                 return 0;
2896
2897         if (!_find_mpu_rt_port(oh))
2898                 return 0;
2899
2900         /* XXX check module SIDLEMODE, hardreset status, enabled clocks */
2901
2902         return omap_cm_wait_module_ready(0, oh->prcm.omap2.module_offs,
2903                                          oh->prcm.omap2.idlest_reg_id,
2904                                          oh->prcm.omap2.idlest_idle_bit);
2905 }
2906
2907 /**
2908  * _omap4_wait_target_ready - wait for a module to leave slave idle
2909  * @oh: struct omap_hwmod *
2910  *
2911  * Wait for a module @oh to leave slave idle.  Returns 0 if the module
2912  * does not have an IDLEST bit or if the module successfully leaves
2913  * slave idle; otherwise, pass along the return value of the
2914  * appropriate *_cm*_wait_module_ready() function.
2915  */
2916 static int _omap4_wait_target_ready(struct omap_hwmod *oh)
2917 {
2918         if (!oh)
2919                 return -EINVAL;
2920
2921         if (oh->flags & HWMOD_NO_IDLEST || !oh->clkdm)
2922                 return 0;
2923
2924         if (!_find_mpu_rt_port(oh))
2925                 return 0;
2926
2927         /* XXX check module SIDLEMODE, hardreset status */
2928
2929         return omap_cm_wait_module_ready(oh->clkdm->prcm_partition,
2930                                          oh->clkdm->cm_inst,
2931                                          oh->prcm.omap4.clkctrl_offs, 0);
2932 }
2933
2934 /**
2935  * _omap2_assert_hardreset - call OMAP2 PRM hardreset fn with hwmod args
2936  * @oh: struct omap_hwmod * to assert hardreset
2937  * @ohri: hardreset line data
2938  *
2939  * Call omap2_prm_assert_hardreset() with parameters extracted from
2940  * the hwmod @oh and the hardreset line data @ohri.  Only intended for
2941  * use as an soc_ops function pointer.  Passes along the return value
2942  * from omap2_prm_assert_hardreset().  XXX This function is scheduled
2943  * for removal when the PRM code is moved into drivers/.
2944  */
2945 static int _omap2_assert_hardreset(struct omap_hwmod *oh,
2946                                    struct omap_hwmod_rst_info *ohri)
2947 {
2948         return omap_prm_assert_hardreset(ohri->rst_shift, 0,
2949                                          oh->prcm.omap2.module_offs, 0);
2950 }
2951
2952 /**
2953  * _omap2_deassert_hardreset - call OMAP2 PRM hardreset fn with hwmod args
2954  * @oh: struct omap_hwmod * to deassert hardreset
2955  * @ohri: hardreset line data
2956  *
2957  * Call omap2_prm_deassert_hardreset() with parameters extracted from
2958  * the hwmod @oh and the hardreset line data @ohri.  Only intended for
2959  * use as an soc_ops function pointer.  Passes along the return value
2960  * from omap2_prm_deassert_hardreset().  XXX This function is
2961  * scheduled for removal when the PRM code is moved into drivers/.
2962  */
2963 static int _omap2_deassert_hardreset(struct omap_hwmod *oh,
2964                                      struct omap_hwmod_rst_info *ohri)
2965 {
2966         return omap_prm_deassert_hardreset(ohri->rst_shift, ohri->st_shift, 0,
2967                                            oh->prcm.omap2.module_offs, 0, 0);
2968 }
2969
2970 /**
2971  * _omap2_is_hardreset_asserted - call OMAP2 PRM hardreset fn with hwmod args
2972  * @oh: struct omap_hwmod * to test hardreset
2973  * @ohri: hardreset line data
2974  *
2975  * Call omap2_prm_is_hardreset_asserted() with parameters extracted
2976  * from the hwmod @oh and the hardreset line data @ohri.  Only
2977  * intended for use as an soc_ops function pointer.  Passes along the
2978  * return value from omap2_prm_is_hardreset_asserted().  XXX This
2979  * function is scheduled for removal when the PRM code is moved into
2980  * drivers/.
2981  */
2982 static int _omap2_is_hardreset_asserted(struct omap_hwmod *oh,
2983                                         struct omap_hwmod_rst_info *ohri)
2984 {
2985         return omap_prm_is_hardreset_asserted(ohri->st_shift, 0,
2986                                               oh->prcm.omap2.module_offs, 0);
2987 }
2988
2989 /**
2990  * _omap4_assert_hardreset - call OMAP4 PRM hardreset fn with hwmod args
2991  * @oh: struct omap_hwmod * to assert hardreset
2992  * @ohri: hardreset line data
2993  *
2994  * Call omap4_prminst_assert_hardreset() with parameters extracted
2995  * from the hwmod @oh and the hardreset line data @ohri.  Only
2996  * intended for use as an soc_ops function pointer.  Passes along the
2997  * return value from omap4_prminst_assert_hardreset().  XXX This
2998  * function is scheduled for removal when the PRM code is moved into
2999  * drivers/.
3000  */
3001 static int _omap4_assert_hardreset(struct omap_hwmod *oh,
3002                                    struct omap_hwmod_rst_info *ohri)
3003 {
3004         if (!oh->clkdm)
3005                 return -EINVAL;
3006
3007         return omap_prm_assert_hardreset(ohri->rst_shift,
3008                                          oh->clkdm->pwrdm.ptr->prcm_partition,
3009                                          oh->clkdm->pwrdm.ptr->prcm_offs,
3010                                          oh->prcm.omap4.rstctrl_offs);
3011 }
3012
3013 /**
3014  * _omap4_deassert_hardreset - call OMAP4 PRM hardreset fn with hwmod args
3015  * @oh: struct omap_hwmod * to deassert hardreset
3016  * @ohri: hardreset line data
3017  *
3018  * Call omap4_prminst_deassert_hardreset() with parameters extracted
3019  * from the hwmod @oh and the hardreset line data @ohri.  Only
3020  * intended for use as an soc_ops function pointer.  Passes along the
3021  * return value from omap4_prminst_deassert_hardreset().  XXX This
3022  * function is scheduled for removal when the PRM code is moved into
3023  * drivers/.
3024  */
3025 static int _omap4_deassert_hardreset(struct omap_hwmod *oh,
3026                                      struct omap_hwmod_rst_info *ohri)
3027 {
3028         if (!oh->clkdm)
3029                 return -EINVAL;
3030
3031         if (ohri->st_shift)
3032                 pr_err("omap_hwmod: %s: %s: hwmod data error: OMAP4 does not support st_shift\n",
3033                        oh->name, ohri->name);
3034         return omap_prm_deassert_hardreset(ohri->rst_shift, ohri->rst_shift,
3035                                            oh->clkdm->pwrdm.ptr->prcm_partition,
3036                                            oh->clkdm->pwrdm.ptr->prcm_offs,
3037                                            oh->prcm.omap4.rstctrl_offs,
3038                                            oh->prcm.omap4.rstctrl_offs +
3039                                            OMAP4_RST_CTRL_ST_OFFSET);
3040 }
3041
3042 /**
3043  * _omap4_is_hardreset_asserted - call OMAP4 PRM hardreset fn with hwmod args
3044  * @oh: struct omap_hwmod * to test hardreset
3045  * @ohri: hardreset line data
3046  *
3047  * Call omap4_prminst_is_hardreset_asserted() with parameters
3048  * extracted from the hwmod @oh and the hardreset line data @ohri.
3049  * Only intended for use as an soc_ops function pointer.  Passes along
3050  * the return value from omap4_prminst_is_hardreset_asserted().  XXX
3051  * This function is scheduled for removal when the PRM code is moved
3052  * into drivers/.
3053  */
3054 static int _omap4_is_hardreset_asserted(struct omap_hwmod *oh,
3055                                         struct omap_hwmod_rst_info *ohri)
3056 {
3057         if (!oh->clkdm)
3058                 return -EINVAL;
3059
3060         return omap_prm_is_hardreset_asserted(ohri->rst_shift,
3061                                               oh->clkdm->pwrdm.ptr->
3062                                               prcm_partition,
3063                                               oh->clkdm->pwrdm.ptr->prcm_offs,
3064                                               oh->prcm.omap4.rstctrl_offs);
3065 }
3066
3067 /**
3068  * _am33xx_deassert_hardreset - call AM33XX PRM hardreset fn with hwmod args
3069  * @oh: struct omap_hwmod * to deassert hardreset
3070  * @ohri: hardreset line data
3071  *
3072  * Call am33xx_prminst_deassert_hardreset() with parameters extracted
3073  * from the hwmod @oh and the hardreset line data @ohri.  Only
3074  * intended for use as an soc_ops function pointer.  Passes along the
3075  * return value from am33xx_prminst_deassert_hardreset().  XXX This
3076  * function is scheduled for removal when the PRM code is moved into
3077  * drivers/.
3078  */
3079 static int _am33xx_deassert_hardreset(struct omap_hwmod *oh,
3080                                      struct omap_hwmod_rst_info *ohri)
3081 {
3082         return omap_prm_deassert_hardreset(ohri->rst_shift, ohri->st_shift,
3083                                            oh->clkdm->pwrdm.ptr->prcm_partition,
3084                                            oh->clkdm->pwrdm.ptr->prcm_offs,
3085                                            oh->prcm.omap4.rstctrl_offs,
3086                                            oh->prcm.omap4.rstst_offs);
3087 }
3088
3089 /* Public functions */
3090
3091 u32 omap_hwmod_read(struct omap_hwmod *oh, u16 reg_offs)
3092 {
3093         if (oh->flags & HWMOD_16BIT_REG)
3094                 return readw_relaxed(oh->_mpu_rt_va + reg_offs);
3095         else
3096                 return readl_relaxed(oh->_mpu_rt_va + reg_offs);
3097 }
3098
3099 void omap_hwmod_write(u32 v, struct omap_hwmod *oh, u16 reg_offs)
3100 {
3101         if (oh->flags & HWMOD_16BIT_REG)
3102                 writew_relaxed(v, oh->_mpu_rt_va + reg_offs);
3103         else
3104                 writel_relaxed(v, oh->_mpu_rt_va + reg_offs);
3105 }
3106
3107 /**
3108  * omap_hwmod_softreset - reset a module via SYSCONFIG.SOFTRESET bit
3109  * @oh: struct omap_hwmod *
3110  *
3111  * This is a public function exposed to drivers. Some drivers may need to do
3112  * some settings before and after resetting the device.  Those drivers after
3113  * doing the necessary settings could use this function to start a reset by
3114  * setting the SYSCONFIG.SOFTRESET bit.
3115  */
3116 int omap_hwmod_softreset(struct omap_hwmod *oh)
3117 {
3118         u32 v;
3119         int ret;
3120
3121         if (!oh || !(oh->_sysc_cache))
3122                 return -EINVAL;
3123
3124         v = oh->_sysc_cache;
3125         ret = _set_softreset(oh, &v);
3126         if (ret)
3127                 goto error;
3128         _write_sysconfig(v, oh);
3129
3130         ret = _clear_softreset(oh, &v);
3131         if (ret)
3132                 goto error;
3133         _write_sysconfig(v, oh);
3134
3135 error:
3136         return ret;
3137 }
3138
3139 /**
3140  * omap_hwmod_lookup - look up a registered omap_hwmod by name
3141  * @name: name of the omap_hwmod to look up
3142  *
3143  * Given a @name of an omap_hwmod, return a pointer to the registered
3144  * struct omap_hwmod *, or NULL upon error.
3145  */
3146 struct omap_hwmod *omap_hwmod_lookup(const char *name)
3147 {
3148         struct omap_hwmod *oh;
3149
3150         if (!name)
3151                 return NULL;
3152
3153         oh = _lookup(name);
3154
3155         return oh;
3156 }
3157
3158 /**
3159  * omap_hwmod_for_each - call function for each registered omap_hwmod
3160  * @fn: pointer to a callback function
3161  * @data: void * data to pass to callback function
3162  *
3163  * Call @fn for each registered omap_hwmod, passing @data to each
3164  * function.  @fn must return 0 for success or any other value for
3165  * failure.  If @fn returns non-zero, the iteration across omap_hwmods
3166  * will stop and the non-zero return value will be passed to the
3167  * caller of omap_hwmod_for_each().  @fn is called with
3168  * omap_hwmod_for_each() held.
3169  */
3170 int omap_hwmod_for_each(int (*fn)(struct omap_hwmod *oh, void *data),
3171                         void *data)
3172 {
3173         struct omap_hwmod *temp_oh;
3174         int ret = 0;
3175
3176         if (!fn)
3177                 return -EINVAL;
3178
3179         list_for_each_entry(temp_oh, &omap_hwmod_list, node) {
3180                 ret = (*fn)(temp_oh, data);
3181                 if (ret)
3182                         break;
3183         }
3184
3185         return ret;
3186 }
3187
3188 /**
3189  * omap_hwmod_register_links - register an array of hwmod links
3190  * @ois: pointer to an array of omap_hwmod_ocp_if to register
3191  *
3192  * Intended to be called early in boot before the clock framework is
3193  * initialized.  If @ois is not null, will register all omap_hwmods
3194  * listed in @ois that are valid for this chip.  Returns -EINVAL if
3195  * omap_hwmod_init() hasn't been called before calling this function,
3196  * -ENOMEM if the link memory area can't be allocated, or 0 upon
3197  * success.
3198  */
3199 int __init omap_hwmod_register_links(struct omap_hwmod_ocp_if **ois)
3200 {
3201         int r, i;
3202
3203         if (!inited)
3204                 return -EINVAL;
3205
3206         if (!ois)
3207                 return 0;
3208
3209         if (ois[0] == NULL) /* Empty list */
3210                 return 0;
3211
3212         if (!linkspace) {
3213                 if (_alloc_linkspace(ois)) {
3214                         pr_err("omap_hwmod: could not allocate link space\n");
3215                         return -ENOMEM;
3216                 }
3217         }
3218
3219         i = 0;
3220         do {
3221                 r = _register_link(ois[i]);
3222                 WARN(r && r != -EEXIST,
3223                      "omap_hwmod: _register_link(%s -> %s) returned %d\n",
3224                      ois[i]->master->name, ois[i]->slave->name, r);
3225         } while (ois[++i]);
3226
3227         return 0;
3228 }
3229
3230 /**
3231  * _ensure_mpu_hwmod_is_setup - ensure the MPU SS hwmod is init'ed and set up
3232  * @oh: pointer to the hwmod currently being set up (usually not the MPU)
3233  *
3234  * If the hwmod data corresponding to the MPU subsystem IP block
3235  * hasn't been initialized and set up yet, do so now.  This must be
3236  * done first since sleep dependencies may be added from other hwmods
3237  * to the MPU.  Intended to be called only by omap_hwmod_setup*().  No
3238  * return value.
3239  */
3240 static void __init _ensure_mpu_hwmod_is_setup(struct omap_hwmod *oh)
3241 {
3242         if (!mpu_oh || mpu_oh->_state == _HWMOD_STATE_UNKNOWN)
3243                 pr_err("omap_hwmod: %s: MPU initiator hwmod %s not yet registered\n",
3244                        __func__, MPU_INITIATOR_NAME);
3245         else if (mpu_oh->_state == _HWMOD_STATE_REGISTERED && oh != mpu_oh)
3246                 omap_hwmod_setup_one(MPU_INITIATOR_NAME);
3247 }
3248
3249 /**
3250  * omap_hwmod_setup_one - set up a single hwmod
3251  * @oh_name: const char * name of the already-registered hwmod to set up
3252  *
3253  * Initialize and set up a single hwmod.  Intended to be used for a
3254  * small number of early devices, such as the timer IP blocks used for
3255  * the scheduler clock.  Must be called after omap2_clk_init().
3256  * Resolves the struct clk names to struct clk pointers for each
3257  * registered omap_hwmod.  Also calls _setup() on each hwmod.  Returns
3258  * -EINVAL upon error or 0 upon success.
3259  */
3260 int __init omap_hwmod_setup_one(const char *oh_name)
3261 {
3262         struct omap_hwmod *oh;
3263
3264         pr_debug("omap_hwmod: %s: %s\n", oh_name, __func__);
3265
3266         oh = _lookup(oh_name);
3267         if (!oh) {
3268                 WARN(1, "omap_hwmod: %s: hwmod not yet registered\n", oh_name);
3269                 return -EINVAL;
3270         }
3271
3272         _ensure_mpu_hwmod_is_setup(oh);
3273
3274         _init(oh, NULL);
3275         _setup(oh, NULL);
3276
3277         return 0;
3278 }
3279
3280 /**
3281  * omap_hwmod_setup_all - set up all registered IP blocks
3282  *
3283  * Initialize and set up all IP blocks registered with the hwmod code.
3284  * Must be called after omap2_clk_init().  Resolves the struct clk
3285  * names to struct clk pointers for each registered omap_hwmod.  Also
3286  * calls _setup() on each hwmod.  Returns 0 upon success.
3287  */
3288 static int __init omap_hwmod_setup_all(void)
3289 {
3290         _ensure_mpu_hwmod_is_setup(NULL);
3291
3292         omap_hwmod_for_each(_init, NULL);
3293         omap_hwmod_for_each(_setup, NULL);
3294
3295         return 0;
3296 }
3297 omap_core_initcall(omap_hwmod_setup_all);
3298
3299 /**
3300  * omap_hwmod_enable - enable an omap_hwmod
3301  * @oh: struct omap_hwmod *
3302  *
3303  * Enable an omap_hwmod @oh.  Intended to be called by omap_device_enable().
3304  * Returns -EINVAL on error or passes along the return value from _enable().
3305  */
3306 int omap_hwmod_enable(struct omap_hwmod *oh)
3307 {
3308         int r;
3309         unsigned long flags;
3310
3311         if (!oh)
3312                 return -EINVAL;
3313
3314         spin_lock_irqsave(&oh->_lock, flags);
3315         r = _enable(oh);
3316         spin_unlock_irqrestore(&oh->_lock, flags);
3317
3318         return r;
3319 }
3320
3321 /**
3322  * omap_hwmod_idle - idle an omap_hwmod
3323  * @oh: struct omap_hwmod *
3324  *
3325  * Idle an omap_hwmod @oh.  Intended to be called by omap_device_idle().
3326  * Returns -EINVAL on error or passes along the return value from _idle().
3327  */
3328 int omap_hwmod_idle(struct omap_hwmod *oh)
3329 {
3330         int r;
3331         unsigned long flags;
3332
3333         if (!oh)
3334                 return -EINVAL;
3335
3336         spin_lock_irqsave(&oh->_lock, flags);
3337         r = _idle(oh);
3338         spin_unlock_irqrestore(&oh->_lock, flags);
3339
3340         return r;
3341 }
3342
3343 /**
3344  * omap_hwmod_shutdown - shutdown an omap_hwmod
3345  * @oh: struct omap_hwmod *
3346  *
3347  * Shutdown an omap_hwmod @oh.  Intended to be called by
3348  * omap_device_shutdown().  Returns -EINVAL on error or passes along
3349  * the return value from _shutdown().
3350  */
3351 int omap_hwmod_shutdown(struct omap_hwmod *oh)
3352 {
3353         int r;
3354         unsigned long flags;
3355
3356         if (!oh)
3357                 return -EINVAL;
3358
3359         spin_lock_irqsave(&oh->_lock, flags);
3360         r = _shutdown(oh);
3361         spin_unlock_irqrestore(&oh->_lock, flags);
3362
3363         return r;
3364 }
3365
3366 /*
3367  * IP block data retrieval functions
3368  */
3369
3370 /**
3371  * omap_hwmod_count_resources - count number of struct resources needed by hwmod
3372  * @oh: struct omap_hwmod *
3373  * @flags: Type of resources to include when counting (IRQ/DMA/MEM)
3374  *
3375  * Count the number of struct resource array elements necessary to
3376  * contain omap_hwmod @oh resources.  Intended to be called by code
3377  * that registers omap_devices.  Intended to be used to determine the
3378  * size of a dynamically-allocated struct resource array, before
3379  * calling omap_hwmod_fill_resources().  Returns the number of struct
3380  * resource array elements needed.
3381  *
3382  * XXX This code is not optimized.  It could attempt to merge adjacent
3383  * resource IDs.
3384  *
3385  */
3386 int omap_hwmod_count_resources(struct omap_hwmod *oh, unsigned long flags)
3387 {
3388         int ret = 0;
3389
3390         if (flags & IORESOURCE_IRQ)
3391                 ret += _count_mpu_irqs(oh);
3392
3393         if (flags & IORESOURCE_DMA)
3394                 ret += _count_sdma_reqs(oh);
3395
3396         if (flags & IORESOURCE_MEM) {
3397                 int i = 0;
3398                 struct omap_hwmod_ocp_if *os;
3399                 struct list_head *p = oh->slave_ports.next;
3400
3401                 while (i < oh->slaves_cnt) {
3402                         os = _fetch_next_ocp_if(&p, &i);
3403                         ret += _count_ocp_if_addr_spaces(os);
3404                 }
3405         }
3406
3407         return ret;
3408 }
3409
3410 /**
3411  * omap_hwmod_fill_resources - fill struct resource array with hwmod data
3412  * @oh: struct omap_hwmod *
3413  * @res: pointer to the first element of an array of struct resource to fill
3414  *
3415  * Fill the struct resource array @res with resource data from the
3416  * omap_hwmod @oh.  Intended to be called by code that registers
3417  * omap_devices.  See also omap_hwmod_count_resources().  Returns the
3418  * number of array elements filled.
3419  */
3420 int omap_hwmod_fill_resources(struct omap_hwmod *oh, struct resource *res)
3421 {
3422         struct omap_hwmod_ocp_if *os;
3423         struct list_head *p;
3424         int i, j, mpu_irqs_cnt, sdma_reqs_cnt, addr_cnt;
3425         int r = 0;
3426
3427         /* For each IRQ, DMA, memory area, fill in array.*/
3428
3429         mpu_irqs_cnt = _count_mpu_irqs(oh);
3430         for (i = 0; i < mpu_irqs_cnt; i++) {
3431                 unsigned int irq;
3432
3433                 if (oh->xlate_irq)
3434                         irq = oh->xlate_irq((oh->mpu_irqs + i)->irq);
3435                 else
3436                         irq = (oh->mpu_irqs + i)->irq;
3437                 (res + r)->name = (oh->mpu_irqs + i)->name;
3438                 (res + r)->start = irq;
3439                 (res + r)->end = irq;
3440                 (res + r)->flags = IORESOURCE_IRQ;
3441                 r++;
3442         }
3443
3444         sdma_reqs_cnt = _count_sdma_reqs(oh);
3445         for (i = 0; i < sdma_reqs_cnt; i++) {
3446                 (res + r)->name = (oh->sdma_reqs + i)->name;
3447                 (res + r)->start = (oh->sdma_reqs + i)->dma_req;
3448                 (res + r)->end = (oh->sdma_reqs + i)->dma_req;
3449                 (res + r)->flags = IORESOURCE_DMA;
3450                 r++;
3451         }
3452
3453         p = oh->slave_ports.next;
3454
3455         i = 0;
3456         while (i < oh->slaves_cnt) {
3457                 os = _fetch_next_ocp_if(&p, &i);
3458                 addr_cnt = _count_ocp_if_addr_spaces(os);
3459
3460                 for (j = 0; j < addr_cnt; j++) {
3461                         (res + r)->name = (os->addr + j)->name;
3462                         (res + r)->start = (os->addr + j)->pa_start;
3463                         (res + r)->end = (os->addr + j)->pa_end;
3464                         (res + r)->flags = IORESOURCE_MEM;
3465                         r++;
3466                 }
3467         }
3468
3469         return r;
3470 }
3471
3472 /**
3473  * omap_hwmod_fill_dma_resources - fill struct resource array with dma data
3474  * @oh: struct omap_hwmod *
3475  * @res: pointer to the array of struct resource to fill
3476  *
3477  * Fill the struct resource array @res with dma resource data from the
3478  * omap_hwmod @oh.  Intended to be called by code that registers
3479  * omap_devices.  See also omap_hwmod_count_resources().  Returns the
3480  * number of array elements filled.
3481  */
3482 int omap_hwmod_fill_dma_resources(struct omap_hwmod *oh, struct resource *res)
3483 {
3484         int i, sdma_reqs_cnt;
3485         int r = 0;
3486
3487         sdma_reqs_cnt = _count_sdma_reqs(oh);
3488         for (i = 0; i < sdma_reqs_cnt; i++) {
3489                 (res + r)->name = (oh->sdma_reqs + i)->name;
3490                 (res + r)->start = (oh->sdma_reqs + i)->dma_req;
3491                 (res + r)->end = (oh->sdma_reqs + i)->dma_req;
3492                 (res + r)->flags = IORESOURCE_DMA;
3493                 r++;
3494         }
3495
3496         return r;
3497 }
3498
3499 /**
3500  * omap_hwmod_get_resource_byname - fetch IP block integration data by name
3501  * @oh: struct omap_hwmod * to operate on
3502  * @type: one of the IORESOURCE_* constants from include/linux/ioport.h
3503  * @name: pointer to the name of the data to fetch (optional)
3504  * @rsrc: pointer to a struct resource, allocated by the caller
3505  *
3506  * Retrieve MPU IRQ, SDMA request line, or address space start/end
3507  * data for the IP block pointed to by @oh.  The data will be filled
3508  * into a struct resource record pointed to by @rsrc.  The struct
3509  * resource must be allocated by the caller.  When @name is non-null,
3510  * the data associated with the matching entry in the IRQ/SDMA/address
3511  * space hwmod data arrays will be returned.  If @name is null, the
3512  * first array entry will be returned.  Data order is not meaningful
3513  * in hwmod data, so callers are strongly encouraged to use a non-null
3514  * @name whenever possible to avoid unpredictable effects if hwmod
3515  * data is later added that causes data ordering to change.  This
3516  * function is only intended for use by OMAP core code.  Device
3517  * drivers should not call this function - the appropriate bus-related
3518  * data accessor functions should be used instead.  Returns 0 upon
3519  * success or a negative error code upon error.
3520  */
3521 int omap_hwmod_get_resource_byname(struct omap_hwmod *oh, unsigned int type,
3522                                    const char *name, struct resource *rsrc)
3523 {
3524         int r;
3525         unsigned int irq, dma;
3526         u32 pa_start, pa_end;
3527
3528         if (!oh || !rsrc)
3529                 return -EINVAL;
3530
3531         if (type == IORESOURCE_IRQ) {
3532                 r = _get_mpu_irq_by_name(oh, name, &irq);
3533                 if (r)
3534                         return r;
3535
3536                 rsrc->start = irq;
3537                 rsrc->end = irq;
3538         } else if (type == IORESOURCE_DMA) {
3539                 r = _get_sdma_req_by_name(oh, name, &dma);
3540                 if (r)
3541                         return r;
3542
3543                 rsrc->start = dma;
3544                 rsrc->end = dma;
3545         } else if (type == IORESOURCE_MEM) {
3546                 r = _get_addr_space_by_name(oh, name, &pa_start, &pa_end);
3547                 if (r)
3548                         return r;
3549
3550                 rsrc->start = pa_start;
3551                 rsrc->end = pa_end;
3552         } else {
3553                 return -EINVAL;
3554         }
3555
3556         rsrc->flags = type;
3557         rsrc->name = name;
3558
3559         return 0;
3560 }
3561
3562 /**
3563  * omap_hwmod_get_pwrdm - return pointer to this module's main powerdomain
3564  * @oh: struct omap_hwmod *
3565  *
3566  * Return the powerdomain pointer associated with the OMAP module
3567  * @oh's main clock.  If @oh does not have a main clk, return the
3568  * powerdomain associated with the interface clock associated with the
3569  * module's MPU port. (XXX Perhaps this should use the SDMA port
3570  * instead?)  Returns NULL on error, or a struct powerdomain * on
3571  * success.
3572  */
3573 struct powerdomain *omap_hwmod_get_pwrdm(struct omap_hwmod *oh)
3574 {
3575         struct clk *c;
3576         struct omap_hwmod_ocp_if *oi;
3577         struct clockdomain *clkdm;
3578         struct clk_hw_omap *clk;
3579
3580         if (!oh)
3581                 return NULL;
3582
3583         if (oh->clkdm)
3584                 return oh->clkdm->pwrdm.ptr;
3585
3586         if (oh->_clk) {
3587                 c = oh->_clk;
3588         } else {
3589                 oi = _find_mpu_rt_port(oh);
3590                 if (!oi)
3591                         return NULL;
3592                 c = oi->_clk;
3593         }
3594
3595         clk = to_clk_hw_omap(__clk_get_hw(c));
3596         clkdm = clk->clkdm;
3597         if (!clkdm)
3598                 return NULL;
3599
3600         return clkdm->pwrdm.ptr;
3601 }
3602
3603 /**
3604  * omap_hwmod_get_mpu_rt_va - return the module's base address (for the MPU)
3605  * @oh: struct omap_hwmod *
3606  *
3607  * Returns the virtual address corresponding to the beginning of the
3608  * module's register target, in the address range that is intended to
3609  * be used by the MPU.  Returns the virtual address upon success or NULL
3610  * upon error.
3611  */
3612 void __iomem *omap_hwmod_get_mpu_rt_va(struct omap_hwmod *oh)
3613 {
3614         if (!oh)
3615                 return NULL;
3616
3617         if (oh->_int_flags & _HWMOD_NO_MPU_PORT)
3618                 return NULL;
3619
3620         if (oh->_state == _HWMOD_STATE_UNKNOWN)
3621                 return NULL;
3622
3623         return oh->_mpu_rt_va;
3624 }
3625
3626 /*
3627  * XXX what about functions for drivers to save/restore ocp_sysconfig
3628  * for context save/restore operations?
3629  */
3630
3631 /**
3632  * omap_hwmod_enable_wakeup - allow device to wake up the system
3633  * @oh: struct omap_hwmod *
3634  *
3635  * Sets the module OCP socket ENAWAKEUP bit to allow the module to
3636  * send wakeups to the PRCM, and enable I/O ring wakeup events for
3637  * this IP block if it has dynamic mux entries.  Eventually this
3638  * should set PRCM wakeup registers to cause the PRCM to receive
3639  * wakeup events from the module.  Does not set any wakeup routing
3640  * registers beyond this point - if the module is to wake up any other
3641  * module or subsystem, that must be set separately.  Called by
3642  * omap_device code.  Returns -EINVAL on error or 0 upon success.
3643  */
3644 int omap_hwmod_enable_wakeup(struct omap_hwmod *oh)
3645 {
3646         unsigned long flags;
3647         u32 v;
3648
3649         spin_lock_irqsave(&oh->_lock, flags);
3650
3651         if (oh->class->sysc &&
3652             (oh->class->sysc->sysc_flags & SYSC_HAS_ENAWAKEUP)) {
3653                 v = oh->_sysc_cache;
3654                 _enable_wakeup(oh, &v);
3655                 _write_sysconfig(v, oh);
3656         }
3657
3658         _set_idle_ioring_wakeup(oh, true);
3659         spin_unlock_irqrestore(&oh->_lock, flags);
3660
3661         return 0;
3662 }
3663
3664 /**
3665  * omap_hwmod_disable_wakeup - prevent device from waking the system
3666  * @oh: struct omap_hwmod *
3667  *
3668  * Clears the module OCP socket ENAWAKEUP bit to prevent the module
3669  * from sending wakeups to the PRCM, and disable I/O ring wakeup
3670  * events for this IP block if it has dynamic mux entries.  Eventually
3671  * this should clear PRCM wakeup registers to cause the PRCM to ignore
3672  * wakeup events from the module.  Does not set any wakeup routing
3673  * registers beyond this point - if the module is to wake up any other
3674  * module or subsystem, that must be set separately.  Called by
3675  * omap_device code.  Returns -EINVAL on error or 0 upon success.
3676  */
3677 int omap_hwmod_disable_wakeup(struct omap_hwmod *oh)
3678 {
3679         unsigned long flags;
3680         u32 v;
3681
3682         spin_lock_irqsave(&oh->_lock, flags);
3683
3684         if (oh->class->sysc &&
3685             (oh->class->sysc->sysc_flags & SYSC_HAS_ENAWAKEUP)) {
3686                 v = oh->_sysc_cache;
3687                 _disable_wakeup(oh, &v);
3688                 _write_sysconfig(v, oh);
3689         }
3690
3691         _set_idle_ioring_wakeup(oh, false);
3692         spin_unlock_irqrestore(&oh->_lock, flags);
3693
3694         return 0;
3695 }
3696
3697 /**
3698  * omap_hwmod_assert_hardreset - assert the HW reset line of submodules
3699  * contained in the hwmod module.
3700  * @oh: struct omap_hwmod *
3701  * @name: name of the reset line to lookup and assert
3702  *
3703  * Some IP like dsp, ipu or iva contain processor that require
3704  * an HW reset line to be assert / deassert in order to enable fully
3705  * the IP.  Returns -EINVAL if @oh is null or if the operation is not
3706  * yet supported on this OMAP; otherwise, passes along the return value
3707  * from _assert_hardreset().
3708  */
3709 int omap_hwmod_assert_hardreset(struct omap_hwmod *oh, const char *name)
3710 {
3711         int ret;
3712         unsigned long flags;
3713
3714         if (!oh)
3715                 return -EINVAL;
3716
3717         spin_lock_irqsave(&oh->_lock, flags);
3718         ret = _assert_hardreset(oh, name);
3719         spin_unlock_irqrestore(&oh->_lock, flags);
3720
3721         return ret;
3722 }
3723
3724 /**
3725  * omap_hwmod_deassert_hardreset - deassert the HW reset line of submodules
3726  * contained in the hwmod module.
3727  * @oh: struct omap_hwmod *
3728  * @name: name of the reset line to look up and deassert
3729  *
3730  * Some IP like dsp, ipu or iva contain processor that require
3731  * an HW reset line to be assert / deassert in order to enable fully
3732  * the IP.  Returns -EINVAL if @oh is null or if the operation is not
3733  * yet supported on this OMAP; otherwise, passes along the return value
3734  * from _deassert_hardreset().
3735  */
3736 int omap_hwmod_deassert_hardreset(struct omap_hwmod *oh, const char *name)
3737 {
3738         int ret;
3739         unsigned long flags;
3740
3741         if (!oh)
3742                 return -EINVAL;
3743
3744         spin_lock_irqsave(&oh->_lock, flags);
3745         ret = _deassert_hardreset(oh, name);
3746         spin_unlock_irqrestore(&oh->_lock, flags);
3747
3748         return ret;
3749 }
3750
3751 /**
3752  * omap_hwmod_for_each_by_class - call @fn for each hwmod of class @classname
3753  * @classname: struct omap_hwmod_class name to search for
3754  * @fn: callback function pointer to call for each hwmod in class @classname
3755  * @user: arbitrary context data to pass to the callback function
3756  *
3757  * For each omap_hwmod of class @classname, call @fn.
3758  * If the callback function returns something other than
3759  * zero, the iterator is terminated, and the callback function's return
3760  * value is passed back to the caller.  Returns 0 upon success, -EINVAL
3761  * if @classname or @fn are NULL, or passes back the error code from @fn.
3762  */
3763 int omap_hwmod_for_each_by_class(const char *classname,
3764                                  int (*fn)(struct omap_hwmod *oh,
3765                                            void *user),
3766                                  void *user)
3767 {
3768         struct omap_hwmod *temp_oh;
3769         int ret = 0;
3770
3771         if (!classname || !fn)
3772                 return -EINVAL;
3773
3774         pr_debug("omap_hwmod: %s: looking for modules of class %s\n",
3775                  __func__, classname);
3776
3777         list_for_each_entry(temp_oh, &omap_hwmod_list, node) {
3778                 if (!strcmp(temp_oh->class->name, classname)) {
3779                         pr_debug("omap_hwmod: %s: %s: calling callback fn\n",
3780                                  __func__, temp_oh->name);
3781                         ret = (*fn)(temp_oh, user);
3782                         if (ret)
3783                                 break;
3784                 }
3785         }
3786
3787         if (ret)
3788                 pr_debug("omap_hwmod: %s: iterator terminated early: %d\n",
3789                          __func__, ret);
3790
3791         return ret;
3792 }
3793
3794 /**
3795  * omap_hwmod_set_postsetup_state - set the post-_setup() state for this hwmod
3796  * @oh: struct omap_hwmod *
3797  * @state: state that _setup() should leave the hwmod in
3798  *
3799  * Sets the hwmod state that @oh will enter at the end of _setup()
3800  * (called by omap_hwmod_setup_*()).  See also the documentation
3801  * for _setup_postsetup(), above.  Returns 0 upon success or
3802  * -EINVAL if there is a problem with the arguments or if the hwmod is
3803  * in the wrong state.
3804  */
3805 int omap_hwmod_set_postsetup_state(struct omap_hwmod *oh, u8 state)
3806 {
3807         int ret;
3808         unsigned long flags;
3809
3810         if (!oh)
3811                 return -EINVAL;
3812
3813         if (state != _HWMOD_STATE_DISABLED &&
3814             state != _HWMOD_STATE_ENABLED &&
3815             state != _HWMOD_STATE_IDLE)
3816                 return -EINVAL;
3817
3818         spin_lock_irqsave(&oh->_lock, flags);
3819
3820         if (oh->_state != _HWMOD_STATE_REGISTERED) {
3821                 ret = -EINVAL;
3822                 goto ohsps_unlock;
3823         }
3824
3825         oh->_postsetup_state = state;
3826         ret = 0;
3827
3828 ohsps_unlock:
3829         spin_unlock_irqrestore(&oh->_lock, flags);
3830
3831         return ret;
3832 }
3833
3834 /**
3835  * omap_hwmod_get_context_loss_count - get lost context count
3836  * @oh: struct omap_hwmod *
3837  *
3838  * Returns the context loss count of associated @oh
3839  * upon success, or zero if no context loss data is available.
3840  *
3841  * On OMAP4, this queries the per-hwmod context loss register,
3842  * assuming one exists.  If not, or on OMAP2/3, this queries the
3843  * enclosing powerdomain context loss count.
3844  */
3845 int omap_hwmod_get_context_loss_count(struct omap_hwmod *oh)
3846 {
3847         struct powerdomain *pwrdm;
3848         int ret = 0;
3849
3850         if (soc_ops.get_context_lost)
3851                 return soc_ops.get_context_lost(oh);
3852
3853         pwrdm = omap_hwmod_get_pwrdm(oh);
3854         if (pwrdm)
3855                 ret = pwrdm_get_context_loss_count(pwrdm);
3856
3857         return ret;
3858 }
3859
3860 /**
3861  * omap_hwmod_init - initialize the hwmod code
3862  *
3863  * Sets up some function pointers needed by the hwmod code to operate on the
3864  * currently-booted SoC.  Intended to be called once during kernel init
3865  * before any hwmods are registered.  No return value.
3866  */
3867 void __init omap_hwmod_init(void)
3868 {
3869         if (cpu_is_omap24xx()) {
3870                 soc_ops.wait_target_ready = _omap2xxx_3xxx_wait_target_ready;
3871                 soc_ops.assert_hardreset = _omap2_assert_hardreset;
3872                 soc_ops.deassert_hardreset = _omap2_deassert_hardreset;
3873                 soc_ops.is_hardreset_asserted = _omap2_is_hardreset_asserted;
3874         } else if (cpu_is_omap34xx()) {
3875                 soc_ops.wait_target_ready = _omap2xxx_3xxx_wait_target_ready;
3876                 soc_ops.assert_hardreset = _omap2_assert_hardreset;
3877                 soc_ops.deassert_hardreset = _omap2_deassert_hardreset;
3878                 soc_ops.is_hardreset_asserted = _omap2_is_hardreset_asserted;
3879                 soc_ops.init_clkdm = _init_clkdm;
3880         } else if (cpu_is_omap44xx() || soc_is_omap54xx() || soc_is_dra7xx()) {
3881                 soc_ops.enable_module = _omap4_enable_module;
3882                 soc_ops.disable_module = _omap4_disable_module;
3883                 soc_ops.wait_target_ready = _omap4_wait_target_ready;
3884                 soc_ops.assert_hardreset = _omap4_assert_hardreset;
3885                 soc_ops.deassert_hardreset = _omap4_deassert_hardreset;
3886                 soc_ops.is_hardreset_asserted = _omap4_is_hardreset_asserted;
3887                 soc_ops.init_clkdm = _init_clkdm;
3888                 soc_ops.update_context_lost = _omap4_update_context_lost;
3889                 soc_ops.get_context_lost = _omap4_get_context_lost;
3890         } else if (cpu_is_ti816x() || soc_is_am33xx() || soc_is_am43xx()) {
3891                 soc_ops.enable_module = _omap4_enable_module;
3892                 soc_ops.disable_module = _omap4_disable_module;
3893                 soc_ops.wait_target_ready = _omap4_wait_target_ready;
3894                 soc_ops.assert_hardreset = _omap4_assert_hardreset;
3895                 soc_ops.deassert_hardreset = _am33xx_deassert_hardreset;
3896                 soc_ops.is_hardreset_asserted = _omap4_is_hardreset_asserted;
3897                 soc_ops.init_clkdm = _init_clkdm;
3898         } else {
3899                 WARN(1, "omap_hwmod: unknown SoC type\n");
3900         }
3901
3902         inited = true;
3903 }
3904
3905 /**
3906  * omap_hwmod_get_main_clk - get pointer to main clock name
3907  * @oh: struct omap_hwmod *
3908  *
3909  * Returns the main clock name assocated with @oh upon success,
3910  * or NULL if @oh is NULL.
3911  */
3912 const char *omap_hwmod_get_main_clk(struct omap_hwmod *oh)
3913 {
3914         if (!oh)
3915                 return NULL;
3916
3917         return oh->main_clk;
3918 }