]> git.kernelconcepts.de Git - karo-tx-linux.git/blob - drivers/net/netxen/netxen_nic_hw.c
netxen: improve pci memory access
[karo-tx-linux.git] / drivers / net / netxen / netxen_nic_hw.c
1 /*
2  * Copyright (C) 2003 - 2009 NetXen, Inc.
3  * All rights reserved.
4  *
5  * This program is free software; you can redistribute it and/or
6  * modify it under the terms of the GNU General Public License
7  * as published by the Free Software Foundation; either version 2
8  * of the License, or (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 59 Temple Place - Suite 330, Boston,
18  * MA  02111-1307, USA.
19  *
20  * The full GNU General Public License is included in this distribution
21  * in the file called LICENSE.
22  *
23  * Contact Information:
24  *    info@netxen.com
25  * NetXen Inc,
26  * 18922 Forge Drive
27  * Cupertino, CA 95014-0701
28  *
29  */
30
31 #include "netxen_nic.h"
32 #include "netxen_nic_hw.h"
33
34 #include <net/ip.h>
35
36 #define MASK(n) ((1ULL<<(n))-1)
37 #define MN_WIN(addr) (((addr & 0x1fc0000) >> 1) | ((addr >> 25) & 0x3ff))
38 #define OCM_WIN(addr) (((addr & 0x1ff0000) >> 1) | ((addr >> 25) & 0x3ff))
39 #define MS_WIN(addr) (addr & 0x0ffc0000)
40
41 #define GET_MEM_OFFS_2M(addr) (addr & MASK(18))
42
43 #define CRB_BLK(off)    ((off >> 20) & 0x3f)
44 #define CRB_SUBBLK(off) ((off >> 16) & 0xf)
45 #define CRB_WINDOW_2M   (0x130060)
46 #define CRB_HI(off)     ((crb_hub_agt[CRB_BLK(off)] << 20) | ((off) & 0xf0000))
47 #define CRB_INDIRECT_2M (0x1e0000UL)
48
49 #ifndef readq
50 static inline u64 readq(void __iomem *addr)
51 {
52         return readl(addr) | (((u64) readl(addr + 4)) << 32LL);
53 }
54 #endif
55
56 #ifndef writeq
57 static inline void writeq(u64 val, void __iomem *addr)
58 {
59         writel(((u32) (val)), (addr));
60         writel(((u32) (val >> 32)), (addr + 4));
61 }
62 #endif
63
64 #define ADDR_IN_RANGE(addr, low, high)  \
65         (((addr) < (high)) && ((addr) >= (low)))
66
67 #define PCI_OFFSET_FIRST_RANGE(adapter, off)    \
68         ((adapter)->ahw.pci_base0 + (off))
69 #define PCI_OFFSET_SECOND_RANGE(adapter, off)   \
70         ((adapter)->ahw.pci_base1 + (off) - SECOND_PAGE_GROUP_START)
71 #define PCI_OFFSET_THIRD_RANGE(adapter, off)    \
72         ((adapter)->ahw.pci_base2 + (off) - THIRD_PAGE_GROUP_START)
73
74 static void __iomem *pci_base_offset(struct netxen_adapter *adapter,
75                                             unsigned long off)
76 {
77         if (ADDR_IN_RANGE(off, FIRST_PAGE_GROUP_START, FIRST_PAGE_GROUP_END))
78                 return PCI_OFFSET_FIRST_RANGE(adapter, off);
79
80         if (ADDR_IN_RANGE(off, SECOND_PAGE_GROUP_START, SECOND_PAGE_GROUP_END))
81                 return PCI_OFFSET_SECOND_RANGE(adapter, off);
82
83         if (ADDR_IN_RANGE(off, THIRD_PAGE_GROUP_START, THIRD_PAGE_GROUP_END))
84                 return PCI_OFFSET_THIRD_RANGE(adapter, off);
85
86         return NULL;
87 }
88
89 static crb_128M_2M_block_map_t
90 crb_128M_2M_map[64] __cacheline_aligned_in_smp = {
91     {{{0, 0,         0,         0} } },         /* 0: PCI */
92     {{{1, 0x0100000, 0x0102000, 0x120000},      /* 1: PCIE */
93           {1, 0x0110000, 0x0120000, 0x130000},
94           {1, 0x0120000, 0x0122000, 0x124000},
95           {1, 0x0130000, 0x0132000, 0x126000},
96           {1, 0x0140000, 0x0142000, 0x128000},
97           {1, 0x0150000, 0x0152000, 0x12a000},
98           {1, 0x0160000, 0x0170000, 0x110000},
99           {1, 0x0170000, 0x0172000, 0x12e000},
100           {0, 0x0000000, 0x0000000, 0x000000},
101           {0, 0x0000000, 0x0000000, 0x000000},
102           {0, 0x0000000, 0x0000000, 0x000000},
103           {0, 0x0000000, 0x0000000, 0x000000},
104           {0, 0x0000000, 0x0000000, 0x000000},
105           {0, 0x0000000, 0x0000000, 0x000000},
106           {1, 0x01e0000, 0x01e0800, 0x122000},
107           {0, 0x0000000, 0x0000000, 0x000000} } },
108         {{{1, 0x0200000, 0x0210000, 0x180000} } },/* 2: MN */
109     {{{0, 0,         0,         0} } },     /* 3: */
110     {{{1, 0x0400000, 0x0401000, 0x169000} } },/* 4: P2NR1 */
111     {{{1, 0x0500000, 0x0510000, 0x140000} } },/* 5: SRE   */
112     {{{1, 0x0600000, 0x0610000, 0x1c0000} } },/* 6: NIU   */
113     {{{1, 0x0700000, 0x0704000, 0x1b8000} } },/* 7: QM    */
114     {{{1, 0x0800000, 0x0802000, 0x170000},  /* 8: SQM0  */
115       {0, 0x0000000, 0x0000000, 0x000000},
116       {0, 0x0000000, 0x0000000, 0x000000},
117       {0, 0x0000000, 0x0000000, 0x000000},
118       {0, 0x0000000, 0x0000000, 0x000000},
119       {0, 0x0000000, 0x0000000, 0x000000},
120       {0, 0x0000000, 0x0000000, 0x000000},
121       {0, 0x0000000, 0x0000000, 0x000000},
122       {0, 0x0000000, 0x0000000, 0x000000},
123       {0, 0x0000000, 0x0000000, 0x000000},
124       {0, 0x0000000, 0x0000000, 0x000000},
125       {0, 0x0000000, 0x0000000, 0x000000},
126       {0, 0x0000000, 0x0000000, 0x000000},
127       {0, 0x0000000, 0x0000000, 0x000000},
128       {0, 0x0000000, 0x0000000, 0x000000},
129       {1, 0x08f0000, 0x08f2000, 0x172000} } },
130     {{{1, 0x0900000, 0x0902000, 0x174000},      /* 9: SQM1*/
131       {0, 0x0000000, 0x0000000, 0x000000},
132       {0, 0x0000000, 0x0000000, 0x000000},
133       {0, 0x0000000, 0x0000000, 0x000000},
134       {0, 0x0000000, 0x0000000, 0x000000},
135       {0, 0x0000000, 0x0000000, 0x000000},
136       {0, 0x0000000, 0x0000000, 0x000000},
137       {0, 0x0000000, 0x0000000, 0x000000},
138       {0, 0x0000000, 0x0000000, 0x000000},
139       {0, 0x0000000, 0x0000000, 0x000000},
140       {0, 0x0000000, 0x0000000, 0x000000},
141       {0, 0x0000000, 0x0000000, 0x000000},
142       {0, 0x0000000, 0x0000000, 0x000000},
143       {0, 0x0000000, 0x0000000, 0x000000},
144       {0, 0x0000000, 0x0000000, 0x000000},
145       {1, 0x09f0000, 0x09f2000, 0x176000} } },
146     {{{0, 0x0a00000, 0x0a02000, 0x178000},      /* 10: SQM2*/
147       {0, 0x0000000, 0x0000000, 0x000000},
148       {0, 0x0000000, 0x0000000, 0x000000},
149       {0, 0x0000000, 0x0000000, 0x000000},
150       {0, 0x0000000, 0x0000000, 0x000000},
151       {0, 0x0000000, 0x0000000, 0x000000},
152       {0, 0x0000000, 0x0000000, 0x000000},
153       {0, 0x0000000, 0x0000000, 0x000000},
154       {0, 0x0000000, 0x0000000, 0x000000},
155       {0, 0x0000000, 0x0000000, 0x000000},
156       {0, 0x0000000, 0x0000000, 0x000000},
157       {0, 0x0000000, 0x0000000, 0x000000},
158       {0, 0x0000000, 0x0000000, 0x000000},
159       {0, 0x0000000, 0x0000000, 0x000000},
160       {0, 0x0000000, 0x0000000, 0x000000},
161       {1, 0x0af0000, 0x0af2000, 0x17a000} } },
162     {{{0, 0x0b00000, 0x0b02000, 0x17c000},      /* 11: SQM3*/
163       {0, 0x0000000, 0x0000000, 0x000000},
164       {0, 0x0000000, 0x0000000, 0x000000},
165       {0, 0x0000000, 0x0000000, 0x000000},
166       {0, 0x0000000, 0x0000000, 0x000000},
167       {0, 0x0000000, 0x0000000, 0x000000},
168       {0, 0x0000000, 0x0000000, 0x000000},
169       {0, 0x0000000, 0x0000000, 0x000000},
170       {0, 0x0000000, 0x0000000, 0x000000},
171       {0, 0x0000000, 0x0000000, 0x000000},
172       {0, 0x0000000, 0x0000000, 0x000000},
173       {0, 0x0000000, 0x0000000, 0x000000},
174       {0, 0x0000000, 0x0000000, 0x000000},
175       {0, 0x0000000, 0x0000000, 0x000000},
176       {0, 0x0000000, 0x0000000, 0x000000},
177       {1, 0x0bf0000, 0x0bf2000, 0x17e000} } },
178         {{{1, 0x0c00000, 0x0c04000, 0x1d4000} } },/* 12: I2Q */
179         {{{1, 0x0d00000, 0x0d04000, 0x1a4000} } },/* 13: TMR */
180         {{{1, 0x0e00000, 0x0e04000, 0x1a0000} } },/* 14: ROMUSB */
181         {{{1, 0x0f00000, 0x0f01000, 0x164000} } },/* 15: PEG4 */
182         {{{0, 0x1000000, 0x1004000, 0x1a8000} } },/* 16: XDMA */
183         {{{1, 0x1100000, 0x1101000, 0x160000} } },/* 17: PEG0 */
184         {{{1, 0x1200000, 0x1201000, 0x161000} } },/* 18: PEG1 */
185         {{{1, 0x1300000, 0x1301000, 0x162000} } },/* 19: PEG2 */
186         {{{1, 0x1400000, 0x1401000, 0x163000} } },/* 20: PEG3 */
187         {{{1, 0x1500000, 0x1501000, 0x165000} } },/* 21: P2ND */
188         {{{1, 0x1600000, 0x1601000, 0x166000} } },/* 22: P2NI */
189         {{{0, 0,         0,         0} } },     /* 23: */
190         {{{0, 0,         0,         0} } },     /* 24: */
191         {{{0, 0,         0,         0} } },     /* 25: */
192         {{{0, 0,         0,         0} } },     /* 26: */
193         {{{0, 0,         0,         0} } },     /* 27: */
194         {{{0, 0,         0,         0} } },     /* 28: */
195         {{{1, 0x1d00000, 0x1d10000, 0x190000} } },/* 29: MS */
196     {{{1, 0x1e00000, 0x1e01000, 0x16a000} } },/* 30: P2NR2 */
197     {{{1, 0x1f00000, 0x1f10000, 0x150000} } },/* 31: EPG */
198         {{{0} } },                              /* 32: PCI */
199         {{{1, 0x2100000, 0x2102000, 0x120000},  /* 33: PCIE */
200           {1, 0x2110000, 0x2120000, 0x130000},
201           {1, 0x2120000, 0x2122000, 0x124000},
202           {1, 0x2130000, 0x2132000, 0x126000},
203           {1, 0x2140000, 0x2142000, 0x128000},
204           {1, 0x2150000, 0x2152000, 0x12a000},
205           {1, 0x2160000, 0x2170000, 0x110000},
206           {1, 0x2170000, 0x2172000, 0x12e000},
207           {0, 0x0000000, 0x0000000, 0x000000},
208           {0, 0x0000000, 0x0000000, 0x000000},
209           {0, 0x0000000, 0x0000000, 0x000000},
210           {0, 0x0000000, 0x0000000, 0x000000},
211           {0, 0x0000000, 0x0000000, 0x000000},
212           {0, 0x0000000, 0x0000000, 0x000000},
213           {0, 0x0000000, 0x0000000, 0x000000},
214           {0, 0x0000000, 0x0000000, 0x000000} } },
215         {{{1, 0x2200000, 0x2204000, 0x1b0000} } },/* 34: CAM */
216         {{{0} } },                              /* 35: */
217         {{{0} } },                              /* 36: */
218         {{{0} } },                              /* 37: */
219         {{{0} } },                              /* 38: */
220         {{{0} } },                              /* 39: */
221         {{{1, 0x2800000, 0x2804000, 0x1a4000} } },/* 40: TMR */
222         {{{1, 0x2900000, 0x2901000, 0x16b000} } },/* 41: P2NR3 */
223         {{{1, 0x2a00000, 0x2a00400, 0x1ac400} } },/* 42: RPMX1 */
224         {{{1, 0x2b00000, 0x2b00400, 0x1ac800} } },/* 43: RPMX2 */
225         {{{1, 0x2c00000, 0x2c00400, 0x1acc00} } },/* 44: RPMX3 */
226         {{{1, 0x2d00000, 0x2d00400, 0x1ad000} } },/* 45: RPMX4 */
227         {{{1, 0x2e00000, 0x2e00400, 0x1ad400} } },/* 46: RPMX5 */
228         {{{1, 0x2f00000, 0x2f00400, 0x1ad800} } },/* 47: RPMX6 */
229         {{{1, 0x3000000, 0x3000400, 0x1adc00} } },/* 48: RPMX7 */
230         {{{0, 0x3100000, 0x3104000, 0x1a8000} } },/* 49: XDMA */
231         {{{1, 0x3200000, 0x3204000, 0x1d4000} } },/* 50: I2Q */
232         {{{1, 0x3300000, 0x3304000, 0x1a0000} } },/* 51: ROMUSB */
233         {{{0} } },                              /* 52: */
234         {{{1, 0x3500000, 0x3500400, 0x1ac000} } },/* 53: RPMX0 */
235         {{{1, 0x3600000, 0x3600400, 0x1ae000} } },/* 54: RPMX8 */
236         {{{1, 0x3700000, 0x3700400, 0x1ae400} } },/* 55: RPMX9 */
237         {{{1, 0x3800000, 0x3804000, 0x1d0000} } },/* 56: OCM0 */
238         {{{1, 0x3900000, 0x3904000, 0x1b4000} } },/* 57: CRYPTO */
239         {{{1, 0x3a00000, 0x3a04000, 0x1d8000} } },/* 58: SMB */
240         {{{0} } },                              /* 59: I2C0 */
241         {{{0} } },                              /* 60: I2C1 */
242         {{{1, 0x3d00000, 0x3d04000, 0x1d8000} } },/* 61: LPC */
243         {{{1, 0x3e00000, 0x3e01000, 0x167000} } },/* 62: P2NC */
244         {{{1, 0x3f00000, 0x3f01000, 0x168000} } }       /* 63: P2NR0 */
245 };
246
247 /*
248  * top 12 bits of crb internal address (hub, agent)
249  */
250 static unsigned crb_hub_agt[64] =
251 {
252         0,
253         NETXEN_HW_CRB_HUB_AGT_ADR_PS,
254         NETXEN_HW_CRB_HUB_AGT_ADR_MN,
255         NETXEN_HW_CRB_HUB_AGT_ADR_MS,
256         0,
257         NETXEN_HW_CRB_HUB_AGT_ADR_SRE,
258         NETXEN_HW_CRB_HUB_AGT_ADR_NIU,
259         NETXEN_HW_CRB_HUB_AGT_ADR_QMN,
260         NETXEN_HW_CRB_HUB_AGT_ADR_SQN0,
261         NETXEN_HW_CRB_HUB_AGT_ADR_SQN1,
262         NETXEN_HW_CRB_HUB_AGT_ADR_SQN2,
263         NETXEN_HW_CRB_HUB_AGT_ADR_SQN3,
264         NETXEN_HW_CRB_HUB_AGT_ADR_I2Q,
265         NETXEN_HW_CRB_HUB_AGT_ADR_TIMR,
266         NETXEN_HW_CRB_HUB_AGT_ADR_ROMUSB,
267         NETXEN_HW_CRB_HUB_AGT_ADR_PGN4,
268         NETXEN_HW_CRB_HUB_AGT_ADR_XDMA,
269         NETXEN_HW_CRB_HUB_AGT_ADR_PGN0,
270         NETXEN_HW_CRB_HUB_AGT_ADR_PGN1,
271         NETXEN_HW_CRB_HUB_AGT_ADR_PGN2,
272         NETXEN_HW_CRB_HUB_AGT_ADR_PGN3,
273         NETXEN_HW_CRB_HUB_AGT_ADR_PGND,
274         NETXEN_HW_CRB_HUB_AGT_ADR_PGNI,
275         NETXEN_HW_CRB_HUB_AGT_ADR_PGS0,
276         NETXEN_HW_CRB_HUB_AGT_ADR_PGS1,
277         NETXEN_HW_CRB_HUB_AGT_ADR_PGS2,
278         NETXEN_HW_CRB_HUB_AGT_ADR_PGS3,
279         0,
280         NETXEN_HW_CRB_HUB_AGT_ADR_PGSI,
281         NETXEN_HW_CRB_HUB_AGT_ADR_SN,
282         0,
283         NETXEN_HW_CRB_HUB_AGT_ADR_EG,
284         0,
285         NETXEN_HW_CRB_HUB_AGT_ADR_PS,
286         NETXEN_HW_CRB_HUB_AGT_ADR_CAM,
287         0,
288         0,
289         0,
290         0,
291         0,
292         NETXEN_HW_CRB_HUB_AGT_ADR_TIMR,
293         0,
294         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX1,
295         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX2,
296         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX3,
297         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX4,
298         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX5,
299         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX6,
300         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX7,
301         NETXEN_HW_CRB_HUB_AGT_ADR_XDMA,
302         NETXEN_HW_CRB_HUB_AGT_ADR_I2Q,
303         NETXEN_HW_CRB_HUB_AGT_ADR_ROMUSB,
304         0,
305         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX0,
306         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX8,
307         NETXEN_HW_CRB_HUB_AGT_ADR_RPMX9,
308         NETXEN_HW_CRB_HUB_AGT_ADR_OCM0,
309         0,
310         NETXEN_HW_CRB_HUB_AGT_ADR_SMB,
311         NETXEN_HW_CRB_HUB_AGT_ADR_I2C0,
312         NETXEN_HW_CRB_HUB_AGT_ADR_I2C1,
313         0,
314         NETXEN_HW_CRB_HUB_AGT_ADR_PGNC,
315         0,
316 };
317
318 /*  PCI Windowing for DDR regions.  */
319
320 #define NETXEN_WINDOW_ONE       0x2000000 /*CRB Window: bit 25 of CRB address */
321
322 #define NETXEN_PCIE_SEM_TIMEOUT 10000
323
324 int
325 netxen_pcie_sem_lock(struct netxen_adapter *adapter, int sem, u32 id_reg)
326 {
327         int done = 0, timeout = 0;
328
329         while (!done) {
330                 done = NXRD32(adapter, NETXEN_PCIE_REG(PCIE_SEM_LOCK(sem)));
331                 if (done == 1)
332                         break;
333                 if (++timeout >= NETXEN_PCIE_SEM_TIMEOUT)
334                         return -1;
335                 msleep(1);
336         }
337
338         if (id_reg)
339                 NXWR32(adapter, id_reg, adapter->portnum);
340
341         return 0;
342 }
343
344 void
345 netxen_pcie_sem_unlock(struct netxen_adapter *adapter, int sem)
346 {
347         int val;
348         val = NXRD32(adapter, NETXEN_PCIE_REG(PCIE_SEM_UNLOCK(sem)));
349 }
350
351 int netxen_niu_xg_init_port(struct netxen_adapter *adapter, int port)
352 {
353         if (NX_IS_REVISION_P2(adapter->ahw.revision_id)) {
354                 NXWR32(adapter, NETXEN_NIU_XGE_CONFIG_1+(0x10000*port), 0x1447);
355                 NXWR32(adapter, NETXEN_NIU_XGE_CONFIG_0+(0x10000*port), 0x5);
356         }
357
358         return 0;
359 }
360
361 /* Disable an XG interface */
362 int netxen_niu_disable_xg_port(struct netxen_adapter *adapter)
363 {
364         __u32 mac_cfg;
365         u32 port = adapter->physical_port;
366
367         if (NX_IS_REVISION_P3(adapter->ahw.revision_id))
368                 return 0;
369
370         if (port > NETXEN_NIU_MAX_XG_PORTS)
371                 return -EINVAL;
372
373         mac_cfg = 0;
374         if (NXWR32(adapter,
375                         NETXEN_NIU_XGE_CONFIG_0 + (0x10000 * port), mac_cfg))
376                 return -EIO;
377         return 0;
378 }
379
380 #define NETXEN_UNICAST_ADDR(port, index) \
381         (NETXEN_UNICAST_ADDR_BASE+(port*32)+(index*8))
382 #define NETXEN_MCAST_ADDR(port, index) \
383         (NETXEN_MULTICAST_ADDR_BASE+(port*0x80)+(index*8))
384 #define MAC_HI(addr) \
385         ((addr[2] << 16) | (addr[1] << 8) | (addr[0]))
386 #define MAC_LO(addr) \
387         ((addr[5] << 16) | (addr[4] << 8) | (addr[3]))
388
389 int netxen_p2_nic_set_promisc(struct netxen_adapter *adapter, u32 mode)
390 {
391         __u32 reg;
392         u32 port = adapter->physical_port;
393
394         if (port > NETXEN_NIU_MAX_XG_PORTS)
395                 return -EINVAL;
396
397         reg = NXRD32(adapter, NETXEN_NIU_XGE_CONFIG_1 + (0x10000 * port));
398         if (mode == NETXEN_NIU_PROMISC_MODE)
399                 reg = (reg | 0x2000UL);
400         else
401                 reg = (reg & ~0x2000UL);
402
403         if (mode == NETXEN_NIU_ALLMULTI_MODE)
404                 reg = (reg | 0x1000UL);
405         else
406                 reg = (reg & ~0x1000UL);
407
408         NXWR32(adapter, NETXEN_NIU_XGE_CONFIG_1 + (0x10000 * port), reg);
409
410         return 0;
411 }
412
413 int netxen_p2_nic_set_mac_addr(struct netxen_adapter *adapter, u8 *addr)
414 {
415         u32 mac_hi, mac_lo;
416         u32 reg_hi, reg_lo;
417
418         u8 phy = adapter->physical_port;
419
420         if (phy >= NETXEN_NIU_MAX_XG_PORTS)
421                 return -EINVAL;
422
423         mac_lo = ((u32)addr[0] << 16) | ((u32)addr[1] << 24);
424         mac_hi = addr[2] | ((u32)addr[3] << 8) |
425                 ((u32)addr[4] << 16) | ((u32)addr[5] << 24);
426
427         reg_lo = NETXEN_NIU_XGE_STATION_ADDR_0_1 + (0x10000 * phy);
428         reg_hi = NETXEN_NIU_XGE_STATION_ADDR_0_HI + (0x10000 * phy);
429
430         /* write twice to flush */
431         if (NXWR32(adapter, reg_lo, mac_lo) || NXWR32(adapter, reg_hi, mac_hi))
432                 return -EIO;
433         if (NXWR32(adapter, reg_lo, mac_lo) || NXWR32(adapter, reg_hi, mac_hi))
434                 return -EIO;
435
436         return 0;
437 }
438
439 static int
440 netxen_nic_enable_mcast_filter(struct netxen_adapter *adapter)
441 {
442         u32     val = 0;
443         u16 port = adapter->physical_port;
444         u8 *addr = adapter->netdev->dev_addr;
445
446         if (adapter->mc_enabled)
447                 return 0;
448
449         val = NXRD32(adapter, NETXEN_MAC_ADDR_CNTL_REG);
450         val |= (1UL << (28+port));
451         NXWR32(adapter, NETXEN_MAC_ADDR_CNTL_REG, val);
452
453         /* add broadcast addr to filter */
454         val = 0xffffff;
455         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 0), val);
456         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 0)+4, val);
457
458         /* add station addr to filter */
459         val = MAC_HI(addr);
460         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 1), val);
461         val = MAC_LO(addr);
462         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 1)+4, val);
463
464         adapter->mc_enabled = 1;
465         return 0;
466 }
467
468 static int
469 netxen_nic_disable_mcast_filter(struct netxen_adapter *adapter)
470 {
471         u32     val = 0;
472         u16 port = adapter->physical_port;
473         u8 *addr = adapter->netdev->dev_addr;
474
475         if (!adapter->mc_enabled)
476                 return 0;
477
478         val = NXRD32(adapter, NETXEN_MAC_ADDR_CNTL_REG);
479         val &= ~(1UL << (28+port));
480         NXWR32(adapter, NETXEN_MAC_ADDR_CNTL_REG, val);
481
482         val = MAC_HI(addr);
483         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 0), val);
484         val = MAC_LO(addr);
485         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 0)+4, val);
486
487         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 1), 0);
488         NXWR32(adapter, NETXEN_UNICAST_ADDR(port, 1)+4, 0);
489
490         adapter->mc_enabled = 0;
491         return 0;
492 }
493
494 static int
495 netxen_nic_set_mcast_addr(struct netxen_adapter *adapter,
496                 int index, u8 *addr)
497 {
498         u32 hi = 0, lo = 0;
499         u16 port = adapter->physical_port;
500
501         lo = MAC_LO(addr);
502         hi = MAC_HI(addr);
503
504         NXWR32(adapter, NETXEN_MCAST_ADDR(port, index), hi);
505         NXWR32(adapter, NETXEN_MCAST_ADDR(port, index)+4, lo);
506
507         return 0;
508 }
509
510 void netxen_p2_nic_set_multi(struct net_device *netdev)
511 {
512         struct netxen_adapter *adapter = netdev_priv(netdev);
513         struct dev_mc_list *mc_ptr;
514         u8 null_addr[6];
515         int index = 0;
516
517         memset(null_addr, 0, 6);
518
519         if (netdev->flags & IFF_PROMISC) {
520
521                 adapter->set_promisc(adapter,
522                                 NETXEN_NIU_PROMISC_MODE);
523
524                 /* Full promiscuous mode */
525                 netxen_nic_disable_mcast_filter(adapter);
526
527                 return;
528         }
529
530         if (netdev->mc_count == 0) {
531                 adapter->set_promisc(adapter,
532                                 NETXEN_NIU_NON_PROMISC_MODE);
533                 netxen_nic_disable_mcast_filter(adapter);
534                 return;
535         }
536
537         adapter->set_promisc(adapter, NETXEN_NIU_ALLMULTI_MODE);
538         if (netdev->flags & IFF_ALLMULTI ||
539                         netdev->mc_count > adapter->max_mc_count) {
540                 netxen_nic_disable_mcast_filter(adapter);
541                 return;
542         }
543
544         netxen_nic_enable_mcast_filter(adapter);
545
546         for (mc_ptr = netdev->mc_list; mc_ptr; mc_ptr = mc_ptr->next, index++)
547                 netxen_nic_set_mcast_addr(adapter, index, mc_ptr->dmi_addr);
548
549         if (index != netdev->mc_count)
550                 printk(KERN_WARNING "%s: %s multicast address count mismatch\n",
551                         netxen_nic_driver_name, netdev->name);
552
553         /* Clear out remaining addresses */
554         for (; index < adapter->max_mc_count; index++)
555                 netxen_nic_set_mcast_addr(adapter, index, null_addr);
556 }
557
558 static int
559 netxen_send_cmd_descs(struct netxen_adapter *adapter,
560                 struct cmd_desc_type0 *cmd_desc_arr, int nr_desc)
561 {
562         u32 i, producer, consumer;
563         struct netxen_cmd_buffer *pbuf;
564         struct cmd_desc_type0 *cmd_desc;
565         struct nx_host_tx_ring *tx_ring;
566
567         i = 0;
568
569         if (adapter->is_up != NETXEN_ADAPTER_UP_MAGIC)
570                 return -EIO;
571
572         tx_ring = adapter->tx_ring;
573         __netif_tx_lock_bh(tx_ring->txq);
574
575         producer = tx_ring->producer;
576         consumer = tx_ring->sw_consumer;
577
578         if (nr_desc >= netxen_tx_avail(tx_ring)) {
579                 netif_tx_stop_queue(tx_ring->txq);
580                 __netif_tx_unlock_bh(tx_ring->txq);
581                 return -EBUSY;
582         }
583
584         do {
585                 cmd_desc = &cmd_desc_arr[i];
586
587                 pbuf = &tx_ring->cmd_buf_arr[producer];
588                 pbuf->skb = NULL;
589                 pbuf->frag_count = 0;
590
591                 memcpy(&tx_ring->desc_head[producer],
592                         &cmd_desc_arr[i], sizeof(struct cmd_desc_type0));
593
594                 producer = get_next_index(producer, tx_ring->num_desc);
595                 i++;
596
597         } while (i != nr_desc);
598
599         tx_ring->producer = producer;
600
601         netxen_nic_update_cmd_producer(adapter, tx_ring);
602
603         __netif_tx_unlock_bh(tx_ring->txq);
604
605         return 0;
606 }
607
608 static int
609 nx_p3_sre_macaddr_change(struct netxen_adapter *adapter, u8 *addr, unsigned op)
610 {
611         nx_nic_req_t req;
612         nx_mac_req_t *mac_req;
613         u64 word;
614
615         memset(&req, 0, sizeof(nx_nic_req_t));
616         req.qhdr = cpu_to_le64(NX_NIC_REQUEST << 23);
617
618         word = NX_MAC_EVENT | ((u64)adapter->portnum << 16);
619         req.req_hdr = cpu_to_le64(word);
620
621         mac_req = (nx_mac_req_t *)&req.words[0];
622         mac_req->op = op;
623         memcpy(mac_req->mac_addr, addr, 6);
624
625         return netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
626 }
627
628 static int nx_p3_nic_add_mac(struct netxen_adapter *adapter,
629                 u8 *addr, struct list_head *del_list)
630 {
631         struct list_head *head;
632         nx_mac_list_t *cur;
633
634         /* look up if already exists */
635         list_for_each(head, del_list) {
636                 cur = list_entry(head, nx_mac_list_t, list);
637
638                 if (memcmp(addr, cur->mac_addr, ETH_ALEN) == 0) {
639                         list_move_tail(head, &adapter->mac_list);
640                         return 0;
641                 }
642         }
643
644         cur = kzalloc(sizeof(nx_mac_list_t), GFP_ATOMIC);
645         if (cur == NULL) {
646                 printk(KERN_ERR "%s: failed to add mac address filter\n",
647                                 adapter->netdev->name);
648                 return -ENOMEM;
649         }
650         memcpy(cur->mac_addr, addr, ETH_ALEN);
651         list_add_tail(&cur->list, &adapter->mac_list);
652         return nx_p3_sre_macaddr_change(adapter,
653                                 cur->mac_addr, NETXEN_MAC_ADD);
654 }
655
656 void netxen_p3_nic_set_multi(struct net_device *netdev)
657 {
658         struct netxen_adapter *adapter = netdev_priv(netdev);
659         struct dev_mc_list *mc_ptr;
660         u8 bcast_addr[ETH_ALEN] = { 0xff, 0xff, 0xff, 0xff, 0xff, 0xff };
661         u32 mode = VPORT_MISS_MODE_DROP;
662         LIST_HEAD(del_list);
663         struct list_head *head;
664         nx_mac_list_t *cur;
665
666         list_splice_tail_init(&adapter->mac_list, &del_list);
667
668         nx_p3_nic_add_mac(adapter, netdev->dev_addr, &del_list);
669         nx_p3_nic_add_mac(adapter, bcast_addr, &del_list);
670
671         if (netdev->flags & IFF_PROMISC) {
672                 mode = VPORT_MISS_MODE_ACCEPT_ALL;
673                 goto send_fw_cmd;
674         }
675
676         if ((netdev->flags & IFF_ALLMULTI) ||
677                         (netdev->mc_count > adapter->max_mc_count)) {
678                 mode = VPORT_MISS_MODE_ACCEPT_MULTI;
679                 goto send_fw_cmd;
680         }
681
682         if (netdev->mc_count > 0) {
683                 for (mc_ptr = netdev->mc_list; mc_ptr;
684                      mc_ptr = mc_ptr->next) {
685                         nx_p3_nic_add_mac(adapter, mc_ptr->dmi_addr, &del_list);
686                 }
687         }
688
689 send_fw_cmd:
690         adapter->set_promisc(adapter, mode);
691         head = &del_list;
692         while (!list_empty(head)) {
693                 cur = list_entry(head->next, nx_mac_list_t, list);
694
695                 nx_p3_sre_macaddr_change(adapter,
696                                 cur->mac_addr, NETXEN_MAC_DEL);
697                 list_del(&cur->list);
698                 kfree(cur);
699         }
700 }
701
702 int netxen_p3_nic_set_promisc(struct netxen_adapter *adapter, u32 mode)
703 {
704         nx_nic_req_t req;
705         u64 word;
706
707         memset(&req, 0, sizeof(nx_nic_req_t));
708
709         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
710
711         word = NX_NIC_H2C_OPCODE_PROXY_SET_VPORT_MISS_MODE |
712                         ((u64)adapter->portnum << 16);
713         req.req_hdr = cpu_to_le64(word);
714
715         req.words[0] = cpu_to_le64(mode);
716
717         return netxen_send_cmd_descs(adapter,
718                                 (struct cmd_desc_type0 *)&req, 1);
719 }
720
721 void netxen_p3_free_mac_list(struct netxen_adapter *adapter)
722 {
723         nx_mac_list_t *cur;
724         struct list_head *head = &adapter->mac_list;
725
726         while (!list_empty(head)) {
727                 cur = list_entry(head->next, nx_mac_list_t, list);
728                 nx_p3_sre_macaddr_change(adapter,
729                                 cur->mac_addr, NETXEN_MAC_DEL);
730                 list_del(&cur->list);
731                 kfree(cur);
732         }
733 }
734
735 int netxen_p3_nic_set_mac_addr(struct netxen_adapter *adapter, u8 *addr)
736 {
737         /* assuming caller has already copied new addr to netdev */
738         netxen_p3_nic_set_multi(adapter->netdev);
739         return 0;
740 }
741
742 #define NETXEN_CONFIG_INTR_COALESCE     3
743
744 /*
745  * Send the interrupt coalescing parameter set by ethtool to the card.
746  */
747 int netxen_config_intr_coalesce(struct netxen_adapter *adapter)
748 {
749         nx_nic_req_t req;
750         u64 word;
751         int rv;
752
753         memset(&req, 0, sizeof(nx_nic_req_t));
754
755         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
756
757         word = NETXEN_CONFIG_INTR_COALESCE | ((u64)adapter->portnum << 16);
758         req.req_hdr = cpu_to_le64(word);
759
760         memcpy(&req.words[0], &adapter->coal, sizeof(adapter->coal));
761
762         rv = netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
763         if (rv != 0) {
764                 printk(KERN_ERR "ERROR. Could not send "
765                         "interrupt coalescing parameters\n");
766         }
767
768         return rv;
769 }
770
771 int netxen_config_hw_lro(struct netxen_adapter *adapter, int enable)
772 {
773         nx_nic_req_t req;
774         u64 word;
775         int rv = 0;
776
777         if ((adapter->flags & NETXEN_NIC_LRO_ENABLED) == enable)
778                 return 0;
779
780         memset(&req, 0, sizeof(nx_nic_req_t));
781
782         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
783
784         word = NX_NIC_H2C_OPCODE_CONFIG_HW_LRO | ((u64)adapter->portnum << 16);
785         req.req_hdr = cpu_to_le64(word);
786
787         req.words[0] = cpu_to_le64(enable);
788
789         rv = netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
790         if (rv != 0) {
791                 printk(KERN_ERR "ERROR. Could not send "
792                         "configure hw lro request\n");
793         }
794
795         adapter->flags ^= NETXEN_NIC_LRO_ENABLED;
796
797         return rv;
798 }
799
800 int netxen_config_bridged_mode(struct netxen_adapter *adapter, int enable)
801 {
802         nx_nic_req_t req;
803         u64 word;
804         int rv = 0;
805
806         if (!!(adapter->flags & NETXEN_NIC_BRIDGE_ENABLED) == enable)
807                 return rv;
808
809         memset(&req, 0, sizeof(nx_nic_req_t));
810
811         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
812
813         word = NX_NIC_H2C_OPCODE_CONFIG_BRIDGING |
814                 ((u64)adapter->portnum << 16);
815         req.req_hdr = cpu_to_le64(word);
816
817         req.words[0] = cpu_to_le64(enable);
818
819         rv = netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
820         if (rv != 0) {
821                 printk(KERN_ERR "ERROR. Could not send "
822                                 "configure bridge mode request\n");
823         }
824
825         adapter->flags ^= NETXEN_NIC_BRIDGE_ENABLED;
826
827         return rv;
828 }
829
830
831 #define RSS_HASHTYPE_IP_TCP     0x3
832
833 int netxen_config_rss(struct netxen_adapter *adapter, int enable)
834 {
835         nx_nic_req_t req;
836         u64 word;
837         int i, rv;
838
839         u64 key[] = { 0xbeac01fa6a42b73bULL, 0x8030f20c77cb2da3ULL,
840                         0xae7b30b4d0ca2bcbULL, 0x43a38fb04167253dULL,
841                         0x255b0ec26d5a56daULL };
842
843
844         memset(&req, 0, sizeof(nx_nic_req_t));
845         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
846
847         word = NX_NIC_H2C_OPCODE_CONFIG_RSS | ((u64)adapter->portnum << 16);
848         req.req_hdr = cpu_to_le64(word);
849
850         /*
851          * RSS request:
852          * bits 3-0: hash_method
853          *      5-4: hash_type_ipv4
854          *      7-6: hash_type_ipv6
855          *        8: enable
856          *        9: use indirection table
857          *    47-10: reserved
858          *    63-48: indirection table mask
859          */
860         word =  ((u64)(RSS_HASHTYPE_IP_TCP & 0x3) << 4) |
861                 ((u64)(RSS_HASHTYPE_IP_TCP & 0x3) << 6) |
862                 ((u64)(enable & 0x1) << 8) |
863                 ((0x7ULL) << 48);
864         req.words[0] = cpu_to_le64(word);
865         for (i = 0; i < 5; i++)
866                 req.words[i+1] = cpu_to_le64(key[i]);
867
868
869         rv = netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
870         if (rv != 0) {
871                 printk(KERN_ERR "%s: could not configure RSS\n",
872                                 adapter->netdev->name);
873         }
874
875         return rv;
876 }
877
878 int netxen_config_ipaddr(struct netxen_adapter *adapter, u32 ip, int cmd)
879 {
880         nx_nic_req_t req;
881         u64 word;
882         int rv;
883
884         memset(&req, 0, sizeof(nx_nic_req_t));
885         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
886
887         word = NX_NIC_H2C_OPCODE_CONFIG_IPADDR | ((u64)adapter->portnum << 16);
888         req.req_hdr = cpu_to_le64(word);
889
890         req.words[0] = cpu_to_le64(cmd);
891         req.words[1] = cpu_to_le64(ip);
892
893         rv = netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
894         if (rv != 0) {
895                 printk(KERN_ERR "%s: could not notify %s IP 0x%x reuqest\n",
896                                 adapter->netdev->name,
897                                 (cmd == NX_IP_UP) ? "Add" : "Remove", ip);
898         }
899         return rv;
900 }
901
902 int netxen_linkevent_request(struct netxen_adapter *adapter, int enable)
903 {
904         nx_nic_req_t req;
905         u64 word;
906         int rv;
907
908         memset(&req, 0, sizeof(nx_nic_req_t));
909         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
910
911         word = NX_NIC_H2C_OPCODE_GET_LINKEVENT | ((u64)adapter->portnum << 16);
912         req.req_hdr = cpu_to_le64(word);
913         req.words[0] = cpu_to_le64(enable | (enable << 8));
914
915         rv = netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
916         if (rv != 0) {
917                 printk(KERN_ERR "%s: could not configure link notification\n",
918                                 adapter->netdev->name);
919         }
920
921         return rv;
922 }
923
924 int netxen_send_lro_cleanup(struct netxen_adapter *adapter)
925 {
926         nx_nic_req_t req;
927         u64 word;
928         int rv;
929
930         memset(&req, 0, sizeof(nx_nic_req_t));
931         req.qhdr = cpu_to_le64(NX_HOST_REQUEST << 23);
932
933         word = NX_NIC_H2C_OPCODE_LRO_REQUEST |
934                 ((u64)adapter->portnum << 16) |
935                 ((u64)NX_NIC_LRO_REQUEST_CLEANUP << 56) ;
936
937         req.req_hdr = cpu_to_le64(word);
938
939         rv = netxen_send_cmd_descs(adapter, (struct cmd_desc_type0 *)&req, 1);
940         if (rv != 0) {
941                 printk(KERN_ERR "%s: could not cleanup lro flows\n",
942                                 adapter->netdev->name);
943         }
944         return rv;
945 }
946
947 /*
948  * netxen_nic_change_mtu - Change the Maximum Transfer Unit
949  * @returns 0 on success, negative on failure
950  */
951
952 #define MTU_FUDGE_FACTOR        100
953
954 int netxen_nic_change_mtu(struct net_device *netdev, int mtu)
955 {
956         struct netxen_adapter *adapter = netdev_priv(netdev);
957         int max_mtu;
958         int rc = 0;
959
960         if (NX_IS_REVISION_P3(adapter->ahw.revision_id))
961                 max_mtu = P3_MAX_MTU;
962         else
963                 max_mtu = P2_MAX_MTU;
964
965         if (mtu > max_mtu) {
966                 printk(KERN_ERR "%s: mtu > %d bytes unsupported\n",
967                                 netdev->name, max_mtu);
968                 return -EINVAL;
969         }
970
971         if (adapter->set_mtu)
972                 rc = adapter->set_mtu(adapter, mtu);
973
974         if (!rc)
975                 netdev->mtu = mtu;
976
977         return rc;
978 }
979
980 static int netxen_get_flash_block(struct netxen_adapter *adapter, int base,
981                                   int size, __le32 * buf)
982 {
983         int i, v, addr;
984         __le32 *ptr32;
985
986         addr = base;
987         ptr32 = buf;
988         for (i = 0; i < size / sizeof(u32); i++) {
989                 if (netxen_rom_fast_read(adapter, addr, &v) == -1)
990                         return -1;
991                 *ptr32 = cpu_to_le32(v);
992                 ptr32++;
993                 addr += sizeof(u32);
994         }
995         if ((char *)buf + size > (char *)ptr32) {
996                 __le32 local;
997                 if (netxen_rom_fast_read(adapter, addr, &v) == -1)
998                         return -1;
999                 local = cpu_to_le32(v);
1000                 memcpy(ptr32, &local, (char *)buf + size - (char *)ptr32);
1001         }
1002
1003         return 0;
1004 }
1005
1006 int netxen_get_flash_mac_addr(struct netxen_adapter *adapter, __le64 *mac)
1007 {
1008         __le32 *pmac = (__le32 *) mac;
1009         u32 offset;
1010
1011         offset = NX_FW_MAC_ADDR_OFFSET + (adapter->portnum * sizeof(u64));
1012
1013         if (netxen_get_flash_block(adapter, offset, sizeof(u64), pmac) == -1)
1014                 return -1;
1015
1016         if (*mac == cpu_to_le64(~0ULL)) {
1017
1018                 offset = NX_OLD_MAC_ADDR_OFFSET +
1019                         (adapter->portnum * sizeof(u64));
1020
1021                 if (netxen_get_flash_block(adapter,
1022                                         offset, sizeof(u64), pmac) == -1)
1023                         return -1;
1024
1025                 if (*mac == cpu_to_le64(~0ULL))
1026                         return -1;
1027         }
1028         return 0;
1029 }
1030
1031 int netxen_p3_get_mac_addr(struct netxen_adapter *adapter, __le64 *mac)
1032 {
1033         uint32_t crbaddr, mac_hi, mac_lo;
1034         int pci_func = adapter->ahw.pci_func;
1035
1036         crbaddr = CRB_MAC_BLOCK_START +
1037                 (4 * ((pci_func/2) * 3)) + (4 * (pci_func & 1));
1038
1039         mac_lo = NXRD32(adapter, crbaddr);
1040         mac_hi = NXRD32(adapter, crbaddr+4);
1041
1042         if (pci_func & 1)
1043                 *mac = le64_to_cpu((mac_lo >> 16) | ((u64)mac_hi << 16));
1044         else
1045                 *mac = le64_to_cpu((u64)mac_lo | ((u64)mac_hi << 32));
1046
1047         return 0;
1048 }
1049
1050 /*
1051  * Changes the CRB window to the specified window.
1052  */
1053 static void
1054 netxen_nic_pci_change_crbwindow_128M(struct netxen_adapter *adapter, u32 wndw)
1055 {
1056         void __iomem *offset;
1057         u32 tmp;
1058         int count = 0;
1059         uint8_t func = adapter->ahw.pci_func;
1060
1061         if (adapter->curr_window == wndw)
1062                 return;
1063         /*
1064          * Move the CRB window.
1065          * We need to write to the "direct access" region of PCI
1066          * to avoid a race condition where the window register has
1067          * not been successfully written across CRB before the target
1068          * register address is received by PCI. The direct region bypasses
1069          * the CRB bus.
1070          */
1071         offset = PCI_OFFSET_SECOND_RANGE(adapter,
1072                         NETXEN_PCIX_PH_REG(PCIE_CRB_WINDOW_REG(func)));
1073
1074         if (wndw & 0x1)
1075                 wndw = NETXEN_WINDOW_ONE;
1076
1077         writel(wndw, offset);
1078
1079         /* MUST make sure window is set before we forge on... */
1080         while ((tmp = readl(offset)) != wndw) {
1081                 printk(KERN_WARNING "%s: %s WARNING: CRB window value not "
1082                        "registered properly: 0x%08x.\n",
1083                        netxen_nic_driver_name, __func__, tmp);
1084                 mdelay(1);
1085                 if (count >= 10)
1086                         break;
1087                 count++;
1088         }
1089
1090         if (wndw == NETXEN_WINDOW_ONE)
1091                 adapter->curr_window = 1;
1092         else
1093                 adapter->curr_window = 0;
1094 }
1095
1096 /*
1097  * Return -1 if off is not valid,
1098  *       1 if window access is needed. 'off' is set to offset from
1099  *         CRB space in 128M pci map
1100  *       0 if no window access is needed. 'off' is set to 2M addr
1101  * In: 'off' is offset from base in 128M pci map
1102  */
1103 static int
1104 netxen_nic_pci_get_crb_addr_2M(struct netxen_adapter *adapter, ulong *off)
1105 {
1106         crb_128M_2M_sub_block_map_t *m;
1107
1108
1109         if (*off >= NETXEN_CRB_MAX)
1110                 return -1;
1111
1112         if (*off >= NETXEN_PCI_CAMQM && (*off < NETXEN_PCI_CAMQM_2M_END)) {
1113                 *off = (*off - NETXEN_PCI_CAMQM) + NETXEN_PCI_CAMQM_2M_BASE +
1114                         (ulong)adapter->ahw.pci_base0;
1115                 return 0;
1116         }
1117
1118         if (*off < NETXEN_PCI_CRBSPACE)
1119                 return -1;
1120
1121         *off -= NETXEN_PCI_CRBSPACE;
1122
1123         /*
1124          * Try direct map
1125          */
1126         m = &crb_128M_2M_map[CRB_BLK(*off)].sub_block[CRB_SUBBLK(*off)];
1127
1128         if (m->valid && (m->start_128M <= *off) && (m->end_128M > *off)) {
1129                 *off = *off + m->start_2M - m->start_128M +
1130                         (ulong)adapter->ahw.pci_base0;
1131                 return 0;
1132         }
1133
1134         /*
1135          * Not in direct map, use crb window
1136          */
1137         return 1;
1138 }
1139
1140 /*
1141  * In: 'off' is offset from CRB space in 128M pci map
1142  * Out: 'off' is 2M pci map addr
1143  * side effect: lock crb window
1144  */
1145 static void
1146 netxen_nic_pci_set_crbwindow_2M(struct netxen_adapter *adapter, ulong *off)
1147 {
1148         u32 win_read;
1149
1150         adapter->crb_win = CRB_HI(*off);
1151         writel(adapter->crb_win, (adapter->ahw.pci_base0 + CRB_WINDOW_2M));
1152         /*
1153          * Read back value to make sure write has gone through before trying
1154          * to use it.
1155          */
1156         win_read = readl(adapter->ahw.pci_base0 + CRB_WINDOW_2M);
1157         if (win_read != adapter->crb_win) {
1158                 printk(KERN_ERR "%s: Written crbwin (0x%x) != "
1159                                 "Read crbwin (0x%x), off=0x%lx\n",
1160                                 __func__, adapter->crb_win, win_read, *off);
1161         }
1162         *off = (*off & MASK(16)) + CRB_INDIRECT_2M +
1163                 (ulong)adapter->ahw.pci_base0;
1164 }
1165
1166 static int
1167 netxen_nic_hw_write_wx_128M(struct netxen_adapter *adapter, ulong off, u32 data)
1168 {
1169         unsigned long flags;
1170         void __iomem *addr;
1171
1172         if (ADDR_IN_WINDOW1(off))
1173                 addr = NETXEN_CRB_NORMALIZE(adapter, off);
1174         else
1175                 addr = pci_base_offset(adapter, off);
1176
1177         BUG_ON(!addr);
1178
1179         if (ADDR_IN_WINDOW1(off)) {     /* Window 1 */
1180                 read_lock(&adapter->adapter_lock);
1181                 writel(data, addr);
1182                 read_unlock(&adapter->adapter_lock);
1183         } else {                /* Window 0 */
1184                 write_lock_irqsave(&adapter->adapter_lock, flags);
1185                 addr = pci_base_offset(adapter, off);
1186                 netxen_nic_pci_change_crbwindow_128M(adapter, 0);
1187                 writel(data, addr);
1188                 netxen_nic_pci_change_crbwindow_128M(adapter, 1);
1189                 write_unlock_irqrestore(&adapter->adapter_lock, flags);
1190         }
1191
1192         return 0;
1193 }
1194
1195 static u32
1196 netxen_nic_hw_read_wx_128M(struct netxen_adapter *adapter, ulong off)
1197 {
1198         unsigned long flags;
1199         void __iomem *addr;
1200         u32 data;
1201
1202         if (ADDR_IN_WINDOW1(off))
1203                 addr = NETXEN_CRB_NORMALIZE(adapter, off);
1204         else
1205                 addr = pci_base_offset(adapter, off);
1206
1207         BUG_ON(!addr);
1208
1209         if (ADDR_IN_WINDOW1(off)) {     /* Window 1 */
1210                 read_lock(&adapter->adapter_lock);
1211                 data = readl(addr);
1212                 read_unlock(&adapter->adapter_lock);
1213         } else {                /* Window 0 */
1214                 write_lock_irqsave(&adapter->adapter_lock, flags);
1215                 netxen_nic_pci_change_crbwindow_128M(adapter, 0);
1216                 data = readl(addr);
1217                 netxen_nic_pci_change_crbwindow_128M(adapter, 1);
1218                 write_unlock_irqrestore(&adapter->adapter_lock, flags);
1219         }
1220
1221         return data;
1222 }
1223
1224 static int
1225 netxen_nic_hw_write_wx_2M(struct netxen_adapter *adapter, ulong off, u32 data)
1226 {
1227         unsigned long flags;
1228         int rv;
1229
1230         rv = netxen_nic_pci_get_crb_addr_2M(adapter, &off);
1231
1232         if (rv == -1) {
1233                 printk(KERN_ERR "%s: invalid offset: 0x%016lx\n",
1234                                 __func__, off);
1235                 dump_stack();
1236                 return -1;
1237         }
1238
1239         if (rv == 1) {
1240                 write_lock_irqsave(&adapter->adapter_lock, flags);
1241                 crb_win_lock(adapter);
1242                 netxen_nic_pci_set_crbwindow_2M(adapter, &off);
1243                 writel(data, (void __iomem *)off);
1244                 crb_win_unlock(adapter);
1245                 write_unlock_irqrestore(&adapter->adapter_lock, flags);
1246         } else
1247                 writel(data, (void __iomem *)off);
1248
1249
1250         return 0;
1251 }
1252
1253 static u32
1254 netxen_nic_hw_read_wx_2M(struct netxen_adapter *adapter, ulong off)
1255 {
1256         unsigned long flags;
1257         int rv;
1258         u32 data;
1259
1260         rv = netxen_nic_pci_get_crb_addr_2M(adapter, &off);
1261
1262         if (rv == -1) {
1263                 printk(KERN_ERR "%s: invalid offset: 0x%016lx\n",
1264                                 __func__, off);
1265                 dump_stack();
1266                 return -1;
1267         }
1268
1269         if (rv == 1) {
1270                 write_lock_irqsave(&adapter->adapter_lock, flags);
1271                 crb_win_lock(adapter);
1272                 netxen_nic_pci_set_crbwindow_2M(adapter, &off);
1273                 data = readl((void __iomem *)off);
1274                 crb_win_unlock(adapter);
1275                 write_unlock_irqrestore(&adapter->adapter_lock, flags);
1276         } else
1277                 data = readl((void __iomem *)off);
1278
1279         return data;
1280 }
1281
1282 static int netxen_pci_set_window_warning_count;
1283
1284 static unsigned long
1285 netxen_nic_pci_set_window_128M(struct netxen_adapter *adapter,
1286                 unsigned long long addr)
1287 {
1288         void __iomem *offset;
1289         int window;
1290         unsigned long long      qdr_max;
1291         uint8_t func = adapter->ahw.pci_func;
1292
1293         if (NX_IS_REVISION_P2(adapter->ahw.revision_id)) {
1294                 qdr_max = NETXEN_ADDR_QDR_NET_MAX_P2;
1295         } else {
1296                 qdr_max = NETXEN_ADDR_QDR_NET_MAX_P3;
1297         }
1298
1299         if (ADDR_IN_RANGE(addr, NETXEN_ADDR_DDR_NET, NETXEN_ADDR_DDR_NET_MAX)) {
1300                 /* DDR network side */
1301                 addr -= NETXEN_ADDR_DDR_NET;
1302                 window = (addr >> 25) & 0x3ff;
1303                 if (adapter->ahw.ddr_mn_window != window) {
1304                         adapter->ahw.ddr_mn_window = window;
1305                         offset = PCI_OFFSET_SECOND_RANGE(adapter,
1306                                 NETXEN_PCIX_PH_REG(PCIE_MN_WINDOW_REG(func)));
1307                         writel(window, offset);
1308                         /* MUST make sure window is set before we forge on... */
1309                         readl(offset);
1310                 }
1311                 addr -= (window * NETXEN_WINDOW_ONE);
1312                 addr += NETXEN_PCI_DDR_NET;
1313         } else if (ADDR_IN_RANGE(addr, NETXEN_ADDR_OCM0, NETXEN_ADDR_OCM0_MAX)) {
1314                 addr -= NETXEN_ADDR_OCM0;
1315                 addr += NETXEN_PCI_OCM0;
1316         } else if (ADDR_IN_RANGE(addr, NETXEN_ADDR_OCM1, NETXEN_ADDR_OCM1_MAX)) {
1317                 addr -= NETXEN_ADDR_OCM1;
1318                 addr += NETXEN_PCI_OCM1;
1319         } else if (ADDR_IN_RANGE(addr, NETXEN_ADDR_QDR_NET, qdr_max)) {
1320                 /* QDR network side */
1321                 addr -= NETXEN_ADDR_QDR_NET;
1322                 window = (addr >> 22) & 0x3f;
1323                 if (adapter->ahw.qdr_sn_window != window) {
1324                         adapter->ahw.qdr_sn_window = window;
1325                         offset = PCI_OFFSET_SECOND_RANGE(adapter,
1326                                 NETXEN_PCIX_PH_REG(PCIE_SN_WINDOW_REG(func)));
1327                         writel((window << 22), offset);
1328                         /* MUST make sure window is set before we forge on... */
1329                         readl(offset);
1330                 }
1331                 addr -= (window * 0x400000);
1332                 addr += NETXEN_PCI_QDR_NET;
1333         } else {
1334                 /*
1335                  * peg gdb frequently accesses memory that doesn't exist,
1336                  * this limits the chit chat so debugging isn't slowed down.
1337                  */
1338                 if ((netxen_pci_set_window_warning_count++ < 8)
1339                     || (netxen_pci_set_window_warning_count % 64 == 0))
1340                         printk("%s: Warning:netxen_nic_pci_set_window()"
1341                                " Unknown address range!\n",
1342                                netxen_nic_driver_name);
1343                 addr = -1UL;
1344         }
1345         return addr;
1346 }
1347
1348 /* window 1 registers only */
1349 static void netxen_nic_io_write_128M(struct netxen_adapter *adapter,
1350                 void __iomem *addr, u32 data)
1351 {
1352         read_lock(&adapter->adapter_lock);
1353         writel(data, addr);
1354         read_unlock(&adapter->adapter_lock);
1355 }
1356
1357 static u32 netxen_nic_io_read_128M(struct netxen_adapter *adapter,
1358                 void __iomem *addr)
1359 {
1360         u32 val;
1361
1362         read_lock(&adapter->adapter_lock);
1363         val = readl(addr);
1364         read_unlock(&adapter->adapter_lock);
1365
1366         return val;
1367 }
1368
1369 static void netxen_nic_io_write_2M(struct netxen_adapter *adapter,
1370                 void __iomem *addr, u32 data)
1371 {
1372         writel(data, addr);
1373 }
1374
1375 static u32 netxen_nic_io_read_2M(struct netxen_adapter *adapter,
1376                 void __iomem *addr)
1377 {
1378         return readl(addr);
1379 }
1380
1381 void __iomem *
1382 netxen_get_ioaddr(struct netxen_adapter *adapter, u32 offset)
1383 {
1384         ulong off = offset;
1385
1386         if (NX_IS_REVISION_P2(adapter->ahw.revision_id)) {
1387                 if (offset < NETXEN_CRB_PCIX_HOST2 &&
1388                                 offset > NETXEN_CRB_PCIX_HOST)
1389                         return PCI_OFFSET_SECOND_RANGE(adapter, offset);
1390                 return NETXEN_CRB_NORMALIZE(adapter, offset);
1391         }
1392
1393         BUG_ON(netxen_nic_pci_get_crb_addr_2M(adapter, &off));
1394         return (void __iomem *)off;
1395 }
1396
1397 static unsigned long
1398 netxen_nic_pci_set_window_2M(struct netxen_adapter *adapter,
1399                 unsigned long long addr)
1400 {
1401         int window;
1402         u32 win_read;
1403
1404         if (ADDR_IN_RANGE(addr, NETXEN_ADDR_DDR_NET, NETXEN_ADDR_DDR_NET_MAX)) {
1405                 /* DDR network side */
1406                 window = MN_WIN(addr);
1407                 adapter->ahw.ddr_mn_window = window;
1408                 NXWR32(adapter, adapter->ahw.mn_win_crb, window);
1409                 win_read = NXRD32(adapter, adapter->ahw.mn_win_crb);
1410                 if ((win_read << 17) != window) {
1411                         printk(KERN_INFO "Written MNwin (0x%x) != "
1412                                 "Read MNwin (0x%x)\n", window, win_read);
1413                 }
1414                 addr = GET_MEM_OFFS_2M(addr) + NETXEN_PCI_DDR_NET;
1415         } else if (ADDR_IN_RANGE(addr,
1416                                 NETXEN_ADDR_OCM0, NETXEN_ADDR_OCM0_MAX)) {
1417                 if ((addr & 0x00ff800) == 0xff800) {
1418                         printk("%s: QM access not handled.\n", __func__);
1419                         addr = -1UL;
1420                 }
1421
1422                 window = OCM_WIN(addr);
1423                 adapter->ahw.ddr_mn_window = window;
1424                 NXWR32(adapter, adapter->ahw.mn_win_crb, window);
1425                 win_read = NXRD32(adapter, adapter->ahw.mn_win_crb);
1426                 if ((win_read >> 7) != window) {
1427                         printk(KERN_INFO "%s: Written OCMwin (0x%x) != "
1428                                         "Read OCMwin (0x%x)\n",
1429                                         __func__, window, win_read);
1430                 }
1431                 addr = GET_MEM_OFFS_2M(addr) + NETXEN_PCI_OCM0_2M;
1432
1433         } else if (ADDR_IN_RANGE(addr,
1434                         NETXEN_ADDR_QDR_NET, NETXEN_ADDR_QDR_NET_MAX_P3)) {
1435                 /* QDR network side */
1436                 window = MS_WIN(addr);
1437                 adapter->ahw.qdr_sn_window = window;
1438                 NXWR32(adapter, adapter->ahw.ms_win_crb, window);
1439                 win_read = NXRD32(adapter, adapter->ahw.ms_win_crb);
1440                 if (win_read != window) {
1441                         printk(KERN_INFO "%s: Written MSwin (0x%x) != "
1442                                         "Read MSwin (0x%x)\n",
1443                                         __func__, window, win_read);
1444                 }
1445                 addr = GET_MEM_OFFS_2M(addr) + NETXEN_PCI_QDR_NET;
1446
1447         } else {
1448                 /*
1449                  * peg gdb frequently accesses memory that doesn't exist,
1450                  * this limits the chit chat so debugging isn't slowed down.
1451                  */
1452                 if ((netxen_pci_set_window_warning_count++ < 8)
1453                         || (netxen_pci_set_window_warning_count%64 == 0)) {
1454                         printk("%s: Warning:%s Unknown address range!\n",
1455                                         __func__, netxen_nic_driver_name);
1456 }
1457                 addr = -1UL;
1458         }
1459         return addr;
1460 }
1461
1462 #define MAX_CTL_CHECK   1000
1463
1464 static int
1465 netxen_nic_pci_mem_write_128M(struct netxen_adapter *adapter,
1466                 u64 off, void *data, int size)
1467 {
1468         unsigned long   flags;
1469         int          i, j, ret = 0, loop, sz[2], off0;
1470         uint32_t      temp;
1471         uint64_t      off8, tmpw, word[2] = {0, 0};
1472         void __iomem *mem_crb;
1473
1474         if (size != 8)
1475                 return -EIO;
1476
1477         if (ADDR_IN_RANGE(off, NETXEN_ADDR_QDR_NET,
1478                                 NETXEN_ADDR_QDR_NET_MAX_P2)) {
1479                 mem_crb = pci_base_offset(adapter, NETXEN_CRB_QDR_NET);
1480                 goto correct;
1481         }
1482
1483         if (ADDR_IN_RANGE(off, NETXEN_ADDR_DDR_NET, NETXEN_ADDR_DDR_NET_MAX)) {
1484                 mem_crb = pci_base_offset(adapter, NETXEN_CRB_DDR_NET);
1485                 goto correct;
1486         }
1487
1488         return -EIO;
1489
1490 correct:
1491         off8 = off & 0xfffffff8;
1492         off0 = off & 0x7;
1493         sz[0] = (size < (8 - off0)) ? size : (8 - off0);
1494         sz[1] = size - sz[0];
1495         loop = ((off0 + size - 1) >> 3) + 1;
1496
1497         if ((size != 8) || (off0 != 0))  {
1498                 for (i = 0; i < loop; i++) {
1499                         if (adapter->pci_mem_read(adapter,
1500                                 off8 + (i << 3), &word[i], 8))
1501                                 return -1;
1502                 }
1503         }
1504
1505         switch (size) {
1506         case 1:
1507                 tmpw = *((uint8_t *)data);
1508                 break;
1509         case 2:
1510                 tmpw = *((uint16_t *)data);
1511                 break;
1512         case 4:
1513                 tmpw = *((uint32_t *)data);
1514                 break;
1515         case 8:
1516         default:
1517                 tmpw = *((uint64_t *)data);
1518                 break;
1519         }
1520         word[0] &= ~((~(~0ULL << (sz[0] * 8))) << (off0 * 8));
1521         word[0] |= tmpw << (off0 * 8);
1522
1523         if (loop == 2) {
1524                 word[1] &= ~(~0ULL << (sz[1] * 8));
1525                 word[1] |= tmpw >> (sz[0] * 8);
1526         }
1527
1528         write_lock_irqsave(&adapter->adapter_lock, flags);
1529         netxen_nic_pci_change_crbwindow_128M(adapter, 0);
1530
1531         for (i = 0; i < loop; i++) {
1532                 writel((uint32_t)(off8 + (i << 3)),
1533                         (mem_crb+MIU_TEST_AGT_ADDR_LO));
1534                 writel(0,
1535                         (mem_crb+MIU_TEST_AGT_ADDR_HI));
1536                 writel(word[i] & 0xffffffff,
1537                         (mem_crb+MIU_TEST_AGT_WRDATA_LO));
1538                 writel((word[i] >> 32) & 0xffffffff,
1539                         (mem_crb+MIU_TEST_AGT_WRDATA_HI));
1540                 writel(MIU_TA_CTL_ENABLE|MIU_TA_CTL_WRITE,
1541                         (mem_crb+MIU_TEST_AGT_CTRL));
1542                 writel(MIU_TA_CTL_START|MIU_TA_CTL_ENABLE|MIU_TA_CTL_WRITE,
1543                         (mem_crb+MIU_TEST_AGT_CTRL));
1544
1545                 for (j = 0; j < MAX_CTL_CHECK; j++) {
1546                         temp = readl(
1547                              (mem_crb+MIU_TEST_AGT_CTRL));
1548                         if ((temp & MIU_TA_CTL_BUSY) == 0)
1549                                 break;
1550                 }
1551
1552                 if (j >= MAX_CTL_CHECK) {
1553                         if (printk_ratelimit())
1554                                 dev_err(&adapter->pdev->dev,
1555                                         "failed to write through agent\n");
1556                         ret = -1;
1557                         break;
1558                 }
1559         }
1560
1561         netxen_nic_pci_change_crbwindow_128M(adapter, 1);
1562         write_unlock_irqrestore(&adapter->adapter_lock, flags);
1563         return ret;
1564 }
1565
1566 static int
1567 netxen_nic_pci_mem_read_128M(struct netxen_adapter *adapter,
1568                 u64 off, void *data, int size)
1569 {
1570         unsigned long   flags;
1571         int          i, j = 0, k, start, end, loop, sz[2], off0[2];
1572         uint32_t      temp;
1573         uint64_t      off8, val, word[2] = {0, 0};
1574         void __iomem *mem_crb;
1575
1576         if (size != 8)
1577                 return -EIO;
1578
1579         if (ADDR_IN_RANGE(off, NETXEN_ADDR_QDR_NET,
1580                                 NETXEN_ADDR_QDR_NET_MAX_P2)) {
1581                 mem_crb = pci_base_offset(adapter, NETXEN_CRB_QDR_NET);
1582                 goto correct;
1583         }
1584
1585         if (ADDR_IN_RANGE(off, NETXEN_ADDR_DDR_NET, NETXEN_ADDR_DDR_NET_MAX)) {
1586                 mem_crb = pci_base_offset(adapter, NETXEN_CRB_DDR_NET);
1587                 goto correct;
1588         }
1589
1590         return -EIO;
1591
1592 correct:
1593         off8 = off & 0xfffffff8;
1594         off0[0] = off & 0x7;
1595         off0[1] = 0;
1596         sz[0] = (size < (8 - off0[0])) ? size : (8 - off0[0]);
1597         sz[1] = size - sz[0];
1598         loop = ((off0[0] + size - 1) >> 3) + 1;
1599
1600         write_lock_irqsave(&adapter->adapter_lock, flags);
1601         netxen_nic_pci_change_crbwindow_128M(adapter, 0);
1602
1603         for (i = 0; i < loop; i++) {
1604                 writel((uint32_t)(off8 + (i << 3)),
1605                         (mem_crb+MIU_TEST_AGT_ADDR_LO));
1606                 writel(0,
1607                         (mem_crb+MIU_TEST_AGT_ADDR_HI));
1608                 writel(MIU_TA_CTL_ENABLE,
1609                         (mem_crb+MIU_TEST_AGT_CTRL));
1610                 writel(MIU_TA_CTL_START|MIU_TA_CTL_ENABLE,
1611                         (mem_crb+MIU_TEST_AGT_CTRL));
1612
1613                 for (j = 0; j < MAX_CTL_CHECK; j++) {
1614                         temp = readl(
1615                               (mem_crb+MIU_TEST_AGT_CTRL));
1616                         if ((temp & MIU_TA_CTL_BUSY) == 0)
1617                                 break;
1618                 }
1619
1620                 if (j >= MAX_CTL_CHECK) {
1621                         if (printk_ratelimit())
1622                                 dev_err(&adapter->pdev->dev,
1623                                         "failed to read through agent\n");
1624                         break;
1625                 }
1626
1627                 start = off0[i] >> 2;
1628                 end   = (off0[i] + sz[i] - 1) >> 2;
1629                 for (k = start; k <= end; k++) {
1630                         word[i] |= ((uint64_t) readl(
1631                                     (mem_crb +
1632                                     MIU_TEST_AGT_RDDATA(k))) << (32*k));
1633                 }
1634         }
1635
1636         netxen_nic_pci_change_crbwindow_128M(adapter, 1);
1637         write_unlock_irqrestore(&adapter->adapter_lock, flags);
1638
1639         if (j >= MAX_CTL_CHECK)
1640                 return -1;
1641
1642         if (sz[0] == 8) {
1643                 val = word[0];
1644         } else {
1645                 val = ((word[0] >> (off0[0] * 8)) & (~(~0ULL << (sz[0] * 8)))) |
1646                         ((word[1] & (~(~0ULL << (sz[1] * 8)))) << (sz[0] * 8));
1647         }
1648
1649         switch (size) {
1650         case 1:
1651                 *(uint8_t  *)data = val;
1652                 break;
1653         case 2:
1654                 *(uint16_t *)data = val;
1655                 break;
1656         case 4:
1657                 *(uint32_t *)data = val;
1658                 break;
1659         case 8:
1660                 *(uint64_t *)data = val;
1661                 break;
1662         }
1663         return 0;
1664 }
1665
1666 static int
1667 netxen_nic_pci_mem_write_2M(struct netxen_adapter *adapter,
1668                 u64 off, void *data, int size)
1669 {
1670         int i, j, ret = 0, loop, sz[2], off0;
1671         uint32_t temp;
1672         uint64_t off8, tmpw, word[2] = {0, 0};
1673         void __iomem *mem_crb;
1674
1675         if (size != 8)
1676                 return -EIO;
1677
1678         if (ADDR_IN_RANGE(off, NETXEN_ADDR_QDR_NET,
1679                                 NETXEN_ADDR_QDR_NET_MAX_P3)) {
1680                 mem_crb = netxen_get_ioaddr(adapter, NETXEN_CRB_QDR_NET);
1681                 goto correct;
1682         }
1683
1684         if (ADDR_IN_RANGE(off, NETXEN_ADDR_DDR_NET, NETXEN_ADDR_DDR_NET_MAX)) {
1685                 mem_crb = netxen_get_ioaddr(adapter, NETXEN_CRB_DDR_NET);
1686                 goto correct;
1687         }
1688
1689         return -EIO;
1690
1691 correct:
1692         off8 = off & 0xfffffff8;
1693         off0 = off & 0x7;
1694         sz[0] = (size < (8 - off0)) ? size : (8 - off0);
1695         sz[1] = size - sz[0];
1696         loop = ((off0 + size - 1) >> 3) + 1;
1697
1698         if ((size != 8) || (off0 != 0)) {
1699                 for (i = 0; i < loop; i++) {
1700                         if (adapter->pci_mem_read(adapter,
1701                                         off8 + (i << 3), &word[i], 8))
1702                                 return -1;
1703                 }
1704         }
1705
1706         switch (size) {
1707         case 1:
1708                 tmpw = *((uint8_t *)data);
1709                 break;
1710         case 2:
1711                 tmpw = *((uint16_t *)data);
1712                 break;
1713         case 4:
1714                 tmpw = *((uint32_t *)data);
1715                 break;
1716         case 8:
1717         default:
1718                 tmpw = *((uint64_t *)data);
1719         break;
1720         }
1721
1722         word[0] &= ~((~(~0ULL << (sz[0] * 8))) << (off0 * 8));
1723         word[0] |= tmpw << (off0 * 8);
1724
1725         if (loop == 2) {
1726                 word[1] &= ~(~0ULL << (sz[1] * 8));
1727                 word[1] |= tmpw >> (sz[0] * 8);
1728         }
1729
1730         /*
1731          * don't lock here - write_wx gets the lock if each time
1732          * write_lock_irqsave(&adapter->adapter_lock, flags);
1733          * netxen_nic_pci_change_crbwindow_128M(adapter, 0);
1734          */
1735
1736         for (i = 0; i < loop; i++) {
1737                 writel(off8 + (i << 3), mem_crb+MIU_TEST_AGT_ADDR_LO);
1738                 writel(0, mem_crb+MIU_TEST_AGT_ADDR_HI);
1739                 writel(word[i] & 0xffffffff, mem_crb+MIU_TEST_AGT_WRDATA_LO);
1740                 writel((word[i] >> 32) & 0xffffffff,
1741                                 mem_crb+MIU_TEST_AGT_WRDATA_HI);
1742                 writel((MIU_TA_CTL_ENABLE | MIU_TA_CTL_WRITE),
1743                                 mem_crb+MIU_TEST_AGT_CTRL);
1744                 writel(MIU_TA_CTL_START | MIU_TA_CTL_ENABLE | MIU_TA_CTL_WRITE,
1745                                 mem_crb+MIU_TEST_AGT_CTRL);
1746
1747                 for (j = 0; j < MAX_CTL_CHECK; j++) {
1748                         temp = readl(mem_crb + MIU_TEST_AGT_CTRL);
1749                         if ((temp & MIU_TA_CTL_BUSY) == 0)
1750                                 break;
1751                 }
1752
1753                 if (j >= MAX_CTL_CHECK) {
1754                         if (printk_ratelimit())
1755                                 dev_err(&adapter->pdev->dev,
1756                                         "failed to write through agent\n");
1757                         ret = -1;
1758                         break;
1759                 }
1760         }
1761
1762         /*
1763          * netxen_nic_pci_change_crbwindow_128M(adapter, 1);
1764          * write_unlock_irqrestore(&adapter->adapter_lock, flags);
1765          */
1766         return ret;
1767 }
1768
1769 static int
1770 netxen_nic_pci_mem_read_2M(struct netxen_adapter *adapter,
1771                 u64 off, void *data, int size)
1772 {
1773         int i, j = 0, k, start, end, loop, sz[2], off0[2];
1774         uint32_t      temp;
1775         uint64_t      off8, val, word[2] = {0, 0};
1776         void __iomem *mem_crb;
1777
1778         if (size != 8)
1779                 return -EIO;
1780
1781         if (ADDR_IN_RANGE(off, NETXEN_ADDR_QDR_NET,
1782                                 NETXEN_ADDR_QDR_NET_MAX_P3)) {
1783                 mem_crb = netxen_get_ioaddr(adapter, NETXEN_CRB_QDR_NET);
1784                 goto correct;
1785         }
1786
1787         if (ADDR_IN_RANGE(off, NETXEN_ADDR_DDR_NET, NETXEN_ADDR_DDR_NET_MAX)) {
1788                 mem_crb = netxen_get_ioaddr(adapter, NETXEN_CRB_DDR_NET);
1789                 goto correct;
1790         }
1791
1792         return -EIO;
1793
1794 correct:
1795         off8 = off & 0xfffffff8;
1796         off0[0] = off & 0x7;
1797         off0[1] = 0;
1798         sz[0] = (size < (8 - off0[0])) ? size : (8 - off0[0]);
1799         sz[1] = size - sz[0];
1800         loop = ((off0[0] + size - 1) >> 3) + 1;
1801
1802         /*
1803          * don't lock here - write_wx gets the lock if each time
1804          * write_lock_irqsave(&adapter->adapter_lock, flags);
1805          * netxen_nic_pci_change_crbwindow_128M(adapter, 0);
1806          */
1807
1808         for (i = 0; i < loop; i++) {
1809                 writel(off8 + (i << 3), mem_crb + MIU_TEST_AGT_ADDR_LO);
1810                 writel(0, mem_crb + MIU_TEST_AGT_ADDR_HI);
1811                 writel(MIU_TA_CTL_ENABLE, mem_crb + MIU_TEST_AGT_CTRL);
1812                 writel(MIU_TA_CTL_START | MIU_TA_CTL_ENABLE,
1813                                 mem_crb + MIU_TEST_AGT_CTRL);
1814
1815                 for (j = 0; j < MAX_CTL_CHECK; j++) {
1816                         temp = readl(mem_crb + MIU_TEST_AGT_CTRL);
1817                         if ((temp & MIU_TA_CTL_BUSY) == 0)
1818                                 break;
1819                 }
1820
1821                 if (j >= MAX_CTL_CHECK) {
1822                         if (printk_ratelimit())
1823                                 dev_err(&adapter->pdev->dev,
1824                                         "failed to read through agent\n");
1825                         break;
1826                 }
1827
1828                 start = off0[i] >> 2;
1829                 end   = (off0[i] + sz[i] - 1) >> 2;
1830                 for (k = start; k <= end; k++) {
1831                         temp = readl(mem_crb + MIU_TEST_AGT_RDDATA(k));
1832                         word[i] |= ((uint64_t)temp << (32 * k));
1833                 }
1834         }
1835
1836         /*
1837          * netxen_nic_pci_change_crbwindow_128M(adapter, 1);
1838          * write_unlock_irqrestore(&adapter->adapter_lock, flags);
1839          */
1840
1841         if (j >= MAX_CTL_CHECK)
1842                 return -1;
1843
1844         if (sz[0] == 8) {
1845                 val = word[0];
1846         } else {
1847                 val = ((word[0] >> (off0[0] * 8)) & (~(~0ULL << (sz[0] * 8)))) |
1848                 ((word[1] & (~(~0ULL << (sz[1] * 8)))) << (sz[0] * 8));
1849         }
1850
1851         switch (size) {
1852         case 1:
1853                 *(uint8_t  *)data = val;
1854                 break;
1855         case 2:
1856                 *(uint16_t *)data = val;
1857                 break;
1858         case 4:
1859                 *(uint32_t *)data = val;
1860                 break;
1861         case 8:
1862                 *(uint64_t *)data = val;
1863                 break;
1864         }
1865         return 0;
1866 }
1867
1868 void
1869 netxen_setup_hwops(struct netxen_adapter *adapter)
1870 {
1871         adapter->init_port = netxen_niu_xg_init_port;
1872         adapter->stop_port = netxen_niu_disable_xg_port;
1873
1874         if (NX_IS_REVISION_P2(adapter->ahw.revision_id)) {
1875                 adapter->crb_read = netxen_nic_hw_read_wx_128M,
1876                 adapter->crb_write = netxen_nic_hw_write_wx_128M,
1877                 adapter->pci_set_window = netxen_nic_pci_set_window_128M,
1878                 adapter->pci_mem_read = netxen_nic_pci_mem_read_128M,
1879                 adapter->pci_mem_write = netxen_nic_pci_mem_write_128M,
1880                 adapter->io_read = netxen_nic_io_read_128M,
1881                 adapter->io_write = netxen_nic_io_write_128M,
1882
1883                 adapter->macaddr_set = netxen_p2_nic_set_mac_addr;
1884                 adapter->set_multi = netxen_p2_nic_set_multi;
1885                 adapter->set_mtu = netxen_nic_set_mtu_xgb;
1886                 adapter->set_promisc = netxen_p2_nic_set_promisc;
1887
1888         } else {
1889                 adapter->crb_read = netxen_nic_hw_read_wx_2M,
1890                 adapter->crb_write = netxen_nic_hw_write_wx_2M,
1891                 adapter->pci_set_window = netxen_nic_pci_set_window_2M,
1892                 adapter->pci_mem_read = netxen_nic_pci_mem_read_2M,
1893                 adapter->pci_mem_write = netxen_nic_pci_mem_write_2M,
1894                 adapter->io_read = netxen_nic_io_read_2M,
1895                 adapter->io_write = netxen_nic_io_write_2M,
1896
1897                 adapter->set_mtu = nx_fw_cmd_set_mtu;
1898                 adapter->set_promisc = netxen_p3_nic_set_promisc;
1899                 adapter->macaddr_set = netxen_p3_nic_set_mac_addr;
1900                 adapter->set_multi = netxen_p3_nic_set_multi;
1901
1902                 adapter->phy_read = nx_fw_cmd_query_phy;
1903                 adapter->phy_write = nx_fw_cmd_set_phy;
1904         }
1905 }
1906
1907 int netxen_nic_get_board_info(struct netxen_adapter *adapter)
1908 {
1909         int offset, board_type, magic, header_version;
1910         struct pci_dev *pdev = adapter->pdev;
1911
1912         offset = NX_FW_MAGIC_OFFSET;
1913         if (netxen_rom_fast_read(adapter, offset, &magic))
1914                 return -EIO;
1915
1916         offset = NX_HDR_VERSION_OFFSET;
1917         if (netxen_rom_fast_read(adapter, offset, &header_version))
1918                 return -EIO;
1919
1920         if (magic != NETXEN_BDINFO_MAGIC ||
1921                         header_version != NETXEN_BDINFO_VERSION) {
1922                 dev_err(&pdev->dev,
1923                         "invalid board config, magic=%08x, version=%08x\n",
1924                         magic, header_version);
1925                 return -EIO;
1926         }
1927
1928         offset = NX_BRDTYPE_OFFSET;
1929         if (netxen_rom_fast_read(adapter, offset, &board_type))
1930                 return -EIO;
1931
1932         adapter->ahw.board_type = board_type;
1933
1934         if (board_type == NETXEN_BRDTYPE_P3_4_GB_MM) {
1935                 u32 gpio = NXRD32(adapter, NETXEN_ROMUSB_GLB_PAD_GPIO_I);
1936                 if ((gpio & 0x8000) == 0)
1937                         board_type = NETXEN_BRDTYPE_P3_10G_TP;
1938         }
1939
1940         switch (board_type) {
1941         case NETXEN_BRDTYPE_P2_SB35_4G:
1942                 adapter->ahw.port_type = NETXEN_NIC_GBE;
1943                 break;
1944         case NETXEN_BRDTYPE_P2_SB31_10G:
1945         case NETXEN_BRDTYPE_P2_SB31_10G_IMEZ:
1946         case NETXEN_BRDTYPE_P2_SB31_10G_HMEZ:
1947         case NETXEN_BRDTYPE_P2_SB31_10G_CX4:
1948         case NETXEN_BRDTYPE_P3_HMEZ:
1949         case NETXEN_BRDTYPE_P3_XG_LOM:
1950         case NETXEN_BRDTYPE_P3_10G_CX4:
1951         case NETXEN_BRDTYPE_P3_10G_CX4_LP:
1952         case NETXEN_BRDTYPE_P3_IMEZ:
1953         case NETXEN_BRDTYPE_P3_10G_SFP_PLUS:
1954         case NETXEN_BRDTYPE_P3_10G_SFP_CT:
1955         case NETXEN_BRDTYPE_P3_10G_SFP_QT:
1956         case NETXEN_BRDTYPE_P3_10G_XFP:
1957         case NETXEN_BRDTYPE_P3_10000_BASE_T:
1958                 adapter->ahw.port_type = NETXEN_NIC_XGBE;
1959                 break;
1960         case NETXEN_BRDTYPE_P1_BD:
1961         case NETXEN_BRDTYPE_P1_SB:
1962         case NETXEN_BRDTYPE_P1_SMAX:
1963         case NETXEN_BRDTYPE_P1_SOCK:
1964         case NETXEN_BRDTYPE_P3_REF_QG:
1965         case NETXEN_BRDTYPE_P3_4_GB:
1966         case NETXEN_BRDTYPE_P3_4_GB_MM:
1967                 adapter->ahw.port_type = NETXEN_NIC_GBE;
1968                 break;
1969         case NETXEN_BRDTYPE_P3_10G_TP:
1970                 adapter->ahw.port_type = (adapter->portnum < 2) ?
1971                         NETXEN_NIC_XGBE : NETXEN_NIC_GBE;
1972                 break;
1973         default:
1974                 dev_err(&pdev->dev, "unknown board type %x\n", board_type);
1975                 adapter->ahw.port_type = NETXEN_NIC_XGBE;
1976                 break;
1977         }
1978
1979         return 0;
1980 }
1981
1982 /* NIU access sections */
1983
1984 int netxen_nic_set_mtu_gb(struct netxen_adapter *adapter, int new_mtu)
1985 {
1986         new_mtu += MTU_FUDGE_FACTOR;
1987         NXWR32(adapter, NETXEN_NIU_GB_MAX_FRAME_SIZE(adapter->physical_port),
1988                 new_mtu);
1989         return 0;
1990 }
1991
1992 int netxen_nic_set_mtu_xgb(struct netxen_adapter *adapter, int new_mtu)
1993 {
1994         new_mtu += MTU_FUDGE_FACTOR;
1995         if (adapter->physical_port == 0)
1996                 NXWR32(adapter, NETXEN_NIU_XGE_MAX_FRAME_SIZE, new_mtu);
1997         else
1998                 NXWR32(adapter, NETXEN_NIU_XG1_MAX_FRAME_SIZE, new_mtu);
1999         return 0;
2000 }
2001
2002 void netxen_nic_set_link_parameters(struct netxen_adapter *adapter)
2003 {
2004         __u32 status;
2005         __u32 autoneg;
2006         __u32 port_mode;
2007
2008         if (!netif_carrier_ok(adapter->netdev)) {
2009                 adapter->link_speed   = 0;
2010                 adapter->link_duplex  = -1;
2011                 adapter->link_autoneg = AUTONEG_ENABLE;
2012                 return;
2013         }
2014
2015         if (adapter->ahw.port_type == NETXEN_NIC_GBE) {
2016                 port_mode = NXRD32(adapter, NETXEN_PORT_MODE_ADDR);
2017                 if (port_mode == NETXEN_PORT_MODE_802_3_AP) {
2018                         adapter->link_speed   = SPEED_1000;
2019                         adapter->link_duplex  = DUPLEX_FULL;
2020                         adapter->link_autoneg = AUTONEG_DISABLE;
2021                         return;
2022                 }
2023
2024                 if (adapter->phy_read
2025                     && adapter->phy_read(adapter,
2026                              NETXEN_NIU_GB_MII_MGMT_ADDR_PHY_STATUS,
2027                              &status) == 0) {
2028                         if (netxen_get_phy_link(status)) {
2029                                 switch (netxen_get_phy_speed(status)) {
2030                                 case 0:
2031                                         adapter->link_speed = SPEED_10;
2032                                         break;
2033                                 case 1:
2034                                         adapter->link_speed = SPEED_100;
2035                                         break;
2036                                 case 2:
2037                                         adapter->link_speed = SPEED_1000;
2038                                         break;
2039                                 default:
2040                                         adapter->link_speed = 0;
2041                                         break;
2042                                 }
2043                                 switch (netxen_get_phy_duplex(status)) {
2044                                 case 0:
2045                                         adapter->link_duplex = DUPLEX_HALF;
2046                                         break;
2047                                 case 1:
2048                                         adapter->link_duplex = DUPLEX_FULL;
2049                                         break;
2050                                 default:
2051                                         adapter->link_duplex = -1;
2052                                         break;
2053                                 }
2054                                 if (adapter->phy_read
2055                                     && adapter->phy_read(adapter,
2056                                              NETXEN_NIU_GB_MII_MGMT_ADDR_AUTONEG,
2057                                              &autoneg) != 0)
2058                                         adapter->link_autoneg = autoneg;
2059                         } else
2060                                 goto link_down;
2061                 } else {
2062                       link_down:
2063                         adapter->link_speed = 0;
2064                         adapter->link_duplex = -1;
2065                 }
2066         }
2067 }
2068
2069 int
2070 netxen_nic_wol_supported(struct netxen_adapter *adapter)
2071 {
2072         u32 wol_cfg;
2073
2074         if (NX_IS_REVISION_P2(adapter->ahw.revision_id))
2075                 return 0;
2076
2077         wol_cfg = NXRD32(adapter, NETXEN_WOL_CONFIG_NV);
2078         if (wol_cfg & (1UL << adapter->portnum)) {
2079                 wol_cfg = NXRD32(adapter, NETXEN_WOL_CONFIG);
2080                 if (wol_cfg & (1 << adapter->portnum))
2081                         return 1;
2082         }
2083
2084         return 0;
2085 }