source: XIOS/dev/branch_yushan_merged/src/test/test_remap_omp.f90 @ 1141

Last change on this file since 1141 was 1141, checked in by yushan, 4 years ago

adding test_remap_omp

  • Property svn:executable set to *
File size: 9.3 KB
Line 
1PROGRAM test_remap_omp
2
3  USE xios
4  USE mod_wait
5  use omp_lib
6  USE netcdf
7
8  IMPLICIT NONE
9  INCLUDE "mpif.h"
10  INTEGER :: rank
11  INTEGER :: size
12  INTEGER :: ierr
13
14  CHARACTER(len=*),PARAMETER :: id="client"
15  INTEGER :: comm
16  TYPE(xios_duration) :: dtime
17  TYPE(xios_context) :: ctx_hdl
18
19  DOUBLE PRECISION,ALLOCATABLE :: src_lon(:), dst_lon(:), src_lon_tmp(:)
20  DOUBLE PRECISION,ALLOCATABLE :: src_lat(:), dst_lat(:), src_lat_tmp(:)
21  DOUBLE PRECISION,ALLOCATABLE :: src_boundslon(:,:), dst_boundslon(:,:)
22  DOUBLE PRECISION,ALLOCATABLE :: src_boundslat(:,:), dst_boundslat(:,:)
23  DOUBLE PRECISION,ALLOCATABLE :: src_field_2D(:), src_field_2D_clone(:)
24  DOUBLE PRECISION,ALLOCATABLE :: tmp_field_0(:), tmp_field_1(:), tmp_field_2(:)
25  DOUBLE PRECISION,ALLOCATABLE :: src_field_3D(:,:), src_field_4D(:,:,:), lval(:), lval1(:), lval2(:), src_field_pression(:,:)
26  LOGICAL,ALLOCATABLE :: src_mask_2D(:)
27  INTEGER :: src_ni_glo, dst_ni_glo;
28  INTEGER :: src_nvertex, dst_nvertex;
29  INTEGER :: src_ibegin, dst_ibegin;
30  INTEGER :: src_ni, dst_ni;
31  INTEGER :: src_tmp_ni, src_tmp_nj, src_tmp_n;
32  CHARACTER(LEN=*),PARAMETER :: src_file="h14.nc"
33  CHARACTER(LEN=*),PARAMETER :: dst_file="r180x90.nc"
34  INTEGER :: ncid
35  INTEGER :: dimids(2)
36  INTEGER :: div,remain
37  INTEGER :: varid
38  INTEGER :: ts
39  INTEGER :: i,j, provided
40  INTEGER,PARAMETER :: llm=5, interpolatedLlm = 4, llm2 = 6
41  DOUBLE PRECISION, PARAMETER :: missing_value = 100000
42
43    CALL MPI_INIT_THREAD(3, provided, ierr)
44    if(provided .NE. 3) then
45      print*, "provided thread level = ", provided
46      call MPI_Abort()
47    endif
48  CALL init_wait
49 
50  CALL MPI_COMM_RANK(MPI_COMM_WORLD,rank,ierr)
51  CALL MPI_COMM_SIZE(MPI_COMM_WORLD,size,ierr)
52  if(rank < size-2) then
53
54  !$omp parallel default(private)
55
56!!! XIOS Initialization (get the local communicator)
57
58  CALL xios_initialize(id,return_comm=comm)
59  CALL MPI_COMM_RANK(comm,rank,ierr)
60  CALL MPI_COMM_SIZE(comm,size,ierr)
61
62  ierr=NF90_OPEN(src_file, NF90_NOWRITE, ncid)
63  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
64  ierr=NF90_INQUIRE_VARIABLE(ncid, varid,dimids=dimids)
65  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(1), len=src_nvertex)
66  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(2), len=src_ni_glo)
67
68  div    = src_ni_glo/size
69  remain = MOD( src_ni_glo, size )
70  IF (rank < remain) THEN
71    src_ni=div+1 ;
72    src_ibegin=rank*(div+1) ;
73  ELSE
74    src_ni=div ;
75    src_ibegin= remain * (div+1) + (rank-remain) * div ;
76  ENDIF
77
78  ALLOCATE(src_lon(src_ni), src_lon_tmp(src_ni))
79  ALLOCATE(src_lat(src_ni), src_lat_tmp(src_ni))
80  ALLOCATE(src_boundslon(src_nvertex,src_ni))
81  ALLOCATE(src_boundslat(src_nvertex,src_ni))
82  ALLOCATE(src_field_2D(src_ni), src_field_2D_clone(src_ni))
83  ALLOCATE(src_field_3D(src_ni,llm))
84  ALLOCATE(src_field_4D(src_ni,llm,llm2))
85  ALLOCATE(src_mask_2D(src_ni))
86  ALLOCATE(src_field_pression(src_ni,llm))
87  ALLOCATE(lval(llm))
88  ALLOCATE(lval1(interpolatedLlm))
89  ALLOCATE(lval2(llm2))
90
91  ierr=NF90_INQ_VARID(ncid,"lon",varid)
92  ierr=NF90_GET_VAR(ncid,varid, src_lon, start=(/src_ibegin+1/),count=(/src_ni/))
93  ierr=NF90_INQ_VARID(ncid,"lat",varid)
94  ierr=NF90_GET_VAR(ncid,varid, src_lat, start=(/src_ibegin+1/),count=(/src_ni/))
95  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
96  ierr=NF90_GET_VAR(ncid,varid,src_boundslon, start=(/1,src_ibegin+1/),count=(/src_nvertex,src_ni/))
97  ierr=NF90_INQ_VARID(ncid,"bounds_lat",varid)
98  ierr=NF90_GET_VAR(ncid,varid, src_boundslat, start=(/1,src_ibegin+1/),count=(/src_nvertex,src_ni/))
99  ierr=NF90_INQ_VARID(ncid,"val",varid)
100  ierr=NF90_GET_VAR(ncid,varid, src_field_2D, start=(/src_ibegin+1/),count=(/src_ni/))
101  DO i=1,src_ni
102    src_field_3D(i,:) = src_field_2D(i)
103    IF ((0 < src_lat(i)) .AND. (src_lat(i) < 25.5) .AND. (30 < src_lon(i)) .AND. (src_lon(i) < 60)) THEN
104      src_mask_2D(i)=.FALSE.
105      ! src_field_2D(i) = missing_value
106    ELSE
107      src_mask_2D(i)=.TRUE.     
108    ENDIF
109    src_lon_tmp(i) = src_lon(i) + 1000
110    src_lat_tmp(i) = src_lat(i) + 10000
111  ENDDO
112  src_field_2D_clone = src_field_2D
113
114  DO i=1,llm
115    lval(i) = i*100
116    src_field_pression(:,i) = i * 100
117    IF (MOD(i,3)==0) THEN
118      ! src_field_pression(:,i) = missing_value
119      src_field_3D(:,i) = missing_value
120    ELSE
121      ! src_field_pression(:,i) = i * 100
122      src_field_3D(:,i) = src_field_3D(:,i) + i * 10 
123    ENDIF
124    ! src_field_3D(:,i) = src_field_3D(:,i) + i * 10   
125  ENDDO
126
127  DO i=1,llm2
128    src_field_4D(:,:,i) = src_field_3D(:,:) + i * 100
129  ENDDO
130
131  DO i=1,interpolatedLlm
132    lval2(i) = i*10
133    lval1(i) = i*10 + 2
134  ENDDO
135
136  ierr=NF90_OPEN(dst_file, NF90_NOWRITE, ncid)
137  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
138  ierr=NF90_INQUIRE_VARIABLE(ncid, varid,dimids=dimids)
139  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(1), len=dst_nvertex)
140  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(2), len=dst_ni_glo)
141
142  div    = dst_ni_glo/size
143  remain = MOD( dst_ni_glo, size )
144  IF (rank < remain) THEN
145    dst_ni=div+1 ;
146    dst_ibegin=rank*(div+1) ;
147  ELSE
148    dst_ni=div ;
149    dst_ibegin= remain * (div+1) + (rank-remain) * div ;
150  ENDIF
151
152  ALLOCATE(dst_lon(dst_ni))
153  ALLOCATE(dst_lat(dst_ni))
154  ALLOCATE(dst_boundslon(dst_nvertex,dst_ni))
155  ALLOCATE(dst_boundslat(dst_nvertex,dst_ni))
156
157  ierr=NF90_INQ_VARID(ncid,"lon",varid)
158  ierr=NF90_GET_VAR(ncid,varid, dst_lon, start=(/dst_ibegin+1/),count=(/dst_ni/))
159  ierr=NF90_INQ_VARID(ncid,"lat",varid)
160  ierr=NF90_GET_VAR(ncid,varid, dst_lat, start=(/dst_ibegin+1/),count=(/dst_ni/))
161  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
162  ierr=NF90_GET_VAR(ncid,varid,dst_boundslon, start=(/1,dst_ibegin+1/),count=(/dst_nvertex,dst_ni/))
163  ierr=NF90_INQ_VARID(ncid,"bounds_lat",varid)
164  ierr=NF90_GET_VAR(ncid,varid, dst_boundslat, start=(/1,dst_ibegin+1/),count=(/dst_nvertex,dst_ni/))
165
166
167  CALL xios_context_initialize("test",comm)
168  CALL xios_get_handle("test",ctx_hdl)
169  CALL xios_set_current_context(ctx_hdl)
170
171  CALL xios_set_domain_attr("src_domain", ni_glo=src_ni_glo, ibegin=src_ibegin, ni=src_ni, type="unstructured")
172  CALL xios_set_domain_attr("src_domain", lonvalue_1D=src_lon, latvalue_1D=src_lat, &
173                            bounds_lon_1D=src_boundslon, bounds_lat_1D=src_boundslat, nvertex=src_nvertex)
174
175  CALL xios_set_domain_attr("src_domain_clone", ni_glo=src_ni_glo, ibegin=src_ibegin, ni=src_ni, type="unstructured")
176  CALL xios_set_domain_attr("src_domain_clone", lonvalue_1D=src_lon, latvalue_1D=src_lat, &
177                            bounds_lon_1D=src_boundslon, bounds_lat_1D=src_boundslat, nvertex=src_nvertex, &
178                            mask_1d=src_mask_2D)
179
180  CALL xios_set_axis_attr("src_axis", n_glo=llm, value=lval)
181  CALL xios_set_axis_attr("nq", n_glo=llm2, value=lval2)
182
183  CALL xios_set_domain_attr("dst_domain", ni_glo=dst_ni_glo, ibegin=dst_ibegin, ni=dst_ni, type="unstructured")
184  CALL xios_set_domain_attr("dst_domain", lonvalue_1D=dst_lon, latvalue_1D=dst_lat, &
185                            bounds_lon_1D=dst_boundslon, bounds_lat_1D=dst_boundslat, nvertex=dst_nvertex)
186
187  CALL xios_set_domain_attr("src_domain_unstructured_read", ni_glo=src_ni_glo, ibegin=src_ibegin, ni=src_ni, type="unstructured")
188  CALL xios_set_domain_attr("src_domain_unstructured_read", lonvalue_1D=src_lon_tmp, latvalue_1D=src_lat_tmp, &
189                            bounds_lon_1D=src_boundslon, bounds_lat_1D=src_boundslat, nvertex=src_nvertex)
190
191
192  dtime%second = 3600
193 
194  CALL xios_set_timestep(dtime)
195
196  CALL xios_close_context_definition()
197  CALL xios_get_domain_attr("src_domain_regular_read", ni=src_tmp_ni, nj=src_tmp_nj)
198  ALLOCATE(tmp_field_0(src_tmp_ni*src_tmp_nj))
199
200  CALL xios_get_axis_attr("src_axis_curvilinear_read", n=src_tmp_n)
201  CALL xios_get_domain_attr("src_domain_curvilinear_read", ni=src_tmp_ni, nj=src_tmp_nj)
202  ALLOCATE(tmp_field_1(src_tmp_ni*src_tmp_nj*src_tmp_n))
203
204  CALL xios_get_domain_attr("src_domain_unstructured_read", ni=src_tmp_ni, nj=src_tmp_nj)
205  ALLOCATE(tmp_field_2(src_tmp_ni*src_tmp_nj))
206 
207  CALL xios_recv_field("src_field_regular", tmp_field_0)
208  CALL xios_recv_field("src_field_curvilinear", tmp_field_1)
209  CALL xios_recv_field("src_field_unstructured", tmp_field_2)
210
211  DO ts=1,10
212    CALL xios_update_calendar(ts)
213    CALL xios_send_field("src_field_2D",src_field_2D)
214   
215    DO i=1,src_ni
216      src_field_2D_clone(i) = src_field_2D(i)
217      IF ((23.5 * ts < src_lat(i)) .AND. (src_lat(i) < 65.5 *ts) .AND. (0 < src_lon(i)) .AND. (src_lon(i) < 30*ts)) THEN     
218        src_field_2D_clone(i) = missing_value   
219      ENDIF
220    ENDDO
221
222    CALL xios_send_field("src_field_2D_clone",src_field_2D_clone)
223    CALL xios_send_field("src_field_3D",src_field_3D)
224    CALL xios_send_field("src_field_3D_clone",src_field_3D)
225    CALL xios_send_field("src_field_4D",src_field_4D)
226    CALL xios_send_field("src_field_3D_pression",src_field_pression)
227    CALL xios_send_field("tmp_field_0",tmp_field_0)
228    CALL xios_send_field("tmp_field_1",tmp_field_1)
229    CALL xios_send_field("tmp_field_2",tmp_field_2)
230    CALL wait_us(5000) ;
231   ENDDO
232
233  CALL xios_context_finalize()
234
235  DEALLOCATE(src_lon, src_lat, src_boundslon,src_boundslat, src_field_2D)
236  DEALLOCATE(dst_lon, dst_lat, dst_boundslon,dst_boundslat)
237  DEALLOCATE(tmp_field_0, tmp_field_1, tmp_field_2)
238
239 
240
241  CALL xios_finalize()
242 
243  print *, "Client : xios_finalize "
244
245  !$omp barrier
246
247  !$omp master
248  CALL MPI_COMM_FREE(comm, ierr)
249  !$omp end master
250
251  !$omp barrier
252
253  !$omp end parallel
254
255
256    else
257
258    CALL xios_init_server
259    print *, "Server : xios_finalize "
260 
261    endif
262
263  CALL MPI_FINALIZE(ierr)
264
265END PROGRAM test_remap_omp
266
267
268
269
270
Note: See TracBrowser for help on using the repository browser.