source: XIOS/dev/branch_yushan_merged/src/test/test_remap_omp.f90 @ 1153

Last change on this file since 1153 was 1153, checked in by yushan, 5 years ago

save modif

  • Property svn:executable set to *
File size: 9.5 KB
Line 
1PROGRAM test_remap_omp
2
3  USE xios
4  USE mod_wait
5  use omp_lib
6  USE netcdf
7
8  IMPLICIT NONE
9  INCLUDE "mpif.h"
10  INTEGER :: rank
11  INTEGER :: size
12  INTEGER :: ierr
13
14  CHARACTER(len=*),PARAMETER :: id="client"
15  INTEGER :: comm
16  TYPE(xios_duration) :: dtime
17  TYPE(xios_context) :: ctx_hdl
18
19  DOUBLE PRECISION,ALLOCATABLE :: src_lon(:), dst_lon(:), src_lon_tmp(:)
20  DOUBLE PRECISION,ALLOCATABLE :: src_lat(:), dst_lat(:), src_lat_tmp(:)
21  DOUBLE PRECISION,ALLOCATABLE :: src_boundslon(:,:), dst_boundslon(:,:)
22  DOUBLE PRECISION,ALLOCATABLE :: src_boundslat(:,:), dst_boundslat(:,:)
23  DOUBLE PRECISION,ALLOCATABLE :: src_field_2D(:), src_field_2D_clone(:)
24  DOUBLE PRECISION,ALLOCATABLE :: tmp_field_0(:), tmp_field_1(:), tmp_field_2(:)
25  DOUBLE PRECISION,ALLOCATABLE :: src_field_3D(:,:), src_field_4D(:,:,:), lval(:), lval1(:), lval2(:), src_field_pression(:,:)
26  LOGICAL,ALLOCATABLE :: src_mask_2D(:)
27  INTEGER :: src_ni_glo, dst_ni_glo;
28  INTEGER :: src_nvertex, dst_nvertex;
29  INTEGER :: src_ibegin, dst_ibegin;
30  INTEGER :: src_ni, dst_ni;
31  INTEGER :: src_tmp_ni, src_tmp_nj, src_tmp_n;
32  CHARACTER(LEN=*),PARAMETER :: src_file="h14.nc"
33  CHARACTER(LEN=*),PARAMETER :: dst_file="r180x90.nc"
34  INTEGER :: ncid
35  INTEGER :: dimids(2)
36  INTEGER :: div,remain
37  INTEGER :: varid
38  INTEGER :: ts
39  INTEGER :: i,j, provided
40  INTEGER,PARAMETER :: llm=5, interpolatedLlm = 4, llm2 = 6
41  DOUBLE PRECISION, PARAMETER :: missing_value = 100000
42
43    CALL MPI_INIT_THREAD(3, provided, ierr)
44    if(provided .NE. 3) then
45      print*, "provided thread level = ", provided
46      call MPI_Abort()
47    endif
48  CALL init_wait
49 
50  CALL MPI_COMM_RANK(MPI_COMM_WORLD,rank,ierr)
51  CALL MPI_COMM_SIZE(MPI_COMM_WORLD,size,ierr)
52  if(rank < size-2) then
53
54  !$omp parallel default(firstprivate) firstprivate(dtime)
55
56!!! XIOS Initialization (get the local communicator)
57
58  CALL xios_initialize(id,return_comm=comm)
59  CALL MPI_COMM_RANK(comm,rank,ierr)
60  CALL MPI_COMM_SIZE(comm,size,ierr)
61 
62  rank = rank*omp_get_num_threads() + omp_get_thread_num()
63  size = size*omp_get_num_threads()
64
65 
66  !$omp critical (open_file)
67  ierr=NF90_OPEN(src_file, NF90_NOWRITE, ncid)
68  !$omp end critical (open_file)
69
70  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
71  ierr=NF90_INQUIRE_VARIABLE(ncid, varid,dimids=dimids)
72  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(1), len=src_nvertex)
73  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(2), len=src_ni_glo)
74
75  div    = src_ni_glo/size
76  remain = MOD( src_ni_glo, size )
77  IF (rank < remain) THEN
78    src_ni=div+1 ;
79    src_ibegin=rank*(div+1) ;
80  ELSE
81    src_ni=div ;
82    src_ibegin= remain * (div+1) + (rank-remain) * div ;
83  ENDIF
84
85  ALLOCATE(src_lon(src_ni), src_lon_tmp(src_ni))
86  ALLOCATE(src_lat(src_ni), src_lat_tmp(src_ni))
87  ALLOCATE(src_boundslon(src_nvertex,src_ni))
88  ALLOCATE(src_boundslat(src_nvertex,src_ni))
89  ALLOCATE(src_field_2D(src_ni), src_field_2D_clone(src_ni))
90  ALLOCATE(src_field_3D(src_ni,llm))
91  ALLOCATE(src_field_4D(src_ni,llm,llm2))
92  ALLOCATE(src_mask_2D(src_ni))
93  ALLOCATE(src_field_pression(src_ni,llm))
94  ALLOCATE(lval(llm))
95  ALLOCATE(lval1(interpolatedLlm))
96  ALLOCATE(lval2(llm2))
97
98  ierr=NF90_INQ_VARID(ncid,"lon",varid)
99  ierr=NF90_GET_VAR(ncid,varid, src_lon, start=(/src_ibegin+1/),count=(/src_ni/))
100  ierr=NF90_INQ_VARID(ncid,"lat",varid)
101  ierr=NF90_GET_VAR(ncid,varid, src_lat, start=(/src_ibegin+1/),count=(/src_ni/))
102  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
103  ierr=NF90_GET_VAR(ncid,varid,src_boundslon, start=(/1,src_ibegin+1/),count=(/src_nvertex,src_ni/))
104  ierr=NF90_INQ_VARID(ncid,"bounds_lat",varid)
105  ierr=NF90_GET_VAR(ncid,varid, src_boundslat, start=(/1,src_ibegin+1/),count=(/src_nvertex,src_ni/))
106  ierr=NF90_INQ_VARID(ncid,"val",varid)
107  ierr=NF90_GET_VAR(ncid,varid, src_field_2D, start=(/src_ibegin+1/),count=(/src_ni/))
108  DO i=1,src_ni
109    src_field_3D(i,:) = src_field_2D(i)
110    IF ((0 < src_lat(i)) .AND. (src_lat(i) < 25.5) .AND. (30 < src_lon(i)) .AND. (src_lon(i) < 60)) THEN
111      src_mask_2D(i)=.FALSE.
112      ! src_field_2D(i) = missing_value
113    ELSE
114      src_mask_2D(i)=.TRUE.     
115    ENDIF
116    src_lon_tmp(i) = src_lon(i) + 1000
117    src_lat_tmp(i) = src_lat(i) + 10000
118  ENDDO
119  src_field_2D_clone = src_field_2D
120
121  DO i=1,llm
122    lval(i) = i*100
123    src_field_pression(:,i) = i * 100
124    IF (MOD(i,3)==0) THEN
125      ! src_field_pression(:,i) = missing_value
126      src_field_3D(:,i) = missing_value
127    ELSE
128      ! src_field_pression(:,i) = i * 100
129      src_field_3D(:,i) = src_field_3D(:,i) + i * 10 
130    ENDIF
131    ! src_field_3D(:,i) = src_field_3D(:,i) + i * 10   
132  ENDDO
133
134  DO i=1,llm2
135    src_field_4D(:,:,i) = src_field_3D(:,:) + i * 100
136  ENDDO
137
138  DO i=1,interpolatedLlm
139    lval2(i) = i*10
140    lval1(i) = i*10 + 2
141  ENDDO
142
143  !$omp critical (open_file)
144  ierr=NF90_OPEN(dst_file, NF90_NOWRITE, ncid)
145  !$omp end critical (open_file)
146
147 
148  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
149  ierr=NF90_INQUIRE_VARIABLE(ncid, varid,dimids=dimids)
150  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(1), len=dst_nvertex)
151  ierr=NF90_INQUIRE_DIMENSION(ncid, dimids(2), len=dst_ni_glo)
152
153  div    = dst_ni_glo/size
154  remain = MOD( dst_ni_glo, size )
155  IF (rank < remain) THEN
156    dst_ni=div+1 ;
157    dst_ibegin=rank*(div+1) ;
158  ELSE
159    dst_ni=div ;
160    dst_ibegin= remain * (div+1) + (rank-remain) * div ;
161  ENDIF
162
163  ALLOCATE(dst_lon(dst_ni))
164  ALLOCATE(dst_lat(dst_ni))
165  ALLOCATE(dst_boundslon(dst_nvertex,dst_ni))
166  ALLOCATE(dst_boundslat(dst_nvertex,dst_ni))
167
168  ierr=NF90_INQ_VARID(ncid,"lon",varid)
169  ierr=NF90_GET_VAR(ncid,varid, dst_lon, start=(/dst_ibegin+1/),count=(/dst_ni/))
170  ierr=NF90_INQ_VARID(ncid,"lat",varid)
171  ierr=NF90_GET_VAR(ncid,varid, dst_lat, start=(/dst_ibegin+1/),count=(/dst_ni/))
172  ierr=NF90_INQ_VARID(ncid,"bounds_lon",varid)
173  ierr=NF90_GET_VAR(ncid,varid,dst_boundslon, start=(/1,dst_ibegin+1/),count=(/dst_nvertex,dst_ni/))
174  ierr=NF90_INQ_VARID(ncid,"bounds_lat",varid)
175  ierr=NF90_GET_VAR(ncid,varid, dst_boundslat, start=(/1,dst_ibegin+1/),count=(/dst_nvertex,dst_ni/))
176
177
178  CALL xios_context_initialize("test",comm)
179  CALL xios_get_handle("test",ctx_hdl)
180  CALL xios_set_current_context(ctx_hdl)
181 
182  CALL xios_set_domain_attr("src_domain", ni_glo=src_ni_glo, ibegin=src_ibegin, ni=src_ni, type="unstructured")
183  CALL xios_set_domain_attr("src_domain", lonvalue_1D=src_lon, latvalue_1D=src_lat, &
184                            bounds_lon_1D=src_boundslon, bounds_lat_1D=src_boundslat, nvertex=src_nvertex)
185
186  CALL xios_set_domain_attr("src_domain_clone", ni_glo=src_ni_glo, ibegin=src_ibegin, ni=src_ni, type="unstructured")
187  CALL xios_set_domain_attr("src_domain_clone", lonvalue_1D=src_lon, latvalue_1D=src_lat, &
188                            bounds_lon_1D=src_boundslon, bounds_lat_1D=src_boundslat, nvertex=src_nvertex, &
189                            mask_1d=src_mask_2D)
190
191  CALL xios_set_axis_attr("src_axis", n_glo=llm, value=lval)
192  CALL xios_set_axis_attr("nq", n_glo=llm2, value=lval2)
193
194  CALL xios_set_domain_attr("dst_domain", ni_glo=dst_ni_glo, ibegin=dst_ibegin, ni=dst_ni, type="unstructured")
195  CALL xios_set_domain_attr("dst_domain", lonvalue_1D=dst_lon, latvalue_1D=dst_lat, &
196                            bounds_lon_1D=dst_boundslon, bounds_lat_1D=dst_boundslat, nvertex=dst_nvertex)
197
198  CALL xios_set_domain_attr("src_domain_unstructured_read", ni_glo=src_ni_glo, ibegin=src_ibegin, ni=src_ni, type="unstructured")
199  CALL xios_set_domain_attr("src_domain_unstructured_read", lonvalue_1D=src_lon_tmp, latvalue_1D=src_lat_tmp, &
200                            bounds_lon_1D=src_boundslon, bounds_lat_1D=src_boundslat, nvertex=src_nvertex)
201
202  dtime%second = 3600
203 
204  CALL xios_set_timestep(dtime)
205
206  CALL xios_close_context_definition()
207
208  CALL xios_get_domain_attr("src_domain_regular_read", ni=src_tmp_ni, nj=src_tmp_nj)
209  ALLOCATE(tmp_field_0(src_tmp_ni*src_tmp_nj))
210
211  CALL xios_get_axis_attr("src_axis_curvilinear_read", n=src_tmp_n)
212  CALL xios_get_domain_attr("src_domain_curvilinear_read", ni=src_tmp_ni, nj=src_tmp_nj)
213  ALLOCATE(tmp_field_1(src_tmp_ni*src_tmp_nj*src_tmp_n))
214
215  CALL xios_get_domain_attr("src_domain_unstructured_read", ni=src_tmp_ni, nj=src_tmp_nj)
216  ALLOCATE(tmp_field_2(src_tmp_ni*src_tmp_nj))
217 
218  CALL xios_recv_field("src_field_regular", tmp_field_0)
219  CALL xios_recv_field("src_field_curvilinear", tmp_field_1)
220  CALL xios_recv_field("src_field_unstructured", tmp_field_2)
221
222  DO ts=1,10
223    CALL xios_update_calendar(ts)
224    CALL xios_send_field("src_field_2D",src_field_2D)
225   
226    DO i=1,src_ni
227      src_field_2D_clone(i) = src_field_2D(i)
228      IF ((23.5 * ts < src_lat(i)) .AND. (src_lat(i) < 65.5 *ts) .AND. (0 < src_lon(i)) .AND. (src_lon(i) < 30*ts)) THEN     
229        src_field_2D_clone(i) = missing_value   
230      ENDIF
231    ENDDO
232
233    CALL xios_send_field("src_field_2D_clone",src_field_2D_clone)
234    CALL xios_send_field("src_field_3D",src_field_3D)
235    CALL xios_send_field("src_field_3D_clone",src_field_3D)
236    CALL xios_send_field("src_field_4D",src_field_4D)
237    CALL xios_send_field("src_field_3D_pression",src_field_pression)
238    CALL xios_send_field("tmp_field_0",tmp_field_0)
239    CALL xios_send_field("tmp_field_1",tmp_field_1)
240    CALL xios_send_field("tmp_field_2",tmp_field_2)
241    CALL wait_us(5000) ;
242   ENDDO
243 
244  CALL xios_context_finalize()
245
246  DEALLOCATE(src_lon, src_lat, src_boundslon,src_boundslat, src_field_2D)
247  DEALLOCATE(dst_lon, dst_lat, dst_boundslon,dst_boundslat)
248  DEALLOCATE(tmp_field_0, tmp_field_1, tmp_field_2)
249 
250  CALL xios_finalize()
251 
252  print *, "Client : xios_finalize "
253
254  !$omp barrier
255
256  !$omp master
257  CALL MPI_COMM_FREE(comm, ierr)
258  !$omp end master
259
260  !$omp barrier
261
262  !$omp end parallel
263
264
265    else
266
267    CALL xios_init_server
268    print *, "Server : xios_finalize "
269 
270    endif
271
272  CALL MPI_FINALIZE(ierr)
273
274END PROGRAM test_remap_omp
275
276
277
278
279
Note: See TracBrowser for help on using the repository browser.