source: XIOS/dev/dev_oa/src/node/domain.hpp @ 1966

Last change on this file since 1966 was 1966, checked in by oabramkina, 4 years ago

dev_oa: first working version for tiled domains

  • Property copyright set to
    Software name : XIOS (Xml I/O Server)
    http://forge.ipsl.jussieu.fr/ioserver
    Creation date : January 2009
    Licence : CeCCIL version2
    see license file in root directory : Licence_CeCILL_V2-en.txt
    or http://www.cecill.info/licences/Licence_CeCILL_V2-en.html
    Holder : CEA/LSCE (Laboratoire des Sciences du CLimat et de l'Environnement)
    CNRS/IPSL (Institut Pierre Simon Laplace)
    Project Manager : Yann Meurdesoif
    yann.meurdesoif@cea.fr
File size: 9.6 KB
RevLine 
[591]1#ifndef __XIOS_CDomain__
2#define __XIOS_CDomain__
[219]3
[591]4/// XIOS headers ///
5#include "xios_spl.hpp"
[219]6#include "group_factory.hpp"
7
8#include "declare_group.hpp"
[540]9#include "declare_ref_func.hpp"
[300]10#include "event_client.hpp"
11#include "event_server.hpp"
12#include "buffer_in.hpp"
[369]13#include "array_new.hpp"
14#include "attribute_array.hpp"
[449]15#include "attribute_enum.hpp"
[631]16#include "transformation.hpp"
17#include "transformation_enum.hpp"
[1025]18#include "server_distribution_description.hpp"
[878]19#include "mesh.hpp"
20
[335]21namespace xios {
[509]22
[219]23   /// ////////////////////// Déclarations ////////////////////// ///
24
25   class CDomainGroup;
26   class CDomainAttributes;
27   class CDomain;
[878]28   class CFile;
[219]29
30   ///--------------------------------------------------------------
31
32   // Declare/Define CDomainAttribute
33   BEGIN_DECLARE_ATTRIBUTE_MAP(CDomain)
34#  include "domain_attribute.conf"
[775]35#  include "domain_attribute_private.conf"
[219]36   END_DECLARE_ATTRIBUTE_MAP(CDomain)
37
38   ///--------------------------------------------------------------
39
40   class CDomain
41      : public CObjectTemplate<CDomain>
42      , public CDomainAttributes
43   {
[1158]44     /// typedef ///
45     typedef CObjectTemplate<CDomain>   SuperClass;
46     typedef CDomainAttributes SuperClassAttribute;
47     public:
[300]48         enum EEventId
49         {
[1025]50           EVENT_ID_INDEX, EVENT_ID_LON, EVENT_ID_LAT, 
[1637]51           EVENT_ID_AREA,
[1236]52           EVENT_ID_DATA_INDEX, EVENT_ID_SERVER_ATTRIBUT
[300]53         } ;
[509]54
[676]55      public:
[219]56
57         typedef CDomainAttributes RelAttributes;
58         typedef CDomainGroup      RelGroup;
[631]59         typedef CTransformation<CDomain>::TransformationMapTypes TransMapTypes;
[219]60
61         /// Constructeurs ///
62         CDomain(void);
63         explicit CDomain(const StdString & id);
64         CDomain(const CDomain & domain);       // Not implemented yet.
65         CDomain(const CDomain * const domain); // Not implemented yet.
66
[622]67         static CDomain* createDomain();
[878]68         
69         CMesh* mesh;
[924]70         void assignMesh(const StdString, const int);
[878]71       
[631]72         virtual void parse(xml::CXMLNode & node);
73
[1345]74         void setContextClient(CContextClient* contextClient);
75
[219]76         /// Vérifications ///
77         void checkAttributes(void);
[509]78         void checkAttributesOnClient();
[657]79         void checkAttributesOnClientAfterTransformation();
[676]80         void checkEligibilityForCompressedOutput(void);
81
[509]82         void sendCheckedAttributes();
83
[631]84         bool hasTransformation();
85         void solveInheritanceTransformation();
86         TransMapTypes getAllTransformations();
[687]87         void redistribute(int nbLocalDomain);
[823]88         void duplicateTransformation(CDomain*);
[836]89         CTransformation<CDomain>* addTransformation(ETranformationType transType, const StdString& id="");
[631]90
[1158]91      public:
92         const std::set<StdString> & getRelFiles(void) const;
[219]93         bool IsWritten(const StdString & filename) const;
[676]94         bool isWrittenCompressed(const StdString& filename) const;
[1144]95         
[1639]96         int getNumberWrittenIndexes(MPI_Comm writtenCom);
97         int getTotalNumberWrittenIndexes(MPI_Comm writtenCom);
98         int getOffsetWrittenIndexes(MPI_Comm writtenCom);
99         CArray<int,1>& getCompressedIndexToWriteOnServer(MPI_Comm writtenCom);
[676]100
[1330]101         std::map<int, StdSize> getAttributesBufferSize(CContextClient* client, bool bufferForWriting = false);
[731]102
[219]103         bool isEmpty(void) const;
[594]104         bool isDistributed(void) const;
[1025]105         bool isCompressible(void) const; 
[1966]106
107         bool isTiled(void) const;
108         int getTileId(int i, int j) const;
109         int getTileDataISize(int tileId) const;
110         int getTileDataJSize(int tileId) const;
111
[1158]112         std::vector<int> getNbGlob();
113         bool isEqual(CDomain* domain);
[1236]114
115         static bool dispatchEvent(CEventServer& event);
116
[676]117      public:
[219]118         /// Mutateur ///
119         void addRelFile(const StdString & filename);
[1236]120         void addRelFileCompressed(const StdString& filename);           
121         
[1129]122         void computeWrittenIndex();
[1639]123         void computeWrittenCompressedIndex(MPI_Comm);
[821]124
125         void AllgatherRectilinearLonLat(CArray<double,1>& lon, CArray<double,1>& lat,
[809]126                                         CArray<double,1>& lon_g, CArray<double,1>& lat_g);
[821]127
128         void fillInRectilinearBoundLonLat(CArray<double,1>& lon, CArray<double,1>& lat,
[809]129                                           CArray<double,2>& boundsLon, CArray<double,2>& boundsLat);
[1158]130         
131         void fillInLonLat();
132         bool distributionAttributesHaveValue() const;
[611]133
[1215]134         size_t getGlobalWrittenSize() ;
[219]135         /// Destructeur ///
136         virtual ~CDomain(void);
137
138         /// Accesseurs statiques ///
139         static StdString GetName(void);
140         static StdString GetDefName(void);
[509]141
[1236]142         static ENodeType GetType(void);       
143
144      public:
145         CArray<double, 1> lonvalue, latvalue;
146         CArray<double, 2> bounds_lonvalue, bounds_latvalue;
147         CArray<double, 1> areavalue;
148
[1637]149         CArray<int,1> localIndexToWriteOnServer;
[1236]150
[1311]151         CArray<bool, 1> domainMask; // mask_1d, mask_2d -> domainMask
152         CArray<bool, 1> localMask; // domainMask + indexing
[384]153         bool isCurvilinear ;
[449]154         bool hasBounds ;
[611]155         bool hasArea;
[665]156         bool hasLonLat;
[953]157         bool hasPole ;
[1578]158         bool hasLatInReadFile_ ; // specify if latitude is defined on read file, so it can be read later when grid distribution will be defined
159         bool hasBoundsLatInReadFile_ ; // specify if latitude boundarues are defined on read file, so it can be read later when grid distribution will be defined
160         bool hasLonInReadFile_ ; // specify if longitude is defined on read file, so it can be read later when grid distribution will be defined
161         bool hasBoundsLonInReadFile_ ; // specify if longitude boundaries are defined on read file, so it can be read later when grid distribution will be defined
[953]162
[1291]163         void computeLocalMask(void) ;
[631]164      private:
[667]165         void checkDomain(void);
166         void checkLocalIDomain(void);
167         void checkLocalJDomain(void);
168
169         void checkMask(void);
170         void checkDomainData(void);
171         void checkCompression(void);
172
173         void checkBounds(void);
174         void checkArea(void);
175         void checkLonLat();
[1966]176         void checkTiles();
[667]177
[1025]178         void setTransformations(const TransMapTypes&);         
[1158]179         void computeNGlobDomain();
[1025]180         void sendAttributes();
[665]181         void sendIndex();
[1025]182         void sendDistributionAttributes();
[665]183         void sendArea();
[1236]184         void sendLonLat();         
[1025]185         void sendDataIndex();
[1129]186         void convertLonLatValue();
[1158]187         void fillInRectilinearLonLat();
188         void fillInCurvilinearLonLat();
189         void fillInUnstructuredLonLat();
[1236]190         
191         static void recvDistributionAttributes(CEventServer& event);
192         static void recvIndex(CEventServer& event);
193         static void recvLon(CEventServer& event);
194         static void recvLat(CEventServer& event);
195         static void recvArea(CEventServer& event);
196         static void recvDataIndex(CEventServer& event);
197         void recvDistributionAttributes(CBufferIn& buffer);                 
198         void recvIndex(std::map<int, CBufferIn*>& rankBuffers);         
199         void recvLon(std::map<int, CBufferIn*>& rankBuffers);
200         void recvLat(std::map<int, CBufferIn*>& rankBuffers);
201         void recvArea(std::map<int, CBufferIn*>& rankBuffers);         
202         void recvDataIndex(std::map<int, CBufferIn*>& rankBuffers);
203
204         void completeLonLatClient(void); 
205         void computeConnectedClients();   
206
[1025]207       private:         
[1345]208
209/** Clients that have to send a domain. There can be multiple clients in case of secondary server, otherwise only one client. */
[1353]210         std::list<CContextClient*> clients;
211         std::set<CContextClient*> clientsSet;
[1345]212
[1129]213         bool isChecked, computedWrittenIndex_;
[676]214         std::set<StdString> relFiles, relFilesCompressed;
[551]215         bool isClientChecked; // Verify whether all attributes of domain on the client side are good
[657]216         bool isClientAfterTransformationChecked;
[1236]217         std::map<int, CArray<int,1> > indGlob_;
[1337]218         std::map<int, map<int,int> > nbSenders; // Mapping of number of communicating client to a server
[1025]219
[1337]220/** Global index of each client sent to server: map<serverSize, map<serverRank, indexes>> */
[1542]221         std::map<int, std::unordered_map<int, vector<size_t> > > indSrv_;
[1236]222         // std::map<CContextClient*, std::map<int, vector<int> > > indWrittenSrv_; // Global written index of each client sent to server
[676]223         std::vector<int> indexesToWrite;
[1236]224         std::vector<int> recvClientRanks_;
[1249]225         std::map<int,int> numberWrittenIndexes_, totalNumberWrittenIndexes_, offsetWrittenIndexes_;
226         std::map<int, CArray<int, 1> > compressedIndexToWriteOnServer;     
[1337]227         std::map<int, std::map<int,size_t> > connectedDataSize_;
228         std::map<int, std::vector<int> > connectedServerRank_;
[1236]229
[676]230         //! True if and only if the data defined on the domain can be outputted in a compressed way
231         bool isCompressible_;
[715]232         bool isRedistributed_;
[1025]233         TransMapTypes transformationMap_;         
[657]234         bool isUnstructed_;
[1542]235         std::unordered_map<size_t,size_t> globalLocalIndexMap_;
[1966]236
237         bool isTiled_;
238
[836]239       private:
240         static bool initializeTransformationMap(std::map<StdString, ETranformationType>& m);
241         static std::map<StdString, ETranformationType> transformationMapList_;
242         static bool _dummyTransformationMapList;
243
[540]244         DECLARE_REF_FUNC(Domain,domain)
245
[219]246   }; // class CDomain
247
248   ///--------------------------------------------------------------
249
250   // Declare/Define CDomainGroup and CDomainDefinition
251   DECLARE_GROUP(CDomain);
252
253   ///--------------------------------------------------------------
254
[335]255} // namespace xios
[219]256
[878]257#endif //__XIOS_CDomain__
Note: See TracBrowser for help on using the repository browser.