14#include "arcane/utils/Array.h"
15#include "arcane/utils/HPReal.h"
16#include "arcane/utils/NumericTypes.h"
17#include "arcane/utils/NotImplementedException.h"
18#include "arcane/utils/NotSupportedException.h"
19#include "arcane/utils/ScopedPtr.h"
20#include "arcane/utils/ITraceMng.h"
21#include "arcane/utils/ValueConvert.h"
22#include "arcane/utils/FatalErrorException.h"
24#include "arcane/core/ParallelMngDispatcher.h"
25#include "arcane/core/IParallelDispatch.h"
26#include "arcane/core/Timer.h"
27#include "arcane/core/ITimeStats.h"
28#include "arcane/core/IParallelNonBlockingCollective.h"
29#include "arcane/core/internal/ParallelMngInternal.h"
31#include "arcane/accelerator/core/Runner.h"
32#include "arcane/accelerator/core/RunQueueBuildInfo.h"
34#include "arccore/message_passing/Dispatchers.h"
36#include "arccore/message_passing/MessagePassingMng.h"
37#include "arccore/message_passing/IControlDispatcher.h"
38#include "arccore/message_passing/ISerializeDispatcher.h"
39#include "arccore/message_passing/PointToPointMessageInfo.h"
40#include "arccore/message_passing/IRequestList.h"
41#include "arccore/message_passing/ISerializeMessageList.h"
42#include "arccore/trace/internal/TimeMetric.h"
49using namespace Arccore::MessagePassing;
54ParallelMngDispatcherBuildInfo::
55ParallelMngDispatcherBuildInfo(
Int32 comm_rank,
Int32 comm_size)
56: m_comm_rank(comm_rank)
57, m_comm_size(comm_size)
66ParallelMngDispatcherBuildInfo::
67ParallelMngDispatcherBuildInfo(Int32 comm_rank, Int32 comm_size, MP::Communicator communicator)
68: m_comm_rank(comm_rank)
69, m_comm_size(comm_size)
70, m_communicator(communicator)
78void ParallelMngDispatcherBuildInfo::
87ParallelMngDispatcher::DefaultControlDispatcher::
88DefaultControlDispatcher(ParallelMngDispatcher* pm)
94void ParallelMngDispatcher::DefaultControlDispatcher::
97 m_parallel_mng->waitAllRequests(requests);
100void ParallelMngDispatcher::DefaultControlDispatcher::
102 bool is_non_blocking)
106 done_requests = m_parallel_mng->testSomeRequests(requests);
108 done_requests = m_parallel_mng->waitSomeRequests(requests);
110 for(
int x : done_requests )
122splitCommunicator(
bool keep)
131void ParallelMngDispatcher::DefaultControlDispatcher::
134 m_parallel_mng->barrier();
137Request ParallelMngDispatcher::DefaultControlDispatcher::
140 return m_parallel_mng->nonBlockingCollective()->barrier();
143MessageId ParallelMngDispatcher::DefaultControlDispatcher::
146 return m_parallel_mng->probe(message);
152 return m_parallel_mng->legacyProbe(message);
156createRequestListRef()
158 return m_parallel_mng->createRequestListRef();
164void ParallelMngDispatcher::DefaultControlDispatcher::
165setProfiler(MP::IProfiler* p)
175:
public MP::ISerializeDispatcher
186 return m_parallel_mng->createSerializeMessageListRef();
190 return m_parallel_mng->sendSerializer(s,message);
194 return m_parallel_mng->receiveSerializer(s,message);
207ParallelMngDispatcher::
209: m_comm_rank(bi.commRank())
210, m_comm_size(bi.commSize())
211, m_communicator(bi.communicator())
213, m_unsigned_char(nullptr)
214, m_signed_char(nullptr)
216, m_unsigned_short(nullptr)
218, m_unsigned_int(nullptr)
220, m_unsigned_long(nullptr)
221, m_long_long(nullptr)
222, m_unsigned_long_long(nullptr)
225, m_long_double(nullptr)
232, m_time_stats(nullptr)
233, m_mp_dispatchers_ref(bi.dispatchersRef())
234, m_control_dispatcher(new DefaultControlDispatcher(this))
235, m_serialize_dispatcher(new SerializeDispatcher(this))
238 m_message_passing_mng =
this;
244ParallelMngDispatcher::
245~ParallelMngDispatcher()
247 m_mp_dispatchers_ref.
reset();
249 delete m_parallel_mng_internal;
251 delete m_serialize_dispatcher;
252 delete m_control_dispatcher;
254 delete m_signed_char;
255 delete m_unsigned_char;
257 delete m_unsigned_short;
259 delete m_unsigned_int;
261 delete m_unsigned_long;
263 delete m_unsigned_long_long;
267 delete m_long_double;
278void ParallelMngDispatcher::
279_setControlDispatcher(MP::IControlDispatcher* d)
281 delete m_control_dispatcher;
282 m_control_dispatcher = d;
288void ParallelMngDispatcher::
289_setSerializeDispatcher(MP::ISerializeDispatcher* d)
291 delete m_serialize_dispatcher;
292 m_serialize_dispatcher = d;
298void ParallelMngDispatcher::
299_setArccoreDispatchers()
301 m_mp_dispatchers_ref->setDispatcher(m_char->toArccoreDispatcher());
302 m_mp_dispatchers_ref->setDispatcher(m_signed_char->toArccoreDispatcher());
303 m_mp_dispatchers_ref->setDispatcher(m_unsigned_char->toArccoreDispatcher());
304 m_mp_dispatchers_ref->setDispatcher(m_short->toArccoreDispatcher());
305 m_mp_dispatchers_ref->setDispatcher(m_unsigned_short->toArccoreDispatcher());
306 m_mp_dispatchers_ref->setDispatcher(m_int->toArccoreDispatcher());
307 m_mp_dispatchers_ref->setDispatcher(m_unsigned_int->toArccoreDispatcher());
308 m_mp_dispatchers_ref->setDispatcher(m_long->toArccoreDispatcher());
309 m_mp_dispatchers_ref->setDispatcher(m_unsigned_long->toArccoreDispatcher());
310 m_mp_dispatchers_ref->setDispatcher(m_long_long->toArccoreDispatcher());
311 m_mp_dispatchers_ref->setDispatcher(m_unsigned_long_long->toArccoreDispatcher());
312 m_mp_dispatchers_ref->setDispatcher(m_float->toArccoreDispatcher());
313 m_mp_dispatchers_ref->setDispatcher(m_double->toArccoreDispatcher());
314 m_mp_dispatchers_ref->setDispatcher(m_long_double->toArccoreDispatcher());
317 m_mp_dispatchers_ref->setDispatcher(m_control_dispatcher);
319 m_mp_dispatchers_ref->setDispatcher(m_serialize_dispatcher);
328 return m_message_passing_mng;
334MP::IDispatchers* ParallelMngDispatcher::
337 return m_mp_dispatchers_ref.
get();
362 m_time_metric_collector = c;
370_communicationTimeMetricAction()
const
372 return Timer::phaseAction(
timeStats(),TP_Communication);
378void ParallelMngDispatcher::
379broadcastString(
String& str,Int32 rank)
385 len_info[0] = bytes.size();
388 broadcast(utf8_array,rank);
393 broadcast(utf8_array,rank);
394 str = String::fromUtf8(utf8_array);
406 size = bytes.largeSize();
415 broadcast(bytes,rank);
425 mpAllGather(_messagePassingMng(), send_serializer, recv_serializer);
438 message_list->addMessage(m);
440 message_list->waitMessages(Parallel::WaitAll);
453 message_list->addMessage(v.get());
455 message_list->waitMessages(Parallel::WaitAll);
464 return makeRef(_createSerializeMessageList());
473 return _createSerializeMessageList();
482 return _createSubParallelMng(kept_ranks);
491 return makeRef(_createSubParallelMng(kept_ranks));
498_createSubParallelMngRef([[maybe_unused]]
Int32 color, [[maybe_unused]]
Int32 key)
507_createSubParallelMngRef(
bool is_kept)
513 Int8 kept = (is_kept) ? 1 : 0;
518 for (Int32 i = 0; i < nb_rank; ++i)
519 if (all_kept[i] != 0)
527UniqueArray<Integer> ParallelMngDispatcher::
528_doWaitRequests(ArrayView<Request> requests,
eWaitType wait_type)
530 Timer::Phase tphase(
timeStats(),TP_Communication);
533 request_list->add(requests);
534 request_list->wait(wait_type);
536 for (
Integer i=0; i<nb_request; ++i )
537 requests[i] = request_list->request(i);
538 return request_list->doneRequestIndexes();
562#define ARCANE_PARALLEL_MANAGER_DISPATCH(field,type)\
563void ParallelMngDispatcher::\
564allGather(ConstArrayView<type> send_buf,ArrayView<type> recv_buf)\
566 Timer::Phase tphase(timeStats(), TP_Communication); \
567 (field)->allGather(send_buf, recv_buf); \
569 void ParallelMngDispatcher:: \
570 gather(ConstArrayView<type> send_buf, ArrayView<type> recv_buf, Integer rank) \
572 Timer::Phase tphase(timeStats(), TP_Communication); \
573 (field)->gather(send_buf, recv_buf, rank); \
575 void ParallelMngDispatcher:: \
576 allGatherVariable(ConstArrayView<type> send_buf, Array<type>& recv_buf) \
578 Timer::Phase tphase(timeStats(), TP_Communication); \
579 (field)->allGatherVariable(send_buf, recv_buf); \
581 void ParallelMngDispatcher:: \
582 gatherVariable(ConstArrayView<type> send_buf, Array<type>& recv_buf, Integer rank) \
584 Timer::Phase tphase(timeStats(), TP_Communication); \
585 (field)->gatherVariable(send_buf, recv_buf, rank); \
587 void ParallelMngDispatcher:: \
588 scatterVariable(ConstArrayView<type> send_buf, ArrayView<type> recv_buf, Integer root) \
590 Timer::Phase tphase(timeStats(), TP_Communication); \
591 (field)->scatterVariable(send_buf, recv_buf, root); \
593 type ParallelMngDispatcher:: \
594 reduce(eReduceType rt, type v) \
596 Timer::Phase tphase(timeStats(), TP_Communication); \
597 return (field)->allReduce(rt, v); \
599 void ParallelMngDispatcher:: \
600 reduce(eReduceType rt, ArrayView<type> v) \
602 Timer::Phase tphase(timeStats(), TP_Communication); \
603 (field)->allReduce(rt, v); \
605 void ParallelMngDispatcher:: \
606 broadcast(ArrayView<type> send_buf, Integer id) \
608 Timer::Phase tphase(timeStats(), TP_Communication); \
609 (field)->broadcast(send_buf, id); \
611 void ParallelMngDispatcher:: \
612 send(ConstArrayView<type> values, Integer id) \
614 Timer::Phase tphase(timeStats(), TP_Communication); \
615 (field)->send(values, id); \
617 void ParallelMngDispatcher:: \
618 recv(ArrayView<type> values, Integer id) \
620 Timer::Phase tphase(timeStats(), TP_Communication); \
621 (field)->recv(values, id); \
623 Parallel::Request ParallelMngDispatcher:: \
624 send(ConstArrayView<type> values, Integer id, bool is_blocked) \
626 Timer::Phase tphase(timeStats(), TP_Communication); \
627 return (field)->send(values, id, is_blocked); \
629 Request ParallelMngDispatcher:: \
630 send(Span<const type> values, const PointToPointMessageInfo& message) \
632 Timer::Phase tphase(timeStats(), TP_Communication); \
633 return (field)->send(values, message); \
635 Parallel::Request ParallelMngDispatcher:: \
636 recv(ArrayView<type> values, Integer id, bool is_blocked) \
638 Timer::Phase tphase(timeStats(), TP_Communication); \
639 return (field)->recv(values, id, is_blocked); \
641 Request ParallelMngDispatcher:: \
642 receive(Span<type> values, const PointToPointMessageInfo& message) \
644 Timer::Phase tphase(timeStats(), TP_Communication); \
645 return (field)->receive(values, message); \
647 void ParallelMngDispatcher:: \
648 sendRecv(ConstArrayView<type> send_buf, ArrayView<type> recv_buf, Integer id) \
650 Timer::Phase tphase(timeStats(), TP_Communication); \
651 (field)->sendRecv(send_buf, recv_buf, id); \
653 void ParallelMngDispatcher:: \
654 allToAll(ConstArrayView<type> send_buf, ArrayView<type> recv_buf, Integer count) \
656 Timer::Phase tphase(timeStats(), TP_Communication); \
657 (field)->allToAll(send_buf, recv_buf, count); \
659 void ParallelMngDispatcher:: \
660 allToAllVariable(ConstArrayView<type> send_buf, Int32ConstArrayView send_count, \
661 Int32ConstArrayView send_index, ArrayView<type> recv_buf, \
662 Int32ConstArrayView recv_count, Int32ConstArrayView recv_index) \
664 Timer::Phase tphase(timeStats(), TP_Communication); \
665 (field)->allToAllVariable(send_buf, send_count, send_index, recv_buf, recv_count, recv_index); \
667 type ParallelMngDispatcher:: \
668 scan(eReduceType rt, type v) \
670 Timer::Phase tphase(timeStats(), TP_Communication); \
671 return (field)->scan(rt, v); \
673 void ParallelMngDispatcher:: \
674 computeMinMaxSum(type val, type& min_val, type& max_val, type& sum_val, Int32& min_proc, Int32& max_proc) \
676 Timer::Phase tphase(timeStats(), TP_Communication); \
677 (field)->computeMinMaxSum(val, min_val, max_val, sum_val, min_proc, max_proc); \
679 IParallelDispatchT<type>* ParallelMngDispatcher:: \
684 void ParallelMngDispatcher:: \
685 computeMinMaxSum(ConstArrayView<type> values, \
686 ArrayView<type> min_values, \
687 ArrayView<type> max_values, \
688 ArrayView<type> sum_values, \
689 ArrayView<Int32> min_ranks, \
690 ArrayView<Int32> max_ranks) \
692 Timer::Phase tphase(timeStats(), TP_Communication); \
693 (field)->computeMinMaxSum(values, min_values, max_values, sum_values, min_ranks, max_ranks); \
695void ParallelMngDispatcher:: \
696 scan(eReduceType rt, ArrayView<type> v) \
698 Timer::Phase tphase(timeStats(), TP_Communication); \
699 (field)->scan(rt, v); \
702ARCANE_PARALLEL_MANAGER_DISPATCH(m_char,
char)
703ARCANE_PARALLEL_MANAGER_DISPATCH(m_unsigned_char,
unsigned char)
704ARCANE_PARALLEL_MANAGER_DISPATCH(m_signed_char,
signed char)
705ARCANE_PARALLEL_MANAGER_DISPATCH(m_short,
short)
706ARCANE_PARALLEL_MANAGER_DISPATCH(m_unsigned_short,
unsigned short)
707ARCANE_PARALLEL_MANAGER_DISPATCH(m_int,
int)
708ARCANE_PARALLEL_MANAGER_DISPATCH(m_unsigned_int,
unsigned int)
709ARCANE_PARALLEL_MANAGER_DISPATCH(m_long,
long)
710ARCANE_PARALLEL_MANAGER_DISPATCH(m_unsigned_long,
unsigned long)
711ARCANE_PARALLEL_MANAGER_DISPATCH(m_long_long,
long long)
712ARCANE_PARALLEL_MANAGER_DISPATCH(m_unsigned_long_long,
unsigned long long)
713ARCANE_PARALLEL_MANAGER_DISPATCH(m_float,
float)
714ARCANE_PARALLEL_MANAGER_DISPATCH(m_double,
double)
715ARCANE_PARALLEL_MANAGER_DISPATCH(m_long_double,
long double)
716ARCANE_PARALLEL_MANAGER_DISPATCH(m_apreal,
APReal)
717ARCANE_PARALLEL_MANAGER_DISPATCH(m_real2,
Real2)
718ARCANE_PARALLEL_MANAGER_DISPATCH(m_real3,
Real3)
719ARCANE_PARALLEL_MANAGER_DISPATCH(m_real2x2,
Real2x2)
720ARCANE_PARALLEL_MANAGER_DISPATCH(m_real3x3,
Real3x3)
721ARCANE_PARALLEL_MANAGER_DISPATCH(m_hpreal,
HPReal)
#define ARCANE_CHECK_POINTER(ptr)
Macro retournant le pointeur ptr s'il est non nul ou lancant une exception s'il est nul.
#define ARCANE_THROW(exception_class,...)
Macro pour envoyer une exception avec formattage.
Liste des fonctions d'échange de message.
#define ARCCORE_DEFINE_REFERENCE_COUNTED_CLASS(class_name)
Macro pour définir les méthodes et types une classe qui utilise un compteur de référence.
Emulation de réel en précision arbitraire.
Vue modifiable d'un tableau d'un type T.
void fill(const T &o) noexcept
Remplit le tableau avec la valeur o.
constexpr Integer size() const noexcept
Retourne la taille du tableau.
void reserve(Int64 new_capacity)
Réserve le mémoire pour new_capacity éléments.
void add(ConstReferenceType val)
Ajoute l'élément val à la fin du tableau.
Vue constante d'un tableau de type T.
Classe implémentant un nombre réel de haute précision.
Interface d'un conteneur de 'IParallelMng'.
Interface du gestionnaire de parallélisme pour un sous-domaine.
virtual Ref< Parallel::IRequestList > createRequestListRef()=0
Créé une liste de requêtes pour ce gestionnaire.
Interface d'un sérialiseur.
Interface gérant les statistiques sur l'exécution.
Interface gérant les statistiques sur les temps d'exécution.
virtual ITimeMetricCollector * metricCollector()=0
Interface de collection associée.
Interface du gestionnaire des échanges de messages.
Interface d'une liste de messages de sérialisation.
Interface d'un message de sérialisation entre IMessagePassingMng.
Informations sur la source d'un message.
Informations pour envoyer/recevoir un message point à point.
Exception lorsqu'une fonction n'est pas implémentée.
Exception lorsqu'une opération n'est pas supportée.
Request sendSerializer(const ISerializer *s, const PointToPointMessageInfo &message) override
Message d'envoi.
Request receiveSerializer(ISerializer *s, const PointToPointMessageInfo &message) override
Message de réception.
Ref< ISerializeMessageList > createSerializeMessageListRef() override
Créé une liste de messages de sérialisation.
ISerializeMessageList * createSerializeMessageList() final
Créé une liste pour gérer les 'ISerializeMessage'.
void setTimeStats(ITimeStats *ts) override
Positionne le gestionnaire de statistiques.
void allGather(ISerializer *send_serializer, ISerializer *recv_serializer) override
Redéfinit ici allGather pour éviter de cacher le symbole dans les classes dérivées.
Ref< IParallelMng > createSubParallelMngRef(Int32ConstArrayView kept_ranks) override
Créé un nouveau gestionnaire de parallélisme pour un sous-ensemble des rangs.
Int32 commSize() const override
Nombre d'instance dans le communicateur.
void processMessages(ConstArrayView< ISerializeMessage * > messages) override
Exécute les opérations des messages messages.
IMessagePassingMng * messagePassingMng() const override
Gestionnaire de message de Arccore associé
Int32 commRank() const override
Rang de cette instance dans le communicateur.
ITimeMetricCollector * timeMetricCollector() const override
Interface pour collecter les temps d'exécution (peut être nul).
IParallelMng * createSubParallelMng(Int32ConstArrayView kept_ranks) final
Créé un nouveau gestionnaire de parallélisme pour un sous-ensemble des rangs.
UniqueArray< Integer > testSomeRequests(ArrayView< Request > requests) override
Test si une des requêtes rvalues est terminée.
ITimeStats * timeStats() const override
Gestionnaire de statistiques associé (peut être nul).
Ref< ISerializeMessageList > createSerializeMessageListRef() final
Créé une liste pour gérer les 'ISerializeMessage'.
UniqueArray< Integer > waitSomeRequests(ArrayView< Request > requests) override
Bloque en attendant qu'une des requêtes rvalues soit terminée.
void broadcastMemoryBuffer(ByteArray &bytes, Int32 rank) override
Effectue un broadcast d'une zone mémoire.
Partie interne de IParallelMng.
Classe gérant un vecteur réel 2-dimensionnel.
Classe gérant une matrice 2x2 de réels.
Classe gérant un vecteur réel de 3 dimensions.
Classe gérant une matrice réelle 3x3.
void reset()
Positionne l'instance au pointeur nul.
InstanceType * get() const
Instance associée ou nullptr si aucune.
Référence à une instance.
Vue d'un tableau d'éléments de type T.
Chaîne de caractères unicode.
Span< const Byte > bytes() const
Retourne la conversion de l'instance dans l'encodage UTF-8.
Sentinelle pour collecter les informations temporelles.
Positionne la phase de l'action en cours d'exécution.
Vecteur 1D de données avec sémantique par valeur (style STL).
@ WaitSome
Attend que tous les messages de la liste soient traités.
void mpAllGather(IMessagePassingMng *pm, const ISerializer *send_serializer, ISerializer *receive_serialize)
Message allGather() pour une sérialisation.
-- tab-width: 2; indent-tabs-mode: nil; coding: utf-8-with-signature --
ArrayView< Int64 > Int64ArrayView
Equivalent C d'un tableau à une dimension d'entiers 64 bits.
std::int64_t Int64
Type entier signé sur 64 bits.
Int32 Integer
Type représentant un entier.
Array< Byte > ByteArray
Tableau dynamique à une dimension de caractères.
ConstArrayView< Int32 > Int32ConstArrayView
Equivalent C d'un tableau à une dimension d'entiers 32 bits.
UniqueArray< Byte > ByteUniqueArray
Tableau dynamique à une dimension de caractères.
auto makeRef(InstanceType *t) -> Ref< InstanceType >
Créé une référence sur un pointeur.
std::int32_t Int32
Type entier signé sur 32 bits.
Espace de nom de Arccore.
Ref< TrueType > createRef(Args &&... args)
Créé une instance de type TrueType avec les arguments Args et retourne une référence dessus.
auto makeRef(InstanceType *t) -> Ref< InstanceType >
Créé une référence sur un pointeur.
Arcane::Int8 Int8
Type représentant un entier sur 8 bits.