WIP related work

1-introduction/related-work/1-haptic-hand.tex

@@ -290,17 +290,17 @@ Sandpaper is typically perceived as sticky because it has a strong resistance to
 This perceptual property is closely related to the perception of roughness~\cite{hollins1993perceptual,baumgartner2013visual}.
 
 When running the finger on a surface with a lateral movement (see \secref{exploratory_procedures}), the skin-surface contacts generate frictional forces in the opposite direction to the finger movement, giving kinesthetic cues, and also stretch the skin, giving cutaneous cues.
-As illustrated in \figref{smith1996subjective_1}, a stick-slip phenomenon can also occur, where the finger is intermittently slowed down by the friction before continuing its movement, both on rough and smooth surfaces~\cite{derler2013stick}.
-The amplitude of the frictional force $F_s$ is proportional to the normal force of the finger $F_n$, \ie the force perpendicular to the surface, according to a friction coefficient $\mu$:
+As illustrated in \figref{smith1996subjective_1}, a stick-slip phenomenon can also occur, where the finger is intermittently slowed by friction before continuing to move, on both rough and smooth surfaces~\cite{derler2013stick}.
+The amplitude of the frictional force $F_s$ is proportional to the normal force of the finger $F_n$, \ie the force perpendicular to the surface, according to a coefficient of friction $\mu$:
 \begin{equation}
     \label{eq:friction}
     F_s = \mu \, F_n
 \end{equation}
 The perceived intensity of friction is thus that of the friction coefficient $\mu$~\cite{smith1996subjective}.
 
-\begin{subfigs}{smith1996subjective}{Perception des frottements haptique de plusieurs matériaux par exploration active avec le doigt~\cite{smith1996subjective}. }[
-        \item Mesures des forces normales $F_n$ et tangentielles $F_t$ lors de l'exploration de deux surfaces : une lisse (le verre) et une rugueuse (le nyloprint). Les fluctuations de la force tangentielle sont dues au phénomène de stick-slip. Le coefficient de frottement $\mu$ peut être estimé par la pente de la relation entre les forces normales et tangentielle.
-        \item Intensité perçue des frottements (axe vertical) en fonction du coefficient de frottement $\mu$ estimé de l'exploration (axe horizontal) pour quatre matériaux (formes et couleurs).
+\begin{subfigs}{smith1996subjective}{Perceived intensity of friction of different materials by active exploration with the finger~\cite{smith1996subjective}. }[
+        \item Measurements of normal $F_n$ and tangential $F_t$ forces when exploring two surfaces: one smooth (glass) and one rough (nyloprint). The fluctuations in the tangential force are due to the stick-slip phenomenon. The coefficient of friction $\mu$ can be estimated as the slope of the relationship between the normal and tangential forces.
+        \item Perceived friction intensity (vertical axis) as a function of the estimated friction coefficient $\mu$ of the exploration (horizontal axis) for four materials (shapes and colors).
     ]
     \subfigsheight{55mm}
     \subfig{smith1996subjective_1}
@@ -318,11 +318,11 @@ Si le doigt est anesthésié, l'absence de sensations cutanées empêche d'ajust
 \subsubsection{Temperature}
 \label{temperature}
 
-La température (ou coldness/warmness) est la perception du \emph{transfert de chaleur} entre la surface touchée et la peau~\cite{bergmanntiest2010tactual}:
-Si de la chaleur est extraite de (apportée à) la peau, la surface est perçue comme froide (chaude).
-Le métal sera perçu comme plus froid que du bois avec la même température de la pièce ; c'est une propriété importante pour discriminer les matériaux~\cite{ho2006contribution}.
-Cette perception est donc distincte de la température physique du matériau, et dépend de la conductance thermique et de la capacité thermique du matériau, du volume de l'objet, de la différence de température initiale entre la surface et la peau, et de l'aire du contact~\cite{kappers2013haptic}.
-Par exemple, un objet plus volumineux ou une surface plus lisse, augmentant l'aire de contact, augmente la circulation thermique et rend une sensation de température plus intense~\cite{bergmanntiest2008thermosensory}.
+Temperature (or coldness/warmness) is the perception of the \emph{transfer of heat} between the touched surface and the skin~\cite{bergmanntiest2010tactual}:
+When heat is removed from (added to) the skin, the surface is perceived as cold (hot).
+Metal will be perceived as colder than wood at the same room temperature: This perception is different from the physical temperature of the material and is therefore an important property for distinguishing between materials~\cite{ho2006contribution}.
+This perception depends on the thermal conductivity and heat capacity of the material, the volume of the object, the initial temperature difference and the area of contact between the surface and the skin~\cite{kappers2013haptic}.
+For example, a larger object or a smoother surface, which increases the contact area, causes more heat circulation and a more intense temperature sensation (hot or cold)~\cite{bergmanntiest2008thermosensory}.
 
 %Parce qu'elle est basée sur la circulation de la chaleur, la perception de la température est plus lente que les autres propriétés matérielles et demande un toucher statique (voir \figref{exploratory_procedures}) de plusieurs secondes pour que la température de la peau s'équilibre avec celle de l'objet.
 %La température $T(t)$ du doigt à l'instant $t$ et au contact avec une surface suit une loi décroissante exponentielle, où $T_s$ est la température initiale de la peau, $T_e$ est la température de la surface, $t$ est le temps et $\tau$ est la constante de temps:
@@ -337,29 +337,30 @@ Par exemple, un objet plus volumineux ou une surface plus lisse, augmentant l'ai
 \subsubsection{Spatial Properties}
 \label{spatial_properties}
 
-Le poids, la taille et la forme d'un objet sont des propriétés haptiques dites spatiales qui sont indépendantes des propriétés matérielles décrites précédemment.
+Weight, size and shape are haptic spatial properties that are independent of the material properties described above.
 
-Le poids (ou heaviness/lightness) est la perception de la \emph{masse} de l'objet~\cite{bergmanntiest2010haptic}.
-Elle est typiquement estimé en tenant l'objet dans la paume de la main de façon statique, an \enquote{unsupported holding} (voir \figref{exploratory_procedures}).
-Une différence relative de poids de \percent{8} est alors nécessaire être perceptible~\cite{brodie1985jiggling}.
-En soulevant l'objet, il est possible de sentir en plus la force d'inertie de l'objet, \ie la résistance à la vitesse. Cela donne un indice perceptuel supplémentaire de sa masse et permet d'améliorer légèrement la discrimination de poids~\cite{brodie1985jiggling}.
-Dans les deux cas, les indices kinesthésiques de force sont beaucoup plus importants que les indices cutanés de pression~\cite{bergmanntiest2012investigating}.
+Weight (or heaviness/lightness) is the perceived \emph{mass} of the object~\cite{bergmanntiest2010haptic}.
+It is typically estimated by holding the object statically in the palm of the hand to feel the gravitational force (see \secref{exploratory_procedures}).
+A relative weight difference of \percent{8} is then required to be perceptible~\cite{brodie1985jiggling}.
+By lifting the object, it is also possible to feel the object's force of inertia, \ie its resistance to velocity.
+This provides an additional perceptual cue to its mass and slightly improves weight discrimination.
+For both gravity and inertia, kinesthetic cues to force are much more important than cutaneous cues to pressure~\cite{bergmanntiest2012investigating}.
 %Le lien entre le poids physique et l'intensité perçue est variable selon les individus~\cite{kappers2013haptic}.
 
-La taille peut être la perception de la \emph{longueur} de l'objet (sur une dimension) ou de son \emph{volume} (en trois dimensions)~\cite{kappers2013haptic}.
-Dans les deux cas et si l'objet est assez petit, un grip de précision (voir \figref{gonzalez2014analysis}) entre le pouce et l'index permet de discriminer des tailles avec une précision de \qty{1}{\mm} mais une sur-estimation de la longueur (loi de puissance avec un exposant \qty{1.3}).
-Sinon, il est nécessaire de suivre les contours de l'objet avec les doigts pour estimer sa longueur (voir \figref{exploratory_procedures}), mais avec une précision dix fois moins bonne et une sous-estimation de la longueur (loi de puissance avec un exposant \qty{0.9})~\cite{bergmanntiest2011cutaneous}.
-La perception du volume d'un objet qui n'est pas petit se fait typiquement par une enclosure de la main, mais l'estimation est fortement influencée par la taille, la forme et la masse de l'objet, pour un volume identique~\cite{kahrimanovic2010haptic}.
+Size can be perceived as the object's \emph{length} (in one dimension) or its \emph{volume} (in three dimensions)~\cite{kappers2013haptic}.
+In both cases, and if the object is small enough, a precision grip (see \figref{gonzalez2014analysis}) between the thumb and index finger can discriminate between sizes with an accuracy of \qty{1}{\mm}, but with an overestimation of length (power law with exponent \qty{1.3}).
+Alternatively, it is necessary to follow the contours of the object with the fingers to estimate its length (see \secref{exploratory_procedures}), but with ten times less accuracy and an underestimation of length (power law with an exponent of \qty{0.9})~\cite{bergmanntiest2011cutaneous}.
+The perception of the volume of an object that is not small is typically done by hand enclosure, but the estimate is strongly influenced by the size, shape and mass of the object, for an identical volume~\cite{kahrimanovic2010haptic}.
 
-La forme de l'objet peut-être définie comme la perception de sa \emph{géométrie globale}, \ie de sa forme et de ses contours.
-C'est par exemple quand on cherche une clé dans une poche.
-L'exploration de contours et l'enclosure sont alors employés, comme pour l'estimation des longueur et du volume.
-Si l'objet est non connu a priori, son identification objet est alors plutôt lente prends plusieurs secondes~\cite{norman2004visual}.
-C'est pourquoi, l'exploration d'autres propriétés est alors privilégié pour reconnaitre l'objet plus rapidement, en particulier des bords marqués~\cite{klatzky1987there}, \eg une vis parmi des clous (voir \figref{plaisier2009salient_2}), ou des propriétés matérielles particulières~\cite{lakatos1999haptic,plaisier2009salient}, \eg un objet en métal parmi des objets en plastique.
+The shape of an object can be defined as the perception of its \emph{global geometry}, \ie its shape and contours.
+This is the case, for example, when looking for a key in a pocket.
+The exploration of contours and enclosure are then employed, as for the estimation of length and volume.
+If the object is not known in advance, object identification is rather slow, taking several seconds~\cite{norman2004visual}.
+Therefore, the exploration of other properties is favoured to recognize the object more quickly, in particular marked edges~\cite{klatzky1987there}, \eg a screw among nails (see \figref{plaisier2009salient_2}), or certain material properties~\cite{lakatos1999haptic,plaisier2009salient}, \eg a metal object among plastic objects.
 
-\begin{subfigs}{plaisier2009salient}{Identification d'une sphère parmi des cubes~\cite{plaisier2009salient}. }[
-        \item La forme a un effet important sur la perception du volume d'un objet, \eg une sphère est perçue plus petite qu'un cube de même volume.
-        \item L'absence de bord marqué sur la sphère la rend facile à identifier parmi des cubes.
+\begin{subfigs}{plaisier2009salient}{Identifcation of a sphere among cubes~\cite{plaisier2009salient}. }[
+        \item The shape has a significant effect on the perception of the volume of an object, \eg a sphere is perceived smaller than a cube of the same volume.
+        \item The absence of a marked edge on the sphere makes it easy to identify among cubes.
     ]
     \subfigsheight{40mm}
     \subfig{plaisier2009salient_1}
@@ -370,8 +371,8 @@ C'est pourquoi, l'exploration d'autres propriétés est alors privilégié pour
 \subsection{Conclusion}
 \label{haptic_sense_conclusion}
 
-La perception haptique et la manipulation des objets avec la main implique donc plusieurs mécanismes simultanés aux interactions complexes.
-Ainsi, des mouvements exploratoires de la main sont effectués au contact de l'objet afin obtenir de multiples informations sensorielles venant de plusieurs capteurs cutanés et kinesthésiques.
-Ces sensations traduisent des paramètres physiques en indices perceptuels qui sont alors intégrés pour former une perception de la propriété explorée.
-Il est fréquent qu'un indice perceptuel soit particulièrement important dans la perception d'une propriété, mais une certaine constance perceptuelle est possible en compensant son absence par d'autres.
-Ces perceptions permettent en retour de guider la préhension et la manipulation de l'objet en adoptant avec la main des préhensions et forces adaptées à la forme de l'objet et à la tâche à réaliser.
+Haptic perception and manipulation of objects with the hand involves several simultaneous mechanisms with complex interactions.
+Exploratory movements of the hand are performed on contact with the object to obtain multiple sensory information from several cutaneous and kinaesthetic receptors.
+These sensations express physical parameters in the form of perceptual cues, which are then integrated to form a perception of the property being explored.
+It is often the case that one perceptual cue is particularly important in the perception of a property, but perceptual constancy is possible by compensating for its absence with others.
+In turn, these perceptions help to guide the grasping and manipulation of the object by adapting the grasp type and the forces applied to the shape of the object and the task to be performed.

1-introduction/related-work/2-wearable-haptics.tex

@@ -209,9 +209,6 @@ A common method vibrotactile rendering of texture is to use a sinusoidal signal
 
 \cite{kildal20103dpress}
 
-pacchierotti2014improving
-pacchierotti2015enhancing
-park 2017 Compensation of perceived hardness of a virtual object with cutaneous feedback
 \cite{park2019realistic}
 \cite{choi2021perceived}
 \cite{park2023perceptual}
@@ -219,6 +216,8 @@ park 2017 Compensation of perceived hardness of a virtual object with cutaneous
 \cite{detinguy2018enhancing}
 \cite{salazar2020altering}
 \cite{yim2021multicontact}
+
+\cite{park2017compensation}
 \cite{tao2021altering}
 
 \subsubsection{Friction}

1-introduction/related-work/3-augmented-reality.tex

@@ -39,21 +39,21 @@ Yet, most of the research have focused on visual augmentations, and the term \AR
 \paragraph{Applications}
 
 Advances in technology, research and development have enabled many usages of \AR, including medicine, education, industrial, navigation, collaboration and entertainment applications~\cite{dey2018systematic}.
-For example, \AR can help surgeons to visualize \ThreeD images of the brain overlaid on the patient's head prior or during surgery (see \figref{watanabe2016transvisible}) or improve the learning of students with complex concepts and phenomena such as optics or chemistry (see \figref{bousquet2024reconfigurable}).
-It can also guide workers in complex tasks, such as assembly, maintenance or verification (see \figref{hartl2013mobile}), or can create complete new forms of gaming or tourism experiences (see \figref{roo2017inner}).
+For example, \AR can help surgeons to visualize \ThreeD images of the brain overlaid on the patient's head prior or during surgery, \eg in \figref{watanabe2016transvisible}~\cite{watanabe2016transvisible}, or improve the learning of students with complex concepts and phenomena such as optics or chemistry~\cite{bousquet2024reconfigurable}.
+It can also guide workers in complex tasks, such as assembly, maintenance or verification, \eg in \figref{hartl2013mobile}~\cite{hartl2013mobile}, reinvent the way we interact with desktop computers, \eg in \figref{lee2013spacetop}~\cite{lee2013spacetop}, or can create complete new forms of gaming or tourism experiences, \eg in \figref{roo2017inner}~\cite{roo2017inner}.
 Most of (visual) \AR/\VR experience can now be implemented with commercially available hardware and software solutions, in particular for tracking, rendering and display.
 Yet, the user experience in \AR is still highly dependent on the display used.
 
 \begin{subfigs}{ar_applications}{Examples of \AR applications. }[
-        \item Neurosurgery visualization of the brain on a patient's head~\cite{watanabe2016transvisible}.
-        \item HOBIT is a spatial, tangible \AR table simulating an optical bench for educational experimentations~\cite{bousquet2024reconfigurable}.
+        \item Neurosurgery \AR visualization of the brain on a patient's head~\cite{watanabe2016transvisible}.
+        \item SpaceTop is transparent \AR desktop computer featuring direct hand interaction with content~\cite{lee2013spacetop}.
         \item \AR can interactively guide in document verification tasks by recognizing and comparing with virtual references
         ~\cite{hartl2013mobile}.
-        \item Inner Garden is a visually augmented zen garden for relaxation and meditation~\cite{roo2017inner}.
+        \item Inner Garden is a tangible, spatial \AR zen garden for relaxation and meditation~\cite{roo2017inner}.
     ]
     \subfigsheight{45mm}
     \subfig{watanabe2016transvisible}
-    \subfig{bousquet2024reconfigurable}
+    \subfig{lee2013spacetop}
     \subfig{hartl2013mobile}
     \subfig{roo2017inner}
 \end{subfigs}
@@ -123,6 +123,8 @@ Mais il faut pouvoir permettre à l'utilisateur d'interagir avec l'environment e
 
 \subsubsection{Interaction Techniques}
 
+\paragraph{Reducing the Physical-Virtual Gap}
+
 Pour cela il faut des techniques d'interaction, \cite{billinghurst2005designing} : Physical Elements as Input -- Interaction Technique --> Virtual Elements as Output.
 Les techniques d'interactions sont cruciales pour l'expérience utilisateur, car elles dictent en grande partie la cohérence du système (voir \secref{ar_presence}) par la qualité des actions possible avec l'environment virtuel.
 "il s’agit de lier des entrées utilisateurs issues de capteurs physiques (souris, écran tactile, images d’une caméra) à des actions sur l’ordinateur représentées par un résultat en sortie (affichage, son, commande) via une technique d’interaction"
@@ -130,22 +132,33 @@ ex : "La technique d’interaction est donc une méthode qui permet de traduire
 Principe IHM : [Van Dam, 1997] : réduire l'écart entre les éléments physiques et virtuels, \ie en un sens rendre l'interaction la plus "naturelle" possible, la moins "visible" possible.
 En RA, surtout immersive et portable, cet écart peut être tellement réduit qu'il n'est presque plus perceptible par l'utilisateur et l'interaction peut être pratiquement la même qu'avec le \RE, \ie essentiellement toucher, saisir et manipuler les objets virtuels directement avec les mains.
 
-\cite{laviola20173d} a classé les techniques d'interactions avec les \VE en trois catégories : \enquote{navigation}, \enquote{selection} et \enquote{manipulation}.
+\paragraph{Tasks}
+
+\cite{laviola20173d} a classé les techniques d'interactions avec les \VE en trois catégories selon la tâche qu'elles aident à accomplir : \enquote{navigation}, \enquote{selection} et \enquote{manipulation}.
 La navigation est le déplacement de l'utilisateur dans le \VE, mais dans le cas d'un casque de RA, le \VE est aligné avec le \RE et sont perceptuellement un seul et même environment augmenté (immersion) : la navigation est donc essentiellement le déplacement de l'utilisateur dans le \RE. Pour cela le casque se repère dans le \RE avec des capteurs et algorithmes de tracking et l'affichage du \VE est déplacé et orienté similairement au déplacement réel afin de l'afficher dans la bonne perspective de l'utilisateur. Voir aussi \cite{marchand2016pose} pour une revue des techniques de tracking pour la RA.
 La sélection est le choix d'un objet virtuel dans le \VE, et la manipulation est l'interaction avec cet objet, \ie le déplacer, le tourner, le redimensionner, etc.
 
-\subsubsection{Virtual Hands in AR}
+\cite{hertel2021taxonomy} a proposé une taxonomie des techniques d'interactions spécifiquement en RA, en se basant sur les tâches et les modalités d'entrée utilisées.
+Les tâches proposées sont la création, la sélection, la manipulation (géométrique), la manipulation abstraite, et l'entrée de texte.
+Chacune de ces tâche peut-être potentiellement réalisée par
+
+\paragraph{Natural Interaction in AR}
 
 Dans le cas de la RA immersive avec une interaction "naturelles" (cf \cite{billinghurst2005designing}), la sélection consiste à toucher l'objet virtuel avec les mains, et la manipulation à le saisir et le déplacer avec les mains.
 C'est ce qu'on appelle les "virtual hands" : les mains virtuelles de l'utilisateur dans le \VE.
 Le dispositif d'entrée n'est pas une manette comme c'est souvent le cas en VR, mais directement les mains.
-Les mains sont donc détectées et reproduites dans le \VE,
+Les mains sont donc détectées et reproduites dans le \VE.
 
-Maglré tout, le principal problème de l'interaction naturelle avec les mains dans un \VE, outre la détection des mains, est le manque de contrainte physique sur le mouvement de la main et des doigts, ce qui rend les actions fatiguantes, imprécises (on ne sait pas si on touche l'objet virtuel sans retour haptique) et difficile (idem, sans retour haptique on ne sent pas l'objet glisser, et on a pas de confirmation qu'il est bien en main). Des techniques d'interactions d'une part sont toujours nécessaire,et un retour haptique adapté aux contraintes d'interactions de la RA est indispensable pour une bonne expérience utilisateur.
+Maglré tout, le principal problème de l'interaction naturelle avec les mains dans un \VE, outre la détection des mains, est le manque de contrainte physique sur le mouvement de la main et des doigts, ce qui rend les actions fatiguantes (\cite{hincapie-ramos2014consumed}), imprécises (on ne sait pas si on touche l'objet virtuel sans retour haptique) et difficile (idem, sans retour haptique on ne sent pas l'objet glisser, et on a pas de confirmation qu'il est bien en main). Des techniques d'interactions d'une part sont toujours nécessaire,et un retour haptique adapté aux contraintes d'interactions de la RA est indispensable pour une bonne expérience utilisateur.
 
 Cela peut être aussi difficile à comprendre : "\cite{chan2010touching} proposent la combinaison de retours continus, pour que l’utilisateur situe le suivi de son corps, et de retours discrets pour confirmer ses actions." Un rendu et affichage visuel des mains est un retour continu, un bref changement de couleur ou un retour haptique est un retour discret. Mais cette combinaison n'a pas été évaluée.
 
-Prototypes : HandyAR and HoloDesk
+Deux techniques d'interactions naturelles avec les mains en RA immersive sont les plus courantes : les mains virtuelles et les tangibles.
+Quand l'objet est lointain, la sélection peut se faire avec des techniques de pointing ou des gestes (voir \cite{hertel2021taxonomy}).
+
+\subsubsection{Manipulating with Virtual Hands}
+
+\cite{hilliges2012holodesk}
 \cite{piumsomboon2013userdefined} : user-defined gestures for manipulation of virtual objects in AR.
 \cite{piumsomboon2014graspshell} : direct hand manipulation of virtual objects in immersive AR vs vocal commands.
 \cite{chan2010touching} : cues for touching (selection) virtual objects.
@@ -161,16 +174,16 @@ In OST-AR, this is more difficult because the virtual environment is displayed a
 Moreover, in VST-AR, the grip aperture and depth positioning of virtual objects often seem to be wrongly estimated~\cite{al-kalbani2016analysis, maisto2017evaluation}.
 However, this effect has yet to be verified in an OST-AR setup.
 
-An alternative is to render the virtual objects and the hand semi-transparents, so that they are partially visible even when one is occluding the other, \eg in \figref{hands-none} the real hand is behind the virtual cube but still visible.
+An alternative is to render the virtual objects and the hand semi-transparents, so that they are partially visible even when one is occluding the other, \eg the real hand is behind the virtual cube but still visible.
 Although perceived as less natural, this seems to be preferred to a mutual visual occlusion in VST-AR~\cite{buchmann2005interaction, ha2014wearhand, piumsomboon2014graspshell} and VR~\cite{vanveldhuizen2021effect}, but has not yet been evaluated in OST-AR.
-However, this effect still causes depth conflicts that make it difficult to determine if one's hand is behind or in front of a virtual object, \eg in \figref{hands-none} the thumb is in front of the virtual cube, but it appears to be behind it.
+However, this effect still causes depth conflicts that make it difficult to determine if one's hand is behind or in front of a virtual object, \eg the thumb is in front of the virtual cube, but it appears to be behind it.
 
 In VR, as the user is fully immersed in the virtual environment and cannot see their real hands, it is necessary to represent them virtually.
 Virtual hand rendering is also known to influence how an object is grasped in VR~\cite{prachyabrued2014visual,blaga2020too} and AR, or even how real bumps and holes are perceived in VR~\cite{schwind2018touch}, but its effect on the perception of a haptic texture augmentation has not yet been investigated.
 It is known that the virtual hand representation has an impact on perception, interaction performance, and preference of users~\cite{prachyabrued2014visual, argelaguet2016role, grubert2018effects, schwind2018touch}.
 In a pick-and-place task in VR, \textcite{prachyabrued2014visual} found that the virtual hand representation whose motion was constrained to the surface of the virtual objects performed the worst, while the virtual hand representation following the tracked human hand (thus penetrating the virtual objects), performed the best, even though it was rather disliked.
 The authors also observed that the best compromise was a double rendering, showing both the tracked hand and a hand rendering constrained by the virtual environment.
-It has also been shown that over a realistic avatar, a skeleton rendering (similar to \figref{hands-skeleton}) can provide a stronger sense of being in control~\cite{argelaguet2016role} and that minimalistic fingertip rendering (similar to \figref{hands-tips}) can be more effective in a typing task~\cite{grubert2018effects}.
+It has also been shown that over a realistic avatar, a skeleton rendering  can provide a stronger sense of being in control~\cite{argelaguet2016role} and that minimalistic fingertip rendering can be more effective in a typing task~\cite{grubert2018effects}.
 
 In AR, as the real hand of a user is visible but not physically constrained by the virtual environment, adding a visual hand rendering that can physically interact with virtual objects would achieve a similar result to the promising double-hand rendering of \textcite{prachyabrued2014visual}.
 Additionally, \textcite{kahl2021investigation} showed that a virtual object overlaying a tangible object in OST-AR can vary in size without worsening the users' experience nor the performance.
@@ -183,6 +196,20 @@ However, the experiment was carried out on a screen, in a non-immersive AR scena
 \textcite{saito2021contact} found that masking the real hand with a textured 3D opaque virtual hand did not improve performance in a reach-to-grasp task but displaying the points of contact on the virtual object did.
 To the best of our knowledge, evaluating the role of a visual rendering of the hand displayed \enquote{and seen} directly above real tracked hands in immersive OST-AR has not been explored, particularly in the context of virtual object manipulation.
 
+Mais se pose la question de la représentation, qui a montré des effets sur la performance et expérience utilisateur en RV mais reste peu étudiée en RA.
+
+\subsubsection{Manipulating with Tangibles}
+
+\cite{issartel2016tangible}
+\cite{englmeier2020tangible}
+en OST-AR \cite{kahl2021investigation,kahl2022influence,kahl2023using}
+
+Triple problème :
+il faut un tangible par objet, problème de l'association qui ne fonctionne pas toujours (\cite{hettiarachchi2016annexing}) et du nombre de tangibles à avoir
+et l'objet visuellement peut ne pas correspondre aux sensations haptiques du tangible manipulé (\cite{tinguy2019how}).
+C'est pourquoi utiliser du wearable pour modifier les sensations cutanées du tangible est une solution qui fonctionne en VR (\cite{detinguy2018enhancing,salazar2020altering}) et pourrait être adaptée à la RA.
+Mais, spécifique à la RA vs RV, le tangible et la main sont visibles, du moins partiellement, même si caché par un objet virtuel : comment va fonctionner l'augmentation haptique en RA vs RV ? Biais perceptuels ? Le fait de voir toucher avec sa propre main le tangible vs en RV où il est caché, donc illusion potentiellement plus forte en RV ?
+
 
 \subsection{Conclusion}
 \label{ar_conclusion}

1-introduction/related-work/4-visuo-haptic-ar.tex

@@ -33,9 +33,17 @@ A few works have also used pseudo-haptic feedback to change the perception of ha
 For example, different levels of stiffness can be simulated on a grasped virtual object with the same passive haptic device~\cite{achibet2017flexifingers} or
 the perceived softness of tangible objects can be altered by superimposing in AR a virtual texture that deforms when pressed by the hand~\cite{punpongsanon2015softar}, or in combination with vibrotactile rendering in VR~\cite{choi2021augmenting}.
 
-% Ban
+\cite{ban2012modifying}
+\cite{ban2014displaying}
+\cite{taima2014controlling}
+\cite{ujitoko2019presenting}
 
-% I. Jang and D. Lee. 2014. On utilizing pseudo-haptics for cutaneous fingertip.
+\cite{costes2019touchy}
+\cite{kalus2024simulating}
+\cite{detinguy2019how}
+\cite{samad2019pseudohaptic}
+\cite{issartel2015perceiving}
+\cite{ogawa2021effect}
 
 The vibrotactile sinusoidal rendering of virtual texture cited above was also combined with visual oscillations of a cursor on a screen to increase the roughness perception of the texture~\cite{ujitoko2019modulating}.
 However, the visual representation was a virtual cursor seen on a screen while the haptic feedback was felt with a hand-held device.
@@ -78,11 +86,13 @@ If it is indeed necessary to delocalize the haptic feedback, each of these posit
 \subsection{Improving the Interactions with Virtual Objects}
 \label{vhar_interaction}
 
+\cite{pacchierotti2015cutaneous}
+
 Conjointly, a few studies have explored and compared the effects of visual and haptic feedback in tasks involving the manipulation of virtual objects with the hand.
 \textcite{sarac2022perceived} and \textcite{palmer2022haptic} studied the effects of providing haptic feedback about contacts at the fingertips using haptic devices worn at the wrist, testing different mappings.
 Results proved that moving the haptic feedback away from the point(s) of contact is possible and effective, and that its impact is more significant when the visual feedback is limited.
 
-In pick-and-place tasks in AR involving both virtual and real objects, \textcite{maisto2017evaluation} and \textcite{meli2018combining} showed that having a haptic {rendering of the} fingertip interactions with the virtual objects led to better performance and perceived effectiveness than having only a visual rendering of the hand, similar to \figref{hands-tips}.
+In pick-and-place tasks in AR involving both virtual and real objects, \textcite{maisto2017evaluation} and \textcite{meli2018combining} showed that having a haptic {rendering of the} fingertip interactions with the virtual objects led to better performance and perceived effectiveness than having only a visual rendering of the hand.
 Moreover, employing the haptic ring of~\cite{pacchierotti2016hring} on the proximal finger phalanx led to an improved performance with respect to more standard fingertip haptic devices~\cite{chinello2020modular}.
 However, the measured difference in performance could be attributed to either the device or the device position (proximal vs fingertip), or both.
 

1-introduction/related-work/related-work.tex

@@ -3,12 +3,11 @@
 
 \chaptertoc
 
-This chapter reviews previous work on the perception and manipulation directly with the hand of \AEs using \WHs, \AR and their combination.
-Experiencing a visual, haptic, or visuo-haptic \AE relies on one to many interaction loops between a user and the environment, as shown in \figref[introduction]{interaction-loop}, and each main step must be addressed and understood: the tracking and modelling of the \RE into a \VE, the interaction techniques to act on the \VE, the rendering of the \VE to the user through visual and haptic user interfaces, and, finally, the user's perception and actions on the overall \AE.
-
+This chapter reviews previous work on the perception and manipulation of \AEs directly with the hand using \WHs, \AR and their combination.
+%Experiencing a visual, haptic, or visuo-haptic \AE relies on one to many interaction loops between a user and the environment, as shown in \figref[introduction]{interaction-loop}, and each main step must be addressed and understood: the tracking and modelling of the \RE into a \VE, the interaction techniques to act on the \VE, the rendering of the \VE to the user through visual and haptic user interfaces, and, finally, the user's perception and actions on the overall \AE.
 To achieve this, we first describe how the hand senses and acts on its environment to perceive the haptic properties of real everyday objects.
-Secondly, we present how \WH devices and renderings have been used to provide tactile feedback and enhance the touch interaction with virtual and augmented objects, with a focus on vibrotactile feedback and haptic textures.
-Thirdly, we introduce the principles, implementations and user perception of \AR, and overview the main interaction techniques used to manipulate virtual and augmented objects.
+Secondly, we present how \WH devices and renderings have been used to augment the haptic perception with augmented objects, with a focus on vibrotactile feedback and haptic textures.
+Thirdly, we introduce the principles and user experience of \AR, and overview the main interaction techniques used to manipulate virtual and augmented objects.
 Finally, we present how multimodal visual and haptic feedback have been combined in \AR to modify the user perception of tangible objects, and to improve the user interaction with \VOs.
 
 \input{1-haptic-hand}