築３５年程度の自宅（戸建て）に対し、隣人（80代）が「土地の境界線が我が家（土地）に侵入している。その分を買い取れ」という主張をしてきました。

?建てた当時から隣人は同じ方です。今になって急に主張しています。
?境界線や境界杭は隣人が自分で測って判断しています
?登記や図面などから間違った主張と思われるが、隣人は自分の判断が正しいという主張です
?境界杭などは自分が立ち会っていないので無効だと主張
※やましいことがあるから立ち会わせなかったという言い分
?正しい境界はココだ。と勝手に私の敷地内にペンキで線を引きました
?測量士に頼むから費用を出せと主張⇒断りました
こちらから測量士や土地家屋調査士に頼むつもりもありません⇒隣人が間違っていても費用を出すとは思えません。
?朝、夜と構わず文句を言いに来るので居留守を使うと、自宅前や敷地内に自分の主張を示した書面をバラまいています
⇒?警察に相談し、口頭で注意をされていました

ここからが難しいのですが、どうやら認知症の疑いがあります。（警察の方の意見）
警察に注意された時も「知らない」と言っていました。ただ、書面に氏名の記載があるため、言い逃れできていません。

この状態だと、仮に隣人が測量士に頼むなどして、主張が間違っていたと証明しても、振り上げた拳の下ろし先がなく、もっと怖いことになりそうです。（嫌がらせ、物理的な損害など）
正当性を示せば良いわけではない場合、どうしたらいいのでしょうか？？

また、万が一本当に土地の侵奪があったとして、建てた当時の建築会社はもうありませんので、責任の所在は私にあるのでしょうか。