Archives

thumbnail
0 comment

news1 new1news1 new1news1 new1news1…

news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1 new1news1..

Read More
thumbnail
0 comment

mymy msyslslwlwlwlwlwwl

news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2 new2news2..

Read More
0 comment

Python技术栈

在日本Python也是一门非常受欢迎的编程语言,且使用人数越来越多。  和Java主要用来做安卓APP及后端服务器不同,Python的使用更多的集中在数据领域,比如数据爬虫,数据分析,RPA以及机器学习。那我们分开来说,  数据爬虫这一块,日本倒没有固定的工具,用scrapy和pyspider的比例也差不多。不过更主要的是日本法律的问题,数据爬虫属于灰色地带,所以在这一块的开发并不多。  在数据分析和国际上流行的一样,日本也是以pandas和numpy为主,需要对大数据进行分析的时候则是以pyspark+hadoop为主。  RPA这一块,桌面应用多是用pywinauto,网络应用还是以 selenium为主。  关于机器学习这一块,自从tensorflow 2.0集成了keras以后,企业里使用tensorflow的场景会比较多,但是研究所,学校里使用pytorch的研究者依然占据了大多数。  那还有少量的使用python做后端服务开发的公司,做轻量的微服务时会更倾向用flask,django则是更适合一些比较系统化的应用。 

Read More


近期文章

  • 日本IT岗位2030年人才缺口将高达79w人!薪资又要涨?!
    日本IT岗位2030年人才缺口将高达79w人!薪资又要涨?!   最近,日本发布了最新的国内行业薪资排行,上面显示:相比其他岗位,IT岗位的工资又涨了!而且预计2030年人才缺口将高达79w人!日本对IT技术人才的需求一直很大,而且最近显示这个需求又大大增加了。因为日本政府最近在积极推进数字化转型以及人工智能的研究开发,业务量需求很大。  首先,来看一下根据日本经济产业省预测的未来日本IT人才缺口情况的数据。  从这个数据上,可以看到2030年,日本IT人才缺口甚至会达到79w人。日本政府一向预测的比较保守,实际缺口可能更多。这意味着,现在日本的IT人才需求很大,各个行业的IT岗位出现大量短缺现象。由于非常缺人,这就导致了现在日本IT岗位跳槽后的涨薪幅度变得相当可观。   前几天,日本经济新闻发布了今年日本各行业IT人才收入的统计数据,IT人才跳槽后的年收入与其他岗位跳槽后的年收入平均值相比,增加了14%,高出75万日元,说明日本的IT人才市场价值正在持续上涨。  按照行业来看,其中分销和零售行业的IT人才需求最旺盛,和其他岗位相比,薪资相差约194万日元。其中零售业的大公司「イオン」和「ビックカメラ」最近也开出了2000万年薪的高价,这对于一向以贫富差距小而著名的日本来说,是个相当明显的信号。  根据日本内阁府2022年新发布的AI战略白皮书来看,日本将要大力发展人工智能行业,向智能化社会推进。而且人才引进被划入了战略目标,持续吸引海外人才成为了日本的国策,这意味着在法律和政策面,外国人的赴日手续和在日本的生活会获得更多的支持。  为什么日本IT岗位这么缺人?有四个原因。   一个是日本的国情导向,日本的老龄化和少子化非常严重,65岁以上的人口达到了28.9%,0~14岁的人口只有11.8%。相当于四个人中间就有一个老人,这是一个非常惊人的比例,所以日本劳动力是严重不足的。  不仅体现在IT行业,其他行业的需求也很高。只不过IT行业的需求更多,企业需求更急迫,随着数字化和智能化的推进,这个需求还会不断上涨。  另一个是因为目前日本企业(包括老字号企业)进行数字化转型的需求强烈,导致了本身就人才不足的IT行业的人才更加短缺。  虽然日本的产业结构非常成熟,但存在的问题是产业结构老旧,效率低。为了提高竞争力,很多企业在积极推动数字化改革,加强企业信息化建设,所以需要大量的IT人才去推动企业的变革。  第三个是最大的原因,日本年轻人认为IT行业并不是合适的就业选择,和其他发达国家一样,愿意从事:科学,技术,工程,数学的年轻人较少,这让本就不充裕的人才供给更是雪上加霜。 最后就是,和中美相比,日本的IT技术发展相对慢。   2021年,我和微软日本的招聘负责人聊了一下大数据的话题,得知全日本掌握Hadoop和Yarn的人不超过三位数这一消息,非常吃惊。   所以日本为了适应AI时代发展的步伐,政府和企业都扩大范围去引进外国人才和降低赴日门槛,试图通过外来人才改变日本国内的IT环境。所以,对想去日本工作的IT朋友而言也是一个机会。 首先就拿最近日本如火如荼的数字化转型来说,对应的技术岗位有:前端开发,后端开发(Java,Python居多),算法工程师、AI工程师,架构师,数据科学家等。  非技术岗位也有,比如:产品经理,项目经理,交付经理,系统工程师(SE)等。 不同于国内很多企业对初学者的专业以及能力要求非常高,日本的IT行业入门并不难。很多从业者都是文科生毕业后才转行的,大多数人之前并没有什么经验。  所以入行门槛并不高,只要在国内学完一些技术和日语口语后过去工作没有太大的问题。所以对于许多想转行IT人但苦于国内门槛高的同学来说,日本是一个比较好的候补选择。  基本入职1-2年的薪资在350—400w日元,起薪会比国内的高一些。在日本IT行业,十年以上经验的工程师的市场价格普遍在一千多万日元以上。  关于职业寿命的问题,日本IT行业平均年龄都在40岁左右,所以不存在35岁危机,头发花白还在敲代码也有不少。   日本IT行业基本都是双休,还有考虑到房价、医疗、教育这些方面的因素,在日本工作对于普通人来说会过的比较舒服。  在日本基本每个月都有公休假期,一年有三个黄金周,而且日本没有调休,会提供补假。  这里有一个比较好的福利,那就是如果法定节假日刚好是周日,那么下一个工作日(也就是周一),会自动变成假期。每年除了带薪休假,在一年中还享有企业内一些较长的福利性或季节性假期,很多企业都会在创立纪念日放假。  在日本工作都会上健康保险,相当于国内的医疗保险,如果生病就医,只需要支付实际医疗费用的30%,支付费用时直接就减免70%,在国外有保险会提供一定的保障。  这个厚生年金是由企业和职工本人各交纳一半,每月比正常多交一部分,退休后领的养老金也会比正常多一些。  还有高额疗养费制度,根据收入的不同,自己负担的上限也不相同。基本上年收入370w—770w日元为普遍收入区间,所以自己负担额度的上限为9万日元,超过9万日元的医药费由健康保险基金兜底。所以在日本基本没有听说过因病返贫的事情。  最后就是交通费、雇佣保险、出差补助、一年一到两次的奖金、公司旅游等等。 
  • 数字游民是什么?为什么能拿着高薪游遍全球?
    我曾经是一名高级算法工程师,在2021年后开始了数字游民的生活,人在国内的同时远程完成日本的开发项目,深圳,广州,新疆,海南都曾是我工作的场所。 赚发达国家的钱,在世界的任何一个角落生活,这就是数字游民的魅力。  数字游民是个什么玩意儿?  “周五下午和日本客户开完视频会议后去曼谷的小吃街转一下,再确认一下周末普吉岛潜水的行程,同时查看一下马来西亚的小吃,规划一下下周在吉隆坡的工作和生活。”  这些简简单单由地名和生活日常构成的词组看起来很简单,却是很多职场人无法企及的乌托邦式浪漫。  而过这样生活的人,则被称为数字游民。  能够通过互联网远程工作,这是成为数字游民必备的条件。有很多工作能符合这个要求,从平面设计师到互联网工程师到自由撰稿人,但更多的是具备在任何有WiFi的地方自由工作的能力。所以数字游民的工作场所包含了酒店,咖啡馆,图书馆等等。  如何成为一名自由的数字游民?  成为数字游民有两个基本要求:1.具备远程工作的技能;2能接到远程的项目。  什么是远程工作的技能  除了上述我说的几个工作之外,还有很多可以远程完成的工作,但最重要的是在不面对面的情况下,一个人完成这些工作的技能和实力。  这要求除了有过硬的技能外,还需要有很强的自我驱动力,很多时候要比上班摸鱼累多了。  项目机会从哪来  数字游民不是一个接受公司雇佣的员工,更像是一个经营自己的公司,所以公司和公司之间谈业务的商务沟通能力,商业人脉等等都会影响到是否可以接到远程的项目。  而我的优势在于外语沟通能力和靠谱的项目经历,所以获得了一次又一次的机会。  Covid-19爆发后,在疫情严重的国外,日趋主流的远程办公模糊了工作,休闲,家庭和旅行之间的区别,人们也从通勤中解放出来。2021年离开东京移住乡下的人数第一次超过了搬进东京的人数,毕竟如果不用去办公室,又有多少人愿意在大都会过摩肩擦踵的拥挤生活呢?  
  • 入门音乐人工智能的必备知识
    最初的音乐生成 1787 年,莫扎特组局“音乐骰子游戏”,玩家通过多次掷骰子来将预先写好的音乐片段串在一起,这些片段与骰子的六个面相关联。最终的结果是一首由片段随机组合的完整的乐曲——可以不断得到新的乐曲,由此开创了随机创作的先河。 具体的效果可以参考这个链接:https://vician.net/cs/mozart/ 随着1950年代计算机的问世,也诞生了一批计算机音乐作品,早期的计算机音乐构建了马尔科夫过程,利用随机模型并辅以rule-based的方法生成符合要求的成果。后来又随着机器学习技术的发展,如何运用算法和模型生成更自然的音乐成为一个新的前沿科研领域。 经过近百年的推动,部分AI创作已经达到可以以假乱真的地步。 这是获得法国作曲家协会(SACEM)的资格认证的AIVA生成的作品: 【Aiva – 一小时音乐合集】 https://www.bilibili.com/video/BV1jW411T7F9?share_source=copy_web&vd_source=7b0d73d8114eee0bff1b506ce3701539 随着算力和数据的不断增加,AI音乐技术也在不断进步。如果没有一定音乐基础的话,很多人是无法察觉出AI创作的音乐和人类创作的音乐之间的区别。 音乐人工智能究竟发展到什么水平了呢?已经应用在哪些领域了呢? 真实的情况是:研究略有,应用市场相对空白。 相比机器人、语言识别、图像识别、自然语言处理等人工智能的研究方向,音乐人工智能是一个相对小众的分支,获得的关注和进展也相对缓慢。 目前大多数的研究还处于模型和算法的研发阶段,主要集中在了如何将RNN,GAN,VAE等在其他领域大放光彩的模型应用到音乐生成的方向上。 现阶段的人工智能还只能依靠统计学对已经创造出来音乐进行复杂的归纳后,再根据概率进行音符的组合,也就是说现有统计学理论基础决定所有的AI音乐生成都是随机过程,导致的成果品质良莠不齐,还无法稳定地投入到商业生产环节。 而AI的自主创新是一大挑战也几乎不可能完成。就像卡农不知养活了多少钢琴师,AI可以在拥有先例的情况下尝试小范围的调整,但永远也跳不出那个框,永远无法产出新的东西。如何创造出卡农这种范式,则仍是天才们的领域。或许之后符号主义的知识图谱(knowledge graph:把事物间复杂的逻辑关系用图论展现)能够帮助AI拥有更多的创造力。 音乐人工智能的商业动态如何?IT人员入局的机会点在哪? 国内外市场上,人工智能科技巨头公司和一些大公司虽然在积极布局,但是暂时还没产生实质性收益。 国外: AIVA Technologies 2016年发布了第一首人工智能交响乐 NVIDIA的AIVA音乐样例(2016年,交响乐): https://www.bilibili.com/video/BV1ob411B7yv   微软亚洲研究院的muzic 微软亚洲研究院机器学习组一直致力于....
  • 普通人如何拿日本永住签证
    通常来说,日本永住签证要求申请人在日本居住十年以上,且这十年期间每年离开日本境内不超过半年,至少有五年工作经历并且正常缴纳税金,拥有独立生活的资产或者技能,无犯罪记录,如果是工作签则需要3年以上的签证,1年的签证无法获得永住身份。 永住的申请条件 一、永住的申请条件如下: 1、在日本持续生活十年以上 2、工作满五年以上 3、申请时持有三年或五年的在留资格 4、没有犯罪记录 5、按规定纳税 6、有足够维持生活的资产 7、年收入不少于300万日元   二、申请材料 1、基本资料 永驻许可申请书 护照 外国人登录证明书或在留卡 2、证明身份的资料 日本人配偶者:日本人的户籍副本 日本人子女:日本人父母的户籍副本、出生证明书 永驻者配偶者:婚姻证明书(结婚证的副本等) 永驻者子女:出生证明书、父母的结婚证明书 3、日本相关资料 住民票(全家人份) 在职证明书(扶养申请人或申请人的部分) 如果是公司经营和个体经营等,需要公司誉本、确定申告书副本的复印件 最近三年的居民税课税证明书 最近三年的居民税纳税证明书 存款存折或余额证明书的复印件 4、保证人资料 身份保证书....
  • 如何在日本做数字游民
    富兰克林说过:”世界上只有两件事不可避免,那就是税收和死亡。“而成为数字游民也“不可避免”地需要考虑到纳税问题。  数字游民的纳税问题 通常我国公民默认是需要在国内缴纳个人所得税的,但是我国跟其他许多国家签有个人税费方面的协议,在签署协议的国家所缴纳的税款可以抵扣国内的应缴所得税,比如我国和日本之间就有个人所得税的抵扣协议。  在日本做数字游民的要求 外国人在日本做数字游民有两个额外要求:  开设日本的银行账户。这是因为公司给个人汇款的时候,如果是境外账户那就涉及到进出口,这不管是对个人还是公司都是一个负担。  良好的日语沟通能力。大部分的项目还是日语为基础,虽然也有少数的全英文项目,但是日语沟通流畅的话,机会无疑是多很多的。  当我们准备好了以后,就要面临数字游民生活的第一个挑战——找项目。  如何接到日本远程开发项目 数字游民的项目机会通常有两种,一种是来自熟人介绍或转介绍,这种机会是得益于之前积累的人脉资源,也更适合经验丰富的人;另一种来自接单平台,比较适合刚入门的数字小白,虽然单价不会太高,但是单子多、门槛低。  作为一名合格的数字游民,除了要维护好之前积累的人脉资源,更重要的是,要熟悉市面上比较好的接单平台,这都是我们安身立命的根本,那数字小白如何利用接单平台在日本接到单子呢?  日本接单平台有哪些?  在这里我先分享一些带有翻译、设计等综合性区域的接单平台。  ココナラ( https://coconala.com):在经历了头几年的沉寂之后,ココナラ在这几年的用户数突飞猛进,在平台上的成交量也越来越高。ココナラ上的项目类型覆盖的非常广,从日常生活的测字算命、情感咨询到商业项目的网站开发,Youtube代运营等都有涉及。同时网站风格也更偏现代的审美,自由职业者能以展示的形式对自己所擅长的各类技能做宣传,提高自己在各个分类中的排名,等待合作者联系自己,也可以主动出击,报名正在公开招募的项目。 クラウドワークス(https://crowdworks.jp):平台名源自英文Crowdsourcing,中文翻译为众包。比起ココナラ覆盖面广,toC较多的特征,クラウドワークス更倾向于专业项目,toB项目会比较多,在市场占有率上也是排名日本国内第一。覆盖的项目范围主要集中在商业项目,比如:网页设计,系统开发,文案编写,翻译,动画剪辑等等。与ココナラ可以建立自己的店铺,等待其他人联系自己不同,クラウドワークス只能自己去报名项目。 CrowdTech ( https://levtech.jp), 是CrowdWorks旗下的一个品牌,专门针对IT行业打造的接单平台,在UI和流程上做了全面的更新。在注册好,填好信息后就会有专门的顾问通过邮件联系我们,约好时间面谈后会对我们的背景,对项目的要求,单价等等做一个综合的询问。之后顾问也会不断给我们推荐项目,同时我们也可以在网站上浏览项目。一键报名后进入投标,之后通过的话就会有企业的人联系我们面谈的事情。    LevelTech ,也是专门面向日本IT行业的人才服务平台,旗下的carrer负责IT行业的转职等服务,Freelance业务则负责自由职业的业务。这个平台跟上述CrowdTech类似,都是在网站上报名后会有顾问联系我们。之后支付时的价格也是在平台上完成。 フリーランススタート,IT行业最大的接单平台。里面既有案子,也有各种中介,因为有些项目是非公开的。也可以开放自己的简历,让agent联系我们。这里要注意的是,每个agent的付款时间不一样,有的是月初支付,有的是月末支付,也有是隔月支付的。 另外,在日本IT行业常用的沟通工具是Slack ,项目管理工具是jira/assana ,文件共享是google drive/dropbox 。代码管理平台多是github/gitlab 。 ....